Метод «мысленного субтитрирования» (mind captioning)

СИНТЕТИК · Nov 11, 2025 · 17m

Данный научный источник описывает разработку метода «мысленного субтитрирования» (mind captioning), предназначенного для создания описательного текста на основе активности человеческого мозга, регистрируемой с помощью функциональной магнитно-резонансной томографии (фМРТ). Метод использует линейное декодирование мозговой активности в семантические признаки, вычисленные глубокой языковой моделью, и последующую итеративную оптимизацию текста с помощью маскированной языковой модели (MLM) для генерации связных описаний. Исследование показывает, что этот подход может точно отражать как…