Meta создала «мозговой декодер», который с помощью ИИ-модели расшифровывает мозговую активность и преобразует в речь. Инструмент можно использовать для мысленного общения между пользователями, которые произносят слова и фразы у себя в голове. Об исследовании компания рассказала в корпоративном блоге.
Технология Meta отличается от аналогичных разработок тем, что основывается на неинвазивных методах записи мозговой активности. Компания использовала электроэнцефалографию (ЭЭГ) и магнитоэнцефалографию (МЭГ), в которых применяются только наружные датчики. Данные от ЭЭГ и МЭГ менее точны, чем информация с датчиков, вживлённых в мозг, поэтому для большей эффективности пришлось обработать гораздо больший объём исходных данных.
ИИ фиксировал, как мозг участников реагирует на аудиокниги и отдельные фразы, а затем вычленял из текста нужные слова и составлял «словарь», по которому реализовали обратный процесс — преобразование мыслей в речь. Исследователи достигли точности в 73% при использовании набора из 793 наиболее часто используемых в повседневной жизни слов.