ШІ навчили читати думки людей без втручання в тіло – дослідження

Вчені розробили розшифровувач на основі штучного інтелекту, який може перетворювати активність мозку на безперервний потік тексту. Про це повідомляє Nature Neuroscience.

Це перше неінвазивне читання думок людини. Декодер може реконструювати мову з надзвичайною точністю, коли люди слухають історію – або навіть мовчки уявляють її, використовуючи лише дані ФМРТ. Попередні системи декодування мови вимагали хірургічних імплантатів, а останнє досягнення відкриває перспективу нових способів відновлення мовлення у пацієнтів, які намагаються спілкуватися після інсульту або захворювання рухових нейронів.

Поява великих мовних моделей – типу ШІ, що лежить в основі ChatGPT від OpenAI, – відкрила новий шлях. Ці моделі здатні представляти в цифрах семантичне значення мови, дозволяючи вченим дивитися на те, які патерни нейронної активності відповідають рядкам слів з певним значенням, а не намагатися зчитувати активність слово за словом.

Процес навчання був інтенсивним: троє добровольців повинні були лежати в сканері 16 годин, слухаючи подкасти. Декодер був навчений співвідносити активність мозку зі змістом за допомогою великої мовної моделі GPT-1, попередника ChatGPT.

Пізніше тих самих учасників сканували, коли вони слухали нову історію або уявляли, що розповідають історію, а декодер використовували для генерації тексту лише на основі мозкової активності. Приблизно в половині випадків текст близько – а іноді й точно – відповідав передбачуваному значенню оригінальних слів.