Крупный прорыв в телепатической связи между человеком и ИИ: MindSpeech расшифровывает мысли в текст

В революционном шаге вперед в взаимодействии между человеком и ИИ ученые в MindPortal успешно разработали MindSpeech, первую модель ИИ, способную расшифровывать непрерывную воображаемую речь в связный текст без каких-либо инвазивных процедур. Этот прорыв представляет собой значительную веху в поисках бесшовного и интуитивного общения между людьми и машинами.

Пионерское исследование: неинвазивная расшифровка мыслей

Исследование, проведенное командой ведущих экспертов и опубликованное на arXiv и ResearchGate, демонстрирует, как MindSpeech может расшифровывать сложные, свободные мысли в текст под контролируемыми условиями тестирования. В отличие от предыдущих попыток, которые требовали инвазивной хирургии или были ограничены простыми, заученными вербальными сигналами, это исследование показывает, что ИИ может динамически интерпретировать воображаемую речь из мозговой активности неинвазивно.

Исследователи использовали портативную, высокоплотную функциональную ближнюю инфракрасную спектроскопию (fNIRS) систему для мониторинга мозговой активности, пока участники представляли предложения на различные темы. Новый подход включал задание “облака слов”, где участникам представлялись слова и просили представлять предложения, связанные с этими словами. Это задание охватывало более 90% наиболее часто используемых слов в английском языке, создавая богатый набор данных из 433 до 827 предложений на участника, со средней длиной 9,34 слова.

Использование передовых ИИ: Llama2 и сигналы мозга

Компонент ИИ MindSpeech был запитан от Llama2 Большой языковой модели (LLM), сложного инструмента генерации текста, управляемого встроенными сигналами мозга. Эти встроенные сигналы были созданы путем интеграции сигналов мозга с контекстным входным текстом, позволяя ИИ генерировать связный текст из воображаемой речи.

Ключевые метрики, такие как BLEU-1 и BERT P, были использованы для оценки точности модели ИИ. Результаты были впечатляющими, показывая статистически значимые улучшения точности расшифровки для трех из четырех участников. Например, у участника 1 балл BLEU-1 был значительно выше – 0,265 по сравнению с 0,224 при перестановке входных данных, с p-значением 0,004, указывающим на прочную производительность при генерации текста, тесно связанного с воображаемыми мыслями.

Картирование мозговой активности и обучение модели

Исследование также картографировало мозговую активность, связанную с воображаемой речью, сосредоточив внимание на областях, таких как латеральная височная кора, дорсолатеральная префронтальная кора (DLPFC) и области визуальной обработки в затылочной области. Эти результаты согласуются с предыдущими исследованиями кодирования речи и подчеркивают осуществимость использования fNIRS для неинвазивного мониторинга мозга.

Обучение модели ИИ включало сложный процесс настройки подсказок, где сигналы мозга преобразовывались во встроенные сигналы, которые затем использовались для управления генерацией текста LLM. Этот подход позволил генерировать предложения, которые были не только лингвистически связными, но и семантически подобными исходным воображаемым мыслям.

Шаг к бесшовному общению между человеком и ИИ

MindSpeech представляет собой прорывное достижение в исследованиях ИИ, демонстрирующее впервые, что возможно расшифровывать непрерывную воображаемую речь из мозга без инвазивных процедур. Это развитие открывает путь к более естественному и интуитивному общению с системами ИИ, потенциально преобразуя, как люди взаимодействуют с технологиями.

Успех этого исследования также подчеркивает потенциал для дальнейших достижений в этой области. Хотя технология еще не готова для широкого использования, результаты дают представление о будущем, где телепатическое общение с ИИ может стать реальностью.

Последствия и будущие исследования

Последствия этого исследования огромны, от улучшения вспомогательных технологий для людей с нарушениями коммуникации до открытия новых рубежей в взаимодействии человека и компьютера. Однако исследование также указывает на проблемы, которые лежат впереди, такие как улучшение чувствительности и общности модели ИИ и адаптация ее к более широкому кругу пользователей и приложений.

Будущие исследования будут сосредоточены на усовершенствовании алгоритмов ИИ, расширении набора данных с большим количеством участников и изучении реальных приложений технологии. Цель – создать действительно бесшовный и универсальный интерфейс мозг-компьютер, который может расшифровывать широкий спектр мыслей и идей в текст или другие формы общения.

Заключение

MindSpeech – это пионерский прорыв в общении между человеком и ИИ, демонстрирующий невероятный потенциал неинвазивных интерфейсов мозг-компьютер.

Читателям, которые хотят узнать больше об этой компании, следует прочитать наш интервью с Экрамом Аламом, генеральным директором и сооснователем MindPortal, где мы обсуждаем, как MindPortal взаимодействует с большими языковыми моделями через психические процессы.