Ученые научились переводить мозговую активность в текст

Ученые научились переводить мозговую активность в текст

Ученые из Йельского, Дартмутского и Кембриджского университетов разработали модель MindLLM, способную преобразовывать сигналы функциональной магнитно-резонансной томографии (fMRI) в текст. В отличие от предыдущих методов, она не требует индивидуальной настройки для каждого человека. Ранее попытки перевести мозговую активность в текст сталкивались с проблемами низкой точности, ограниченного набора задач и невозможности работы с разными людьми. Существующие модели зависели от индивидуальных особенностей мозга и плохо переносили знания на новых пользователей. MindLLM использует иной подход, основанный на обработке общих закономерностей работы мозга, что позволяет ей лучше адаптироваться к разным людям и задачам. Модель включает два ключевых компонента: fMRI-энкодер и языковую нейросеть. Сканирование мозга делит его на крошечные трехмерные участки — воксели, количество и расположение которых варьируются у разных людей. Однако функции мозга остаются схожими, и MindLLM анализирует активность мозга, учитывая эту особенность. Специальный механизм обработки сигналов помогает модели понимать смысл информации, а методика Brain Instruction Tuning (BIT) улучшает ее способность расшифровывать семантические данные. Это позволяет MindLLM выполнять сложные задачи, такие как создание описаний по сигналам мозга, ответы на вопросы и логические рассуждения. В...
01.03.2025
Сообщает: Источник  
Рубрика: «Наука и Техника»   Поделиться: Поделиться новостью в Facebook Поделиться новостью в Twittere Поделиться новостью в VK Поделиться новостью в Pinterest Поделиться новостью в Reddit

Ученые: Нейросети снижают мозговую активностьУченые: Нейросети снижают мозговую активность Использование нейросетей быстро входит в повседневную практику. Нейросети помогают писать самые разные тексты — от обычных поздравлений коллегам до ж ...

Учёные сломали барьер: как активность мозга превращают в текст  секрет технологии, о которой молчатУчёные сломали барьер: как активность мозга превращают в текст — секрет технологии, о которой молчат Группа учёных из Йельского, Дартмутского и Кембриджского университетов представила революционную технологию — MindLLM. Эта система способна преобразо ...

Спите мало Креатин может повысить мозговую активность  вот что показывают исследованияСпите мало? Креатин может повысить мозговую активность — вот что показывают исследования Исследования показывают, что креатин, известный как добавка для увеличения мышечной массы и силы, также может улучшать когнитивные функции, особенно ...

Как автоматически переводить голосовые сообщения в текст в WhatsApp на iPhoneКак автоматически переводить голосовые сообщения в текст в WhatsApp на iPhone Признаюсь вам честно: терпеть не могу голосовые сообщения. Особенное, когда их присылают неожиданно и без согласования со мной. В большинстве случаев ...

Еще 5 минут: ученые не разрешают переводить будильникЕще 5 минут: ученые не разрешают переводить будильник Ученые из США и Швеции проинформировали, почему стоит отказаться от привычки постоянно переводить будильник на 5 минут, пишет Nature. Такой режим вво ...

Учёные Smart Engines научили ИИ распознавать рукописный текст на русском языкеУчёные Smart Engines «научили» ИИ распознавать рукописный текст на русском языке Российские учёные улучшили алгоритмы распознавания текстов нейросетями Российские специалисты из компании Smart Engines научили искусственный интелле ...

Учёные научились лечить синдром ДаунаУчёные научились лечить синдром Дауна Японские исследователи смогли полностью устранить 47-ю хромосому. Они модифицировали ДНК и убрали лишние участки. Это привело к тому, что гены, нервн ...

Учёные научились определять настроение животных по их глазамУчёные научились определять настроение животных по их глазам Тепловизионная технология помогает понять, как скот испытывает стресс. В научном журнале PLOS ONE было опубликованы результаты исследования, которое ...