Нейросеть из Израиля воссоздала изображения на основе мозговых снимков

Исследователи из Института Вейцмана, расположенного в израильском Реховоте, создали инструмент на основе ИИ, который может реконструировать визуальные образы, воспринимаемые человеком, анализируя его мозговые снимки. Эта технология также позволяет предугадывать активность мозга, исходя из того, что видит человек. Учёные надеются, что их работа будет полезной для изучения человеческого мозга и для помощи людям с синдромом «запертого человека», а также в воссоздании содержания снов.

На изображении, представленном в исследовании, можно увидеть, как то, что человек на самом деле видел, сопоставляется с тем, что было сгенерировано ИИ на основе анализа его мозговых снимков. Джуди Иллес, нейроэтик и профессор неврологии в Университете Британской Колумбии, охарактеризовала работу израильских исследователей как «великолепную», подчеркивая терапевтический потенциал данного подхода. Однако некоторые специалисты, такие как нейробиолог Томми Спраг из Калифорнийского университета, выражают опасения по поводу возможности извлечения личной информации и мыслей без согласия человека.

На протяжении многих лет нейробиологи пытались использовать функциональную магнитно-резонансную томографию (фМРТ) для воссоздания того, что видят люди. Первоначальные попытки приводили к размытым изображениям, но с развитием технологий и методов интерпретации результаты значительно улучшились. Учёные начали свою работу с анализа доступных данных фМРТ, собирая снимки мозговой активности участников, которые смотрели различные изображения.

В процессе разработки нового инструмента, ИИ-модель была обучена на 9 тысячах изображений, показанных восьми добровольцам во время фМРТ-сканирования. Ключевой особенностью декодера является его способность одновременно предсказывать как структуру изображения, так и его содержание, что позволяет создавать более чёткие визуализации. Учёные использовали дополнительную ИИ-модель - энкодер, который помогает предсказывать активность мозга по предоставленным изображениям, что в свою очередь улучшает работу обеих моделей.

В будущем исследователи планируют расширить свои исследования, включая видео и аудио, чтобы в конечном итоге научить ИИ реконструировать мысли и представления человека, а также содержание снов. Однако это поднимает важный вопрос о приватности, поскольку подобная технология может использоваться для извлечения мыслей или воспоминаний без согласия человека.