Нейросеть научили воссоздавать изображения, о которых думает человек

12 января, 17:31
5 902

Японские ученые создали нейросеть, которая может воссоздавать изображения предметов, основываясь на мозговой активности людей, которые на них смотрят. Нейросеть способна реконструировать буквы, фигуры, изображения животных и предметов, пишет N+1 со ссылкой на препринт ученых. 

Полученные в результате считывания мозговой активности изображения и исходные фотографии

Разработчики из Киотского университета под руководством Юкиасу Камитани создали сеть, которая отслеживает мозговую активность и на основе полученных данных воспроизводит изображение, о котором думает или на которое смотрит человек. Эту систему «обучали» в ходе эксперимента, когда испытуемым по пять раз показывали 1200 разных изображений, а нейросеть запоминала мозговую активность, которая соответствует каждому изображению. 

Алгоритм работы нейросети

Чтобы создаваемые программой изображения были максимально похожи на оригинал, разработчики ввели дополнительную нейросеть — глубокая генеративная нейросеть (DGN).

Ученые утверждают, что попиксельное сравнение исходного и полученного изображения оказалось эффективным на 79,7% без дополнительной DGN и на 76,1 — с ее использованием. Люди угадывали, что изображено на полученном изображении в 99,1% случаев с DGN и 96,5% без нее. По мнению ученых, это означает, что улучшение изображения с помощью дополнительной нейросети помогает людям узнавать картинки. 

Ученые обещают, что продолжат совершенствовать технологию, поскольку пока лучшие результаты она показала при реконструировании простых форм и цифр, но не реальных объектов.

 

Другие новости
The Daily Mail: за отравлением Скрипалей стояла сотрудница ГРУ Сегодня в 02:40 Трамп назвал оговоркой слова о непричастности России к вмешательству в выборы Сегодня в 01:11 «Спорт-Экспресс» обвинил экс-футболиста сборной России в нападении на журналиста Рабинера Сегодня в 00:05 Генпрокуратура сообщила о просьбе Путина исправить его оговорку о деле Браудера Вчера в 22:57 Счетная палата назвала недостатки законопроекта о повышении пенсионного возраста Вчера в 22:21 Суд обязал Серебренникова ознакомиться с материалами уголовного дела до 1 сентября Вчера в 21:07 Китайская компания потеряла $4,3 млн после победы сборной Франции на ЧМ Вчера в 20:54 Бывшего главу московского управления СК Александра Дрыманова арестовали Вчера в 20:04 МИД прокомментировал закрытие французского торгового представительства в России Вчера в 20:42 Путин изменил статус закрытого города, где производили «Новичок» Вчера в 19:35
Популярное у подписчиков Дождя за неделю