Нейросеть научили воссоздавать изображения, о которых думает человек

12 января, 17:31
5 924

Японские ученые создали нейросеть, которая может воссоздавать изображения предметов, основываясь на мозговой активности людей, которые на них смотрят. Нейросеть способна реконструировать буквы, фигуры, изображения животных и предметов, пишет N+1 со ссылкой на препринт ученых. 

Полученные в результате считывания мозговой активности изображения и исходные фотографии

Разработчики из Киотского университета под руководством Юкиасу Камитани создали сеть, которая отслеживает мозговую активность и на основе полученных данных воспроизводит изображение, о котором думает или на которое смотрит человек. Эту систему «обучали» в ходе эксперимента, когда испытуемым по пять раз показывали 1200 разных изображений, а нейросеть запоминала мозговую активность, которая соответствует каждому изображению. 

Алгоритм работы нейросети

Чтобы создаваемые программой изображения были максимально похожи на оригинал, разработчики ввели дополнительную нейросеть — глубокая генеративная нейросеть (DGN).

Ученые утверждают, что попиксельное сравнение исходного и полученного изображения оказалось эффективным на 79,7% без дополнительной DGN и на 76,1 — с ее использованием. Люди угадывали, что изображено на полученном изображении в 99,1% случаев с DGN и 96,5% без нее. По мнению ученых, это означает, что улучшение изображения с помощью дополнительной нейросети помогает людям узнавать картинки. 

Ученые обещают, что продолжат совершенствовать технологию, поскольку пока лучшие результаты она показала при реконструировании простых форм и цифр, но не реальных объектов.

 

Другие новости
The New York Times рассказала о «фабрике троллей» в Саудовской Аравии Сегодня в 08:10 Fox News: советник Трампа объявит о выходе из договора о ракетах во время поездки в Россию Сегодня в 07:12 В результате пожара на крупнейшем заводе в Северной Осетии погиб человек Сегодня в 06:02 В Венесуэле арестовали троих россиян по обвинению в торговле кокаином Сегодня в 05:23 Задержанного за раздачу самокруток кандидата в президенты Грузии отпустили после допроса Сегодня в 04:32 В центре Санкт-Петербурга автомобиль въехал в автобусную остановку Сегодня в 03:17 На Кипре погибли двое российских туристов, сорвавшиеся на машине со скалы Сегодня в 02:00 Власти Комсомольска-на-Амуре не согласовали акцию «Бессмертный ГУЛАГ» Сегодня в 01:01 Трамп объявил о планах США выйти из договора о ракетах с Россией Вчера в 23:45 В квартире на западе Москвы нашли мертвым полицейского Вчера в 23:20
Популярное у подписчиков Дождя за неделю