Главная  Информация для покупателей  Новости науки  Создана нейросеть, распознающая образы, попадающие в поле зрения человека

Создана нейросеть, распознающая образы, попадающие в поле зрения человека

12 декабря 2019


Российские ученые из лаборатории нейроробототехники МФТИ при содействии исследователей компании «Нейроассистивные технологии» разработали нейросеть, способную распознавать изображения, возникающие в человеческом мозге в тот момент, когда человек смотрит на какой-либо объект/объекты. Это могут быть люди, элементы природы, декорации и даже динамические изображения, получающиеся в результате быстро сменяющихся кадров: движущиеся объекты или движущийся фон (например, в процессе вождения автомобиля).

Нейросеть работает на основе электрической активности мозга и использует кодирующуюся им информацию. В свою очередь, этот процесс возможно расшифровать с помощью функциональной магнитно-резонансной томографии. В таком случае получают анализ сигнала напрямую с нейронов, когда происходит визуальное восприятие информации зрительным аппаратом. Нейросеть подключается для анализа данных, полученных с помощью электроэнцефалограммы в интерфейсе, связывающий мозг с компьютером. Такой же интерфейс используется в процессе управления экзоскелетом, например, на руках пациентов в реабилитационный постинсультный период. Он же задействован в управляющем устройстве электроколясок для парализованных людей. Возвращаясь к теме, с помощью нейросети и упомянутого интерфейса в режиме реального времени происходит реконструкция, например, кадров из видео, которое смотрит человек.

Проведенные эксперименты позволили установить, что разные категории видео по-разному распознаются человеком и интерфейсом, поэтому потребовалось создать ещё одну нейросеть, которая может преодолеть помеху в распознавании динамических изображений в лице присутствующего на кадрах шума. Таким образом, ученые создали комбинацию нейросетей, каждая из которых занимается определённой задачей: основная сеть генерирует изображения, полученные из шумов произвольного видео, а вспомогательная сеть создает нечто похожее из ЭЭГ. Совместная работа сетей предполагает наложение максимально похожих друг на друга кадров и сигналов ЭЭГ. Таким образом, мы получаем 90% успешное создание кадров, идентичных наблюдаемым объектам, при этом реалистичных и распознаваемых воочию в процессе сравнения. Реконструкция продемонстрировала прекрасные результаты, и это обнадеживающая новость. В будущем планируется создание и усовершенствования инвазивных нейроинтерфейсов, которые можно использовать в лабораторном оборудовании, и которые очень важны для улучшения качества жизни людей, например, в период постинсультной реабилитации или для парализованных людей.

info20-05-19-imgs_SMM_Feb_2019_0010_24

Другая информация

10 августа 2020
Бозон Хиггса в эксперименте на БАК распался на два мюона

В этот раз довелось наблюдать распад бозона Хиггса на частицы второго поколения — мюоны. Вероятность такого распада крайне мала и составляет всего 0,0002%.

06 августа 2020
Бактериальная память может быть использована для живых вычислительных систем

Ученые сделали вывод, что некоторые бактерии и их сообщества способны передавать сигналы о текущих событиях и хранить память о них в своих биопленках.

03 августа 2020
Минус миллион квадратных километров ледяного покрова Уэддела

Впервые за последние 40 лет наблюдений за морем Уэддела площадь пребывающего там морского льда в неизменном виде сократилась до рекордных значений.

27 июля 2020
Человеку свойственно стереообоняние

Долгое время считалось, что обонятельный орган не различает направление стимулов — связано это с рецепторами обонятельного нерва.

23 июля 2020
Самки комаров поменяли пол

Ученым удалось изменить пол самок комаров, внедрив в их геном один мужской ген — в процессе созревания самки комаров выросли в самцов и имели все их фенотипические признаки.

Вся информация


Сайт использует файлы cookies. Продолжая просматривать сайт Вы соглашаетесь с использованием cookies. Хорошо!