Разработка ИИ-помощника для слабовидящих

Сегодня среда, а это значит, что есть новости из области науки.

Специалисты федерального центра Минздрава России занимаются созданием ИИ-помощника для людей с нарушениями зрения.

Новосибирский филиал НМИЦ МНТК «Микрохирургия глаза» Минздрава России совместно с Новосибирским ГУ ведет разработку прототипа устройства, которое будет автономным и не потребует подключения к Интернету. В дальнейшем планируется настройка прибора, создание базы данных и обучение ИИ.

Суть разработки:

• Устройство включает в себя видеокамеру, наушники и одноплатный 16-ядерный компьютер, который можно носить в наплечной сумке;
• Технология поможет слабовидящим и незрячим людям ориентироваться в пространстве;
• Прибор будет оборудован аккумулятором, а все компоненты соединены беспроводной связью;
• Пользователь сможет держать видеокамеру в руках и наводить ее на нужный объект;
• Общий вес устройства составит около одного килограмма.

По предварительным данным, прототип будет готов к концу года.

Принципы работы:

В создании устройства применяется мультимодальная модель, обеспечивающая качественное описание окружающей среды с помощью словесных конструкций.

В будущем у пользователя будет возможность задавать уточняющие вопросы и получать подробные ответы. Языковая модель также сможет распознавать тексты, считывать надписи, знаки и предупреждения о препятствиях.

«Когда человек читает книгу или слушает аудиозапись, в его мозгу формируются образы предметов. Если слабовидящему или слепому человеку предоставить возможность определять расстояние до объекта и его размеры, это сможет значительно помочь ему в повседневной жизни и адаптации в обществе», — отметил директор Новосибирского филиала НМИЦ МНТК «Микрохирургия глаза» Минздрава России Валерий Черных.

Источник: @minzdrav_ru