Студенты Политехнического института НовГУ Артем Алексеев и Валентин Баранов создали две модели искусственного интеллекта. Первая умеет находить на фотографиях лица, вторая — определять ключевые точки: глаза, брови, нос и рот. Эти модели вместе образуют систему, которая может распознавать лица, выделять их на изображении и анализировать биометрические данные, сообщила пресс-служба Новгородского государственного университета.
Работают студенты под руководством Игоря Кулакова, ассистента кафедры информационных технологий и систем НовГУ. Его интересует тема айтрекинга — технологии, позволяющей управлять компьютером взглядом. Ученые надеются, что их разработка поможет людям с ограниченными возможностями, которым сложно или невозможно пользоваться мышкой.
Сначала команда обучила нейросети на специально подготовленном датасете, собранном из открытых источников. Потом модели протестировали на закрытом наборе данных. Результаты оказались обнадеживающими: при поиске лица совпадение составило 87%, а отклонение при определении ключевых точек было меньше двух пикселей на изображении размером 96х96.
Планируется, что уже в следующем семестре начнётся сборка нового датасета для третьей модели, которая будет предсказывать направление взгляда. А к началу 2026 года учёные хотят представить рабочий прототип программного обеспечения.
По мнению Игоря Кулакова, трех моделей должно хватить для полноценной работы системы. Первая ищет лицо, вторая определяет его важные точки, а третья должна понять, куда именно человек смотрит на экране. Две уже готовы, осталось реализовать третью. Сейчас подходящих открытых данных нет, поэтому придется собирать их самостоятельно.