Профессор РУДН улучшил технику отслеживания взгляда в системах виртуальной реальности

Профессор РУДН улучшил технику отслеживания взгляда в системах виртуальной реальности

Один из ключевых этапов технологии виртуальной реальности (VR) — отслеживание взгляда человека. Профессор РУДН разработал математическую модель, которая позволяет точнее предсказывать, на чем будет сфокусирован взгляд в следующий момент времени. При этом погрешность, которая возникает из-за моргания, удалось уменьшить в 10 раз. Это позволит сделать VR-системы реалистичнее и более восприимчивыми к действиям пользователя.

Фовеальный рендеринг — одна из базовых технологий виртуальной реальности. Она учитывает, что взгляд человека сфокусирован лишь на так называемой фовеальной зоне, остальное пространство занимает периферийное зрение. Вычислительные ресурсы компьютера концентрируются на отображение картинки в фовеальной зоне, а остальная часть отображается с меньшей детализацией. Этот подход позволяет экономить вычислительные мощности и разрешает проблему отставания мощности графических процессоров от увеличения разрешения дисплеев. Однако в технологии фовеального рендеринга есть ограничения по точности и быстроте прогноза следующей точки фиксации взгляда, потому что движение взгляда — сложный и во многом случайный процесс. Для разрешения этой проблемы профессор РУДН вместе с коллегами из МГУ предложил метод, который позволяет заранее вычислять точки фокусировки с помощью математического моделирования.

«Одна из проблем техники фовеального рендеринга — своевременное предсказание следующей точки фиксации взгляда, потому что зрительное восприятие — это сложный стохастический процесс. Мы предлагаем математическую модель, которая прогнозирует изменение точки фиксации», — доктор технических наук Виктор Беляев, профессор департамента механики и мехатроники РУДН.

Прогнозирование в математической модели опирается на изучение быстрых ритмичных движений глаза — саккадических движений. Саккады сопровождают перемещение взгляда от одного объекта к другому и могут подсказать следующую точку фиксации. Есть эмпирические закономерности, которые определяют отношение между длительностью, амплитудой и максимальной скоростью движения глаза в саккаде. Однако для предсказания движения глаз айтрекерами эти модели неприменимы из-за недостаточной точности. Поэтому исследователи использовали не эмпирическую, а одну из математических моделей. С ее помощью ученые рассчитали параметры саккад, а затем применили эти данные для расчёта фовеальной области изображения.

Метод опробовали в эксперименте. Для этого использовали шлем виртуальной реальности и очки дополненной реальности. Работающий по предложенной модели айтрекер оказался способен различать мелкие движения глаза — в 3,4 минуты (0,05 градуса), а погрешность составила 6,7 минут (0,11 градуса). Более того, ученым удалось преодолеть ошибку вычислений, которая возникает из-за моргания, — с помощью встроенного в модель «фильтра» эту погрешность удалось уменьшить в 10 раз. Эти результаты можно будет использовать для моделирования в виртуальной реальности, в видеоиграх, в медицине при проведении операций и диагностике проблем со зрением.

«Мы разрешили проблему техники фовеального рендеринга в массовом производстве систем виртуальной реальности. Теперь мы планируем откалибровать айтрекер таким образом, чтобы снизить влияние перемещений закрепленного на голове дисплея или шлема относительно головы», — доктор технических наук Виктор Беляев, профессор департамента механики и мехатроники РУДН.

Результаты опубликованы в журнале SID Symposium Digest of Technical Papers

Новости
Все новости
Наука
29 января
«Живой тест воды»: учёный РУДН создаёт новую систему экомониторинга с помощью ИИ и рыбок Danio rerio

Кандидат биологических наук, доцент института экологии РУДН Всеволод Павшинцев разрабатывает инновационную методику, которая позволяет оценивать состояние пресных водоёмов с помощью рыбок данио-рерио и искусственного интеллекта. Проект, поддержанный грантом университета, призван перейти от простого химического анализа воды к пониманию того, как загрязнители воздействуют на живые организмы.

Наука
29 января
«Идеальный» дентальный имплантат: доцент инженерной академии РУДН рассказала о своей разработке

Доцент кафедры наноэлектроники и микросистемной техники РУДН Екатерина Гостева возглавляет междисциплинарный проект по разработке технологии наноструктурирования поверхности имплантатов. Её цель — сделать приживление имплантатов быстрым, надёжным и доступным для самых разных групп пациентов.

Наука
28 января
От молекул к экосистемам: учёные-экологи РУДН создают высокоэффективные сорбенты на основе природных материалов

В институте экологии РУДН реализуется масштабный междисциплинарный проект в области экологической химии и материаловедения. Учёные работают над созданием высокоэффективных сорбентов на основе природных материалов для обезвреживания опасных загрязнителей окружающей среды.

Проект объединяет фундаментальные исследования на стыке химии, материаловедения и экологии и соответствует стратегическим целям развития науки и технологий Российской Федерации.