учёные Корнеллского университета создали две технологии для отслеживания взгляда и выражения лица с помощью сенсоров, похожих на сонар. обе разработки потребляют меньше энергии и подходят для использования в смарт-очках и AR- и VR-гарнитурах, используя динамики и микрофоны на оправе очков для отражения и улавливания звуковых волн от лица и глаз.

GazeTrak — система слежения за взглядом на основе акустических сигналов, а EyeEcho — устройство для распознавания выражений лица и воссоздания их с помощью аватара в реальном времени.

устройства могут работать от батареи очков несколько часов и от гарнитуры VR — более суток.

благодаря этим технологиям пользователи смогут совершать видеозвонки без помощи рук через аватар, воссоздать детальное выражение лица и движения взгляда в виртуальной реальности.

помимо этого, GazeTrak можно использовать для чтения фрагментов текста и при просмотре сайтов людям с плохим зрением. GazeTrak и EyeEcho также потенциально могут помочь диагностировать или контролировать такие заболевания, как болезнь Альцгеймера и Паркинсона — при этих состояниях у пациентов часто наблюдаются аномальные движения глаз и менее выразительная мимика.