Сейчас, когда люди носят маски так много времени, может быть трудно сказать, какое выражение у кого-то на лице. Тем не менее, новая система, как сообщается, может сделать это, используя камеры, установленные на их наушниках.
Эта экспериментальная установка, известная как C-Face, была разработана командой Корнельского университета под руководством доцента Ченг Чжана (Cheng Zhang). Она включает в себя две миниатюрные RGB-камеры, подключенные к компьютеру, которые расположены ниже ушей объекта на наушниках сторонних производителей.
Анализируя изображения изменяющихся контуров щек человека (которые камеры снимают сзади), система может определить текущее положение 42 ключевых точек их лица. Эти данные, в свою очередь, используются для определения текущей формы их рта, глаз и бровей - эти комбинированные формы составляют их общее выражение лица, которое система показывает, отображая одним из восьми соответствующих смайликов на экране компьютера.
В тестах, проведенных на девяти добровольцах, новая технология использовалась вместе с существующей современной установкой, которая отслеживает положение лицевых ориентиров. Последняя делает это с помощью фронтальных камер, которые фиксируют изображение всего лица без маски.
По сравнению с этой системой, C-Face имеет погрешность менее 0,8 мм. Кроме того, смайлы, которые она отображала, отражали реальное выражение лица человека с точностью более 88 процентов. Эта цифра должна увеличиваться по мере дальнейшего развития системы.
В будущем C-Face может также использоваться для таких приложений, как бесшумное управление компьютерами без помощи рук в тихих настройках, таких как библиотеки, когда пользователи вводят определенные выражения для определенных команд.
Источник: New Atlas / Cornell University
