Модели и платформы ИИ
Исследовательская группа разработала метод ИИ для распознавания трёхмерных выражений лица
Ключевые моментыСветопольная камера KAIST преодолевает тени для стабильной 3D-реконструкции лица.
Показать больше
- Светопольная камера KAIST преодолевает тени для стабильной 3D-реконструкции лица.
- Машинное обучение на 3D-изображениях достигло 85% точности в различении выражений лица.
- Данная технология открывает возможности для мобильного здравоохранения и взаимодействия человека с машиной.
Совместная исследовательская группа под руководством профессоров Ki-Hun Jeong и Doheon Lee из Корейского передового института науки и технологий (KAIST) разработала новую технику для обнаружения выражений лица, сочетая методы камер с ближним инфракрасным световым полем и искусственным интеллектом (ИИ).
Исследование было опубликовано в Advanced Intelligent Systems.
Камеры со световым полем
Камеры со световым полем содержат микролинзовые массивы перед датчиком изображения, что позволяет им поместиться в смартфон. В то же время они могут приобретать пространственную и направленную информацию о свете за один снимок.
Эта методика используется для реконструкции изображений различными способами, такими как многовидовые, перефокусированные и 3D-изображения.
Однако эта методика имеет некоторые ограничения. Существующие камеры со световым полем испытывали трудности в обеспечении точного контраста изображения и 3D-реконструкции из-за теней, вызванных внешними источниками света в окружающей среде.
Исследовательская группа смогла стабилизировать точность 3D-реконструкции изображения, зависящую от окружающего света, преодолев ограничения существующих камер со световым полем, и разработала новую камеру, оптимизированную для 3D-реконструкции выражений лица. Они использовали ее для получения высококачественных 3D-реконструкций изображений выражений лица различных эмоций, независимо от условий освещения окружающей среды.
Машинное обучение для различения выражений
Затем команда использовала машинное обучение для различения выражений лица в полученных 3D-изображениях, достигнув точности 85%. Они также рассчитали взаимозависимость информации о расстоянии, которая варьируется с выражением лица в 3D-изображениях, чтобы определить информацию, которую камера со световым полем использует для различения человеческих выражений.
“Миниатюрная камера со световым полем, разработанная исследовательской группой, имеет потенциал стать новой платформой для количественного анализа выражений лица и эмоций человека”, – сказал профессор Ki-Hun Jeong.
Это исследование может иметь значительное влияние на широкий спектр отраслей.
“Оно может быть применено в различных областях, включая мобильную медицину, полевую диагностику, социальное познание и взаимодействие человека и машины”, – сказал он.












