Каким способом работает определение лицевых образов в телефонах

Для чего мы выбираем разблокирование по фейсу

В последние времена идентификация лиц стало одной из наиболее востребованных функций для разблокировки смартфонов. Всего пару лет тому назад большинство использующих довольствовались пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но при появлением подобных технологий, как вулкан россия, нам достаточно лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Что превращает эту конкретную функцию настолько популярной? Во-первых, это удобно: не нужно удерживать в памяти сложные пароли или находить верный палец в мраке. Кроме того, это быстро: современные системы распознают лицо практически за доли секунды. В-третью очередь, это ощущение футуризма — будто в фильмах про vulkan russia разведчиков.

Однако за данной кажущейся несложностью таится весь мир сложных техник и инженерных концепций. Давайте разобраться, как конкретно функционирует распознавание лиц в актуальных мобильных телефонах, какие бывают способы, насколько они безопасны и что нас ожидает в будущем.

Сжатая хроника эволюции инноваций

Распознавание лиц как методика присутствует уже более 50 годов. Начальные попытки машинного анализа облика были осуществлены еще в 1960-х годах в исследовательских центрах США. Тогда компьютеры способны были лишь выделять контуры черепа и измерять промежутки между зрачками и ртом на черно-белых изображениях.

Первые бизнес платформы возникли в 1990-х годах, но они были несовершенны: действовали неспешно и нередко ошибались. Только с прогрессом искусственных сетей и таких систем, как вулкан россии, мощных мобильных чипов идентификация лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным идентификацией лица. За этим последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали внедрять личные разработки.

Ключевые стадии функционирования механизма идентификации

Процесс распознавания лица можно примерно сегментировать на несколько важных этапов:

Распознавание лица — камера выявляет существование людского образа в кадре.
Извлечение особенностей — система изучает особенности лица: очертания глаз, носа, уст, позицию надбровных дуг.
Построение структуры — создаётся неповторимый виртуальный отпечаток (faceprint) на основе определённых признаков.
Сравнение с эталоном — сформированный шаблон сопоставляется с зафиксированной при учёте биометрической информацией владельца.
Принятие решения — если совпадение достаточно существенное, смартфон деблокируется.

Каждый из указанных стадий нуждается в индивидуальных алгоритмов и усовершенствований для скорой работы непосредственно на девайсе.

Железные составляющие: что находится внутри них

Типичная передняя камера.

Самый простой метод распознавания лица задействует только переднюю камеру смартфона смартфона. Данный метод осуществлён во многих доступных моделях Android-устройств.

Достоинства:

Необходимо потребляет дополнительных датчиков.
Быстро функционирует при достаточном освещении.

Недостатки:

Легко ввести в заблуждение снимком или роликом.
Неудачно функционирует при низком освещённости или непривычных углах обзора.

ИК фотокамера и пунктирный проектор

Более продвинутые системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика является основой Face ID от Apple.

Как это работает:

Точечный проекционный прибор проецирует на облик пользователя невидимую структуру из тысяч инфракрасных меток (например, Face ID применяет около 30 000 точек).
Инфракрасная устройство записывает деформацию данной сетки по плоскости лица.
Получается трёхмерная карта глубины глубинности, что почти что неподвластна для подделки обычной снимком или маскировкой.

Выигрыши

Надёжная деятельность даже в полной неосвещённости.
Высокая защита к фальсификациям.
Точность распознавания выше 99%.

Добавочные сенсоры

В определённых девайсах задействуются также вспомогательные датчики: ToF (Time-of-Flight), которые определяют время движения света до цели и обратно; RGB-датчики глубины; специальные лазерные измерители расстояния для построения более детализированной 3D-модели физиономии.

Эти технологии используются чаще всего во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: искуственный ум в исполнении

Нынешние системы опознания физиономий невозможны без применения ИИ и машинного обучения. Именно вследствие таким разработкам, как вулкан россии, аппарат в состоянии идентифицировать владельца даже при метаморфозах облика: новая укладка, борода, линзы или грим не становятся препятствием для открытия.

Обнаружение лица

При стартовом стадии система необходимо быстро найти лицо в пределах всего кадра камеры. Для данной цели задействуются последовательные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые «обучены» находить человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN способен обнаруживать лицо даже при частичном закрытии (например, платком или ладонью).

Определение важных точек

После распознавания лица устройство, такая как вулкан россии, устанавливает положение главных точек: края глаз, конец носа, контуры губ и так далее. Часто задействуется от 68 до 128 основных точек на лицевой поверхности.

Данное необходимо для выравнивания картинки: если пользователь удерживает смартфон под углом, или наклонил головку, программа исправляет изображение до обычного угла для дальнейшего анализа.

Создание биометрического идентификатора образца

Далее искусственная сеть строит компактное математическое представление («эмбеддинг») внешности пользователя — своеобразный цифровой образ лица длиной от 128 до 512 флоатов.

Данный шаблон крайне трудно имитировать: он не удерживает само картинку юзера, а лишь особенные черты его вида, что делает его совершенным для таких площадок, как vulkan russia.

Сравнение и осуществление заключения

Если человек хочет разблокировать смартфон взглядом, программа воспроизводит все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый уровень (обычно выше 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ не предоставляется.

Привыкание к изменениям внешности

Интересная черта нынешних системы — возможность самообучения. Если вы регулярно разблокируете смартфон с новой укладкой или оптикой, система постепенно модернизирует базовый шаблон вашего облика для повышения точности работы без снижения уровня безопасности.

Охрана биометрических данных данных.

Множество клиенты опасаются хранить свои биометрические данные на телефоне из-за угрозы потери данных или взлома устройства. Некоторые компании, вроде vulkan russia, предлагают варианты для повышения защиты данных клиентов.

Локальное хранение: Преимущественно устройств хранит био-идентификационные шаблоны лишь внутрь защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не выходят из устройство и закрыты включая изготовителю.
Шифрование: Все данные хранятся только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.
Изоляция приложений: Программы внешних девелоперов не обладают непосредственного возможности доступа к биометрическим; они могут лишь требовать факт подтверждения личности через системный API.

Следует подчеркнуть существенную особенность: в случае, если какой-то человек получит доступ к вашему телефону физически (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество производители внедряют систему защиты от автоматического разблокирования — в частности, требуют разомкнуть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют категории идентификации лиц на изображениях?

В настоящее время можно определить 3 ключевых способа к осуществлению этой операции:

Программное плоское идентификация

Используется только лицевая видеокамера без вспомогательных детекторов дистанции. Этот способ используется наиболее часто в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость воплощения; умеренная затраты; скоростная функционирование при качественном освещении.
Минусы: несложно ввести в заблуждение фотографией; неустойчивая функционирование ночью; недостаточная безопасность.

Техническое объёмное сканирование

Задействует инфракрасную видеокамеру + проекционный модуль пикселей + сенсоры глубины (Face ID от Apple; аналогичные технологии у Huawei Mate).
Плюсы: большая достоверность; не получится подделать фото/видео; устойчивая деятельность в любых условиях освещения.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана («чёлка»)

Комбинированные подходы с интеграцией ИИ

Используют комбинацию софтверных методов + техническую обработку + постобработку нейросетями для усиления устойчивости к атакам («anti-spoofing»). Например, такие продукты, как вулкан россии и Google Pixel Face Unlock последних версий, объединяют фронтальную камеру c ИК сенсором мобильности Soli Radar для защиты от фальсификаций жестами/масками/видеодисплеями посторонних устройств.

Иллюстрации применения различных способов

iPhone модели X/11/12/13/14 используют только физическое трёхмерное сканирование
Xiaomi Mi8 Explorer Edition впервые внедрил подобие Face ID в числе Android.
Samsung Galaxy S10/S20 имеют как программное обеспечение двухмерное распознавание по изображению фронтальной камерой, так и сканер ириса глаза.
Huawei Mate20 Pro использует систему из ИК-подсветки + Dot Projector + ToF-сенсор

Вопросы охраны и неверные сигналы

Несмотря на впечатляющий прогресс инноваций за недавние лет, идеальных механизмов пока не существует:

Шанс мошенничества: Недорогие мобильники легко доступны высококачественной изображением пользователя либо видео с дисплея иного гаджета.
Идентичные близнецы: Даже самые идеальные механизмы могут перепутать между монозиготными близнецами либо родственниками с очень похожей внешностью.
Трансформации внешности: Резкое утрата веса/увеличение массы тела, косметические процедуры или повреждения иногда требуют повторной регистрации биометрических данных.
Условия записи: Интенсивная подсветка солнцем или интенсивная тень могут снизить верность распознавания признаков.

Здесь пара рекомендаций для надёжному эксплуатации:

Для значимых операций всегда внедряйте двухэтапную аутентификацию;
Не запускайте функцию «Разблокировка по лицу» на бюджетных моделях без ИК-сенсоров;
Систематически обновляйте прошивку телефона для защиты от новых видов атак;
Включайте функцию «Требовать открытых глаз» там, где она есть.

В каких местах также применяется технологии помимо мобильных телефонов?

Пускай тема данной работы касается именно портативным гаджетам, стоит упомянуть о альтернативных областях использования технологии:

Мониторинг прохода в офисах и резиденциях;
Платёжные аппараты финансовых учреждений («Face Pay»);
Виртуальные паспорта нового образца;
Системы видеоконтроля городских служб;
Автоматизация учёта присутствия учебных заведений/институтов;
Авторизация участников персональных компьютеров/ноутбуков.

Например: В столичном метро уже проверяется система оплаты проезда по фейсу («Face Pay») — нужно лишь пройти через барьер без пластика или телефона! Аналогичные программы осуществляются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким способом изменяется техпроцесс сегодня?

Любой год возникают современные концепции для усовершенствования стандарта деятельности систем лицевого распознавания:

Увеличивается чёткость сенсорных устройств — чем больше элементов фиксируется видеокамерой/датчиками глубины, тем меньше риск погрешности;
Развиваются искусственные интеллекты — современные структуры модели MobileNetV3 позволяют скоростно осваивать новым особенностям облика пользователя прямо на устройстве без пересылки информации в облачное хранилище.
Совершенствуются способы антиспуфинга — теперь телефоны могут отличать настоящие движущиеся лица от статичных фото/масок по микроскопическим движениям кожи.
Взаимодействие со смарт-гаджетами — интеллектуальные часы могут самостоятельно закрыть доступ к мобильный телефон, если обладатель отошёл далеко.
Проявляются смешанные механизмы — к примеру объединяющие аудио идентификацию + физиономию + пальцевой отпечаток.

Итак, какие тенденции особенно популярны сейчас:

1) Уменьшение элементов

Компании пытаются уменьшить величину отверстия («чёлки») для сенсоры на дисплее за счёт внедрения компактных ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на аппарате

Для увеличения приватности всё больше расчётов выполняется на месте без передачи информации во сторонний облачный сервис.

3) Стандартизация норм

Google активно продвигает стандарт BiometricPrompt API, с целью чтобы аналогичные системы, как вулкан россия, и любые Android-программы могли взаимодействовать с различными типами биометрии стандартизированно.

Какое подобрать на сегодня?

Когда тебе важна максимальная защита данных, выбирайте топовые устройства с вмонтированным ИК-проектором или ToF-датчиком глубины.

iPhone всех существующих последних поколений
Huawei Mate/Series P ряда
Mix Professional
Vivo X линейки
Oppo Обнаружить Икс серии.

Если финансы ограничен – лучше выбирать традиционным методам защиты (PIN-код/сканер пальца), а возможность «разблокировка по лицу», такую как в вулкан россия, применять только как дополнительную опцию удобства.

Как повысить удобство работы возможности?

Есть пара лайфхаков для тех, кто уже использует разблокировку через лицо:

Периодически меняйте свою фотографию-шаблон, если значительно трансформируется внешний вид.
Не упускайте из виду очищать линзу фронтальной камеры – пятна могут уменьшить точность!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам запускает фотоаппарат как только вы поднимаете его.
При регистрационного процесса пытайтесь держать голову неподвижно напротив объектива без сильного наклона головы.
Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отвернулись от дисплея.

Возможности эволюции техники

В предстоящие годы можно предвкушать появления полностью дистанционных способов опознания индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + речь + походка + движения рук!

Также возможно развитие новых способов охраны личной информации – скажем, динамическое модификация электронного образца после каждой успешной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – единственная из самых увлекательных инноваций нашего времени! Она делает общение со смартфоном комфортнее чем когда-либо прежде, и такие аппы, как vulkan russia, могут существенно повысить ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы понимаете, как функционирует эта методика внутри, – будете в состоянии более осмысленно подбирать свой будущий гаджет!