Каким образом функционирует идентификация лиц в мобильных устройствах

Для чего мы останавливаемся на разблокировку по лицу

В недавние годы определение лиц стало одной из самых распространённых возможностей для открытия мобильных телефонов. Еще некоторые годков ранее основная масса пользователей удовлетворялись PIN-кодами, секретными кодами или сканерами отпечатков пальцев. Но при появлением подобных технологий, как вулкан россия, нам вполне просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Какая вещь превращает эту особенность настолько популярной? Во-первых, это комфортно: не нужно запоминать трудные пароли или искать верный палец в мраке. Кроме того, это мгновенно: современные системы распознают лицо фактически за мгновение. В-третьем пункте, это впечатление будущего — как будто в кинолентах про вулкан автомат шпионов.

Впрочем за этой кажущейся несложностью таится целый мир сложных техник и инженерных решений. Давайте исследовать, как конкретно функционирует идентификация по лицу в современных смартфонах, какие бывают способы, насколько они безопасны и что нас предстоит.

Краткая хроника развития технологии

Идентификация лиц как методика имеется уже более пятидесяти годов. Начальные пробы автоматизированного изучения облика были предприняты еще в 1960-х годах в научных учреждениях США. Тогда компьютеры могли лишь выделять очертания черепа и определять промежутки между зрачками и ртом на ахроматических снимках.

Изначальные торговые платформы стали доступны в девяностых годах, но они были неидеальны: функционировали медленно и нередко ошибались. Только с развитием синтетических сетей и таких площадок, как вулкан россии, высокопроизводительных мобильных чипов идентификация лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным идентификацией лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали внедрять личные разработки.

Ключевые стадии работы механизма определения

Процесс распознавания лица можно условно разделить на несколько ключевых этапов:

1. Идентификация лица — устройство распознает присутствие людского образа в изображении.
2. Определение характеристик — механизм изучает контуры лица: очертания зрительных органов, обонятельного органа, губ, расположение бровей.
3. Построение модели — создаётся особенный электронный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со эталоном — сформированный шаблон сравнивается со записанной при учёте биометрической данными владельца.
5. Принятие решения — если соответствие достаточно значительное, смартфон деблокируется.

Всякий из данных стадий запрашивает специальных методов и улучшений для скорой работы прямо на устройстве.

Аппаратные составляющие: что находится внутри

Обычная фронтальная камера.

Самый легкий способ распознавания облика задействует лишь переднюю видеокамеру смартфона. Подобный подход осуществлён во различных бюджетных версиях Android-девайсов.

Сильные стороны:

• Не потребляет дополнительные датчиков.
• Быстро действует при достаточном освещении.

Минусы:

• Легко одурачить снимком или видеозаписью.
• Плохо работает при низком освещении или нестандартных углах обзора.

Инфракрасная камера и точечный проекционный аппарат

Более продвинутые системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология лежит в основе Face ID от Apple.

Как это действует:

• Точечный проекционный прибор проецирует на физиономию юзера невидимую сетку из тысяч инфракрасных меток (например, Face ID использует около 30 000 меток).
• Инфракрасная устройство регистрирует деформацию данной решетки по плоскости физиономии.
• Формируется трёхмерная карта глубины глубинности, которая почти что неподвластна для фальсификации обычной фотографией или маской.

Достоинства

• Надёжная функционирование даже в полной неосвещённости.
• Сильная сопротивляемость к имитациям.
• Точность распознавания свыше 99%.

Дополнительные сенсорные устройства

В отдельных устройствах используются также экстра сенсорные устройства: ToF (Time-of-Flight), которые определяют период распространения света до предмета и обратно; Трехцветные-датчики дальности; специальные световые дальномеры для формирования более точной 3D-модели лица.

Эти разработки применяются в основном во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: синтетический ум в действии

Текущие механизмы опознания лиц неосуществимы без применения ИИ и машинного обучения. Именно благодаря таким инновациям, как вулкан россии, гаджет в состоянии узнавать владельца даже при метаморфозах внешности: новая стрижка, щетина, оптика или косметика не становятся помехой для деблокировки.

Детектирование лиц

В стартовом стадии система должна оперативно обнаружить лицо внутри полного изображения с камеры. Для этой задачи применяются многоуровневые классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые “обучены” распознавать лица людей среди множества других объектов.

Пример: метод MTCNN способен обнаруживать лицо даже с частичном закрытии (например, шалью или рукой).

Выделение ключевых точек

После обнаружения лица устройство, такая как вулкан россии, определяет расположение главных точек: кончики глаз, конец носа, контуры губ и так далее. Как правило применяется от 68 до 128 ключевых маркеров на лицевой области.

Данное необходимо для стабилизации картинки: если пользователь удерживает мобильник под наклоненным, или наклонил головку, программа исправляет картинку до стандартного положения для последующего изучения.

Построение биометрического идентификатора образца

Далее искусственная сеть строит уплотненное числовое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 вещественных чисел.

Данный формат очень затруднительно подделать: он не сохраняет само картинку юзера, а лишь исключительные характеристики его внешности, что делает его идеальным для таких платформ, как vulkan russia.

Сравнение и осуществление выбора

Если человек желает открыть смартфон взором, механизм воспроизводит все описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый уровень (обычно больше 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ блокируется.

Привыкание к изменениям внешности

Интересная характеристика актуальных системы — возможность самостоятельного обучения. Если ты часто разблокируете мобильное устройство с обновленной укладкой или оптикой, программа постепенно модернизирует основной модель вашего внешности для повышения точности работы без ухудшения безопасности.

Защита биометрии данных.

Большинство клиенты опасаются хранить свои биометрические идентификационные данные на смартфоне из-за риска утечки данных или взлома гаджета. Определенные организации, вроде vulkan russia, предлагают методы для увеличения безопасности данных пользователей.

• Локальное сохранение: Большинство аппаратов записывает биометричные шаблоны исключительно внутри защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не оставляют аппарат и недоступны даже изготовителю.

• Шифрование: Все сведения сберегаются только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Приложения внешних разработчиков не имеют непосредственного доступа к биометрическим; они могут лишь требовать подтверждение подтверждения идентичности через системный API.

Следует подчеркнуть значимую деталь: в случае, если кто-либо достанет физический доступ к вашему телефону (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие изготовители внедряют систему защиты от автоматического разблокирования — в частности, требуют открыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют типы идентификации лиц на изображениях?

Сегодня можно определить различить 3 главных подхода к выполнению этой операции:

Программное плоское определение

Эксплуатируется только фронтальная видеокамера без вспомогательных детекторов дистанции. Подобный метод наблюдается чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость воплощения; низкая цена; быстрая деятельность при качественном свете.
Минусы: несложно одурачить фотографией; неустойчивая деятельность ночью; низкая охрана.

Аппаратное трёхмерное оцифровка

Использует инфракрасную видеокамеру + проектор пикселей + сенсоры дистанции (Face ID от Apple; подобные технологии у Huawei Mate).
Достоинства: большая надежность; нельзя подделать изображение/видеозапись; устойчивая работа при любом освещении.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с интеграцией ИИ

Используют комбинацию софтверных методов + аппаратную обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие товары, как вулкан россии и Google Pixel Face Unlock последних поколений, комбинируют фронтальную камеру c ИК датчиком движения Soli Radar для предотвращения от фальсификаций руками/масками/видеоэкранами чужих устройств.

Иллюстрации использования разнообразных способов

• iPhone линейки X/11/12/13/14 задействуют только физическое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз представил эквивалент Face ID среди Android.
• Samsung Galaxy S10 модель/S20 поддерживают как программное 2D идентификацию по снимку фронтальной камерой, так и датчик глазного ириса.
• Huawei Mate20 Pro использует систему из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Вопросы безопасности и неверные тревоги

Несмотря на впечатляющий развитие инноваций за прошедшие лет, идеальных систем пока не существует:

1. Вероятность мошенничества: Бюджетные смартфоны просто открываются качественной фотографией хозяина либо роликом с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые идеальные механизмы могут ошибиться между однояйцевыми близнецами либо родственниками с очень аналогичной внешностью.
3. Метаморфозы внешности: Резкое снижение веса/набор веса, пластические операции либо повреждения порой необходимы для перерегистрации биометрии.
4. Условия записи: Яркая освещённость солнцем либо плотная тень могут понизить верность распознавания признаков.

Ниже некоторые советов для безопасному эксплуатации:

• Для критически важных операций всегда используйте двухэтапную аутентификацию;
• Не активируйте функцию “Разблокировка по лицу” на бюджетных моделях без ИК-сенсоров;
• Постоянно обновляйте программное обеспечение смартфона для защиты от новых видов атак;
• Включайте функцию “Требовать распахнутых глаз” в тех местах, где она доступна.

В каких областях также применяется технология помимо мобильных телефонов?

Хотя основная мысль нашей публикации посвящена в частности смартфонам и планшетам, необходимо сказать о других сферах применения технологии:

• Контроль прохода в деловых центрах и многоквартирных зданиях;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Цифровые удостоверения личности современного образца;
• Системы видеонаблюдения городских сервисов;
• Автоматизация учёта присутствия школ/институтов;
• Аутентификация пользователей персональных компьютеров/ноутбуков.

Например: В столичном метро уже проверяется система платежа проезда по лицу (“Face Pay”) — нужно лишь пройти через турникет без пластика или телефона! Схожие программы реализуются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом трансформируется техпроцесс в наше время?

Всякий год проявляются свежие мысли для улучшения уровня работы систем идентификации лиц:

1. Увеличивается разрешение датчиков — чем больше деталей фиксируется видеокамерой/датчиками глубины, тем меньше вероятность ошибки;
2. Развиваются нейронные сети — передовые архитектуры вида MobileNetV3 позволяют скоростно адаптироваться к дополнительным характеристикам внешности пользователя непосредственно на девайсе без отправки данных в облако.
3. Совершенствуются способы антиспуфинга — теперь смартфоны способны распознавать реальные движущиеся облики от фиксированных фото/маскировок по микроскопическим движениям кожи.
4. Интеграция со умными устройствами — интеллектуальные часы могут авто блокировать смартфон, если обладатель удалился на значительное расстояние.
5. Возникают гибридные механизмы — к примеру комбинирующие голосовую опознание + лицо + пальцевой отпечаток.

Вот, которые тенденции очень актуальны на сегодняшний день:

1) Сокращение элементов

Компании пытаются сократить величину отверстия (“чёлки”) для датчики на экране за счёт интеграции миниатюрных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработывание прямо на девайсе

Для улучшения личной безопасности всё больше расчётов происходит внутри устройства без пересылки данных во дополнительный облачный сервис.

3) Упорядочивание регламентов

Гугл энергично продвигает эталон BiometricPrompt API, для того чтобы такие площадки, как вулкан россия, и все Android-приложения могли взаимодействовать с любыми видами биометрии единообразно.

Какое подобрать сегодня?

Когда вам всем необходима наивысшая сохранность данных, выбирайте флагманские устройства с вмонтированным ИК-излучателем или же ToF-сенсором глубины.

• iPhone каждого новейших поколений
• Huawei Partner/P серии
• Mi Expert
• Vivo X линейки
• Оппо Find Х линейки.

Если финансы ограничен – лучше предпочесть традиционным средствам безопасности (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в вулкан россия, применять только как второстепенную опцию комфорта.

Каким способом улучшить практичность функционирования возможности?

Есть несколько советов для тех, кто уже пользуется функцию распознавания лица:

1. Регулярно обновляйте свою фото-шаблон, если значительно трансформируется облик.
2. Не пренебрегайте протирать объектив передней камеры – пятна могут уменьшить точность!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам активирует камеру когда вы поднимаете его.
4. Во время регистрации пытайтесь удерживать лицевую часть ровно впереди видеоустройства исключая резкого наклона головы.
5. Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отвернулись от дисплея.

Перспективы прогресса технологии

В скоро наступающие периоды можно предвкушать возникновения полностью бесконтактных способов опознания персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: лицо + речь + походка + движения рук!

Также возможно развитие новых методов обеспечения приватности – например, изменяющееся модификация электронного шаблона после каждой удачной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – единственная из очень увлекательных технологий нашего времени! Она делает общение со смартфоном комфортнее чем когда-либо прежде, и такие программы, как vulkan russia, могут в разы оптимизировать ваш пользовательский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы осведомлены, как работает эта система в деталях, – будете в состоянии вдумчиво определять свой очередной девайс!