Как действует распознавание лиц в телефонах

Зачем мы предпочитаем разлочивание по лицевому распознаванию

В прошлые годы идентификация физиономий стало одной из самых распространённых функций для деблокировки мобильных телефонов. Еще пару годов тому назад основная часть пользователей довольствовались пин-кодами, паролями или сканерами отпечатков пальцев. Но с появлением подобных технологий, как вулкан россия, нам вполне лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Что делает эту функцию настолько популярной? Для начала, это практично: не нужно помнить сложные пароли или отыскивать верный палец в тьме. Кроме того, это быстро: современные программы идентифицируют лицо буквально за мгновения ока. В-третьих, это ощущение футуристичности — будто в кинофильмах про вулкан казино агентов.

Впрочем за данной кажущейся несложностью таится целый вселенная комплексных технологий и инженерных концепций. Позвольте нам понять, как именно функционирует фейсканирование в актуальных мобильных телефонах, какие бывают технологии, насколько они безопасны и что нас ожидает в будущем.

Сжатая повествование эволюции инноваций

Идентификация лиц как техника существует уже более пятидесяти годов. Изначальные пробы автоматического анализа лиц были предприняты еще в 1960-х годах в научных учреждениях США. Тогда компьютеры умели лишь определять контуры лица и вычислять дистанции между зрачками и губами на монохромных изображениях.

Изначальные коммерческие системы стали доступны в 1990-х годах, но они были несовершенны: действовали неспешно и часто ошибались. Только с развитием нейронных сетей и таких платформ, как вулкан россии, мощных мобильных микросхем распознавание лиц стало по-настоящему массовым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным распознаванием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие стали интегрировать личные решения.

Ключевые этапы функционирования устройства распознавания

Процесс определения лица можно ориентировочно сегментировать на несколько важных этапов:

Распознавание лиц — камера определяет присутствие человеческого образа в кадре.
Извлечение характеристик — механизм изучает контуры физиономии: очертания глаз, носа, губ, расположение бровей.
Построение модели — создаётся уникальный виртуальный отпечаток (faceprint) на основе выделенных признаков.
Сравнение со образцом — созданный модель сравнивается с записанной при учёте биометрической данными владельца.
Принятие выбора — если сходство достаточно высокое, смартфон разблокируется.

Любой из указанных этапов нуждается в индивидуальных методов и оптимизаций для оперативной работы прямо на устройстве.

Железные элементы: что скрыто внутри

Стандартная фронтальная камера.

Самый простой вариант определения лица задействует лишь лицевую камеру мобильного устройства. Такой подход осуществлён во многих бюджетных моделях Android-девайсов.

Преимущества:

Не потребляет внешних сенсоров.
Шустро действует при качественном освещённости.

Отрицательные стороны:

Легко обмануть изображением или видеозаписью.
Неправильно функционирует при слабом свете или необычных точках зрения.

Инфракрасная фотокамера и точечный проектор

Более усовершенствованные системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс является основой Face ID от Apple.

Как это работает:

Точечный проектор показывает на облик пользователя невидимую решетку из тысяч инфракрасных пятен (например, Face ID использует около 30 000 пятен).
Инфракрасная устройство записывает изменение формы данной решетки по плоскости физиономии.
Формируется трехмерная глубинная карта глубины, которая почти что неподвластна для подделки стандартной снимком или маскировкой.

Выигрыши

Надёжная функционирование даже в полной неосвещённости.
Высокая устойчивость к фальсификациям.
Точность распознавания выше 99%.

Добавочные сенсоры

В отдельных устройствах применяются также дополнительные датчики: ToF (Time-of-Flight), которые определяют период движения света до объекта и обратно; Цветные-датчики глубины; специальные лазерные измерители расстояния для построения более аккуратной 3D-модели физиономии.

Эти инновации используются в основном во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: искуственный разум в работе

Текущие устройства идентификации лиц неосуществимы в отсутствие применения ИИ и машинного обучения. Именно вследствие таким разработкам, как вулкан россии, гаджет может идентифицировать юзера даже при метаморфозах внешнего вида: новая причёска, растительность на лице, линзы или косметика не становятся помехой для разблокировки.

Обнаружение физиономии

На начальном этапе алгоритм обязана мгновенно найти лицо среди полного снимка камеры. Для этой задачи задействуются многоуровневые классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые подготовлены идентифицировать лица людей среди множества других объектов.

Пример: алгоритм MTCNN способен находить облик даже с частичном перекрытии (например, шарфом или рукой).

Определение важных точек

После распознавания лица устройство, такая как вулкан россии, вычисляет расположение главных точек: уголки глаз, кончик носа, контуры губ и так далее. Как правило задействуется от 68 до 128 основных меток на лицевой поверхности.

Данное необходимо для нормализации изображения: если человек удерживает мобильник под наклоненным, или склонил головку, программа исправляет картинку до обычного угла для дальнейшего анализа.

Формирование биометрии образца

Далее нейросеть строит сжатое математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след внешности длиной от 128 до 512 вещественных чисел.

Этот образец весьма сложно сфальсифицировать: он не удерживает само фото пользователя, а лишь уникальные характеристики его вида, что делает его совершенным для таких систем, как vulkan russia.

Сравнительный анализ и вынесение заключения

Если юзер намеревается открыть телефон взором, система осуществляет все описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный уровень (обычно больше 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ блокируется.

Привыкание к изменениям облика

Интересная черта современных систем — способность самообучения. Если ты часто доступаете к телефон с свежей укладкой или оптикой, программа постепенно обновляет основной образец вашего лица для повышения точности работы без снижения уровня безопасности.

Защита биометрии информации.

Большинство юзеры беспокоятся сохранять свои биометрические идентификационные данные на смартфоне из-за риска утечки данных или взлома гаджета. Некоторые фирмы, например vulkan russia, предоставляют решения для улучшения защиты сведений юзеров.

Локальное сбережение: Основная часть девайсов сохраняет био-идентификационные образцы только внутрь защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Они всегда не покидают гаджет и не доступны даже изготовителю.
Шифрование: Все данные сохраняются только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция программ: Приложения внешних девелоперов не имеют непосредственного доступа к биометрическим данным; они могут лишь требовать факт верификации идентичности через системный API.

Необходимо упомянуть значимую подробность: если какой-то человек достанет физический доступ к вашему телефону (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество производители реализуют систему защиты от неосознанного разблокирования — например, заставляют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие бывают типы идентификации лиц?

На сегодняшний день можно различить 3 ключевых подхода к реализации этой операции:

Программируемое 2D распознавание

Используется только лицевая камера без вспомогательных сенсоров дистанции. Этот подход наблюдается наиболее часто в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость осуществления; умеренная стоимость; оперативная деятельность при качественном освещении.
Минусы: несложно одурачить фотографией; нестабильная работа ночью; слабая защищенность.

Техническое 3D сканирование

Задействует инфракрасную видеокамеру + проекционный модуль пикселей + сенсоры глубины (Face ID у Apple; подобные технологии у Huawei Mate).
Достоинства: большая надёжность; не получится подделать изображение/видеозапись; устойчивая работа в любых условиях освещения.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные способы с ИИ-дополнением

Задействуют комбинацию программных методов + аппаратную обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, как вулкан россии и Google Pixel Face Unlock последних поколений, комбинируют фронталку c инфракрасным сенсором движения Soli Radar для предотвращения от подделок жестами/масками/видеодисплеями посторонних устройств.

Иллюстрации применения разных способов

iPhone линейки X/11/12/13/14 задействуют только физическое трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition впервые предложил аналог Face ID в числе Android.
Samsung Galaxy S10 версия/S20 обеспечивают как софтверное 2D распознавание по снимку селфи-камерой, так и сканер радужки глаза.
Huawei Mate20 Pro использует комплекс из ИК-подсветки + Dot Projector + ToF-датчик

Вопросы безопасности и ложные сигналы

Несмотря на впечатляющий развитие инноваций за недавние годы, безупречных систем пока не существует:

Вероятность мошенничества: Недорогие телефоны просто доступны четкой снимком пользователя или же роликом с экрана другого устройства.
Идентичные близнецы: Даже самые безупречные системы могут перепутать между однояйцевыми близнецами либо родственниками с очень схожей внешностью.
Трансформации облика: Резкое утрата веса/увеличение массы тела, хирургические вмешательства либо повреждения иногда требуют перерегистрации биометрии.
Условия съёмки: Яркая освещённость солнцем или плотная затенение могут уменьшить точность распознавания признаков.

Ниже пара подсказок по защищённому применению:

Для значимых операций всегда внедряйте двухфакторную аутентификацию;
Не включайте функцию “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
Постоянно апгрейдите прошивку телефона для защиты от новых видов атак;
Включайте опцию “Требовать распахнутых глаз” везде, где она доступна.

В каких местах дополнительно применяется технологии кроме мобильных телефонов?

Хотя основная мысль этой работы посвящена именно портативным гаджетам, стоит упомянуть о прочих направлениях внедрения технологии:

Контроль входа в рабочих помещениях и многоквартирных зданиях;
Платёжные аппараты финансовых учреждений (“Face Pay”);
Цифровые удостоверения личности последнего образца;
Комплексы видеомониторинга городских подразделений;
Механизация учёта присутствия образовательных учреждений/вузов;
Вход юзеров персональных компьютеров/ноутбуков.

Например: В столичном метро уже проверяется система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без карты или мобильника! Схожие проекты осуществляются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Как трансформируется технический процесс в наше время?

Каждый годочек возникают современные концепции для улучшения качества функционирования систем распознавания лиц:

Увеличивается детализация сенсорных устройств — чем больше информации фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность ошибки;
Улучшаются нейронные сети — новейшие структуры модели MobileNetV3 обеспечивают возможность оперативно осваивать дополнительным особенностям облика обладателя непосредственно на девайсе без пересылки информации в облачное хранилище.
Совершенствуются технологии антиспуфинга — теперь телефоны умеют отличать настоящие анимированные лица от фиксированных фото/масок по незаметным микродвижениям.
Взаимодействие со умными устройствами — умные часы могут авто блокировать мобильный телефон, если владелец ушёл далеко.
Проявляются гибридные системы — в частности объединяющие аудио опознание + физиономию + пальцевой отпечаток.

Итак, какие тренды в особенности популярны сейчас:

1) Уменьшение компонентов

Производители стараются сократить величину прорези (“чёлки”) для датчики на экране за счёт встраивания маленьких ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработывание прямо на устройстве

Для повышения приватности всё больше обработки данных выполняется внутри устройства без отправки данных во сторонний облачный сервис.

3) Стандартизация норм

Гугл интенсивно пропагандирует стандарт BiometricPrompt API, с целью чтобы такие платформы, как вулкан россия, и любые Android-аппы могли работать с любыми видами биометрии единообразно.

Какое подобрать сегодня?

В случае если вам всем необходима максимальная защита информации, остановите выбор на флагманские аппараты с интегрированным ИК-излучателем или же ToF-сенсором глубины.

iPhone всех актуальных версий
Huawei Mate/P серии
Mi Professional
Vivo X модели
Oppo Обнаружить Икс серий.

Если бюджет ограничен – лучше выбирать обычным методам безопасности (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в вулкан россия, задействовать только как второстепенную возможность комфорта.

Каким образом увеличить комфорт работы опции?

Есть несколько хитростей для пользователей, кто уже использует разблокировку по лицу:

Периодически обновляйте свою фото-шаблон, если сильно изменяется внешний вид.
Не упускайте из виду протирать объектив фронтальной камеры – разводы могут уменьшить точность!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам запускает фотоаппарат как только вы берёте его в руки.
Во время регистрационного процесса старайтесь сохранять лицо неподвижно перед объектива исключая сильного наклона головы.
Используйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвели взгляд от экрана.

Возможности развития техники

В предстоящие периоды можно предполагать появления полностью бесконтактных способов идентификации персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: лицо + звучание + манера ходьбы + движения рук!

Также предполагается развитие современных подходов охраны конфиденциальности – скажем, динамическое корректировка цифрового шаблона после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень захватывающих техник нашего периода! Она предоставляет общение со телефоном удобнее чем раньше, и такие аппы, как vulkan russia, могут существенно повысить ваш юзерский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы знаете, как устроена эта технология в деталях, – сможете вдумчиво подбирать свой следующий гаджет!