Каким способом функционирует распознавание лицевых образов в мобильных устройствах

Для чего мы останавливаемся на разблокировку по фейсу

В прошлые годы определение лиц является одной из самых популярных функций для открытия мобильных телефонов. Всего несколько лет тому назад основная часть пользователей удовлетворялись пин-кодами, секретными кодами или сканерами отпечатков пальцев. Но при появлением подобных технологий, например Вулкан Платинум, нам достаточно лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Какая вещь делает эту конкретную функцию настолько популярной? Во-первых, это удобно: не нужно удерживать в памяти сложные пароли или отыскивать правильный палец в мраке. Также, это быстро: современные алгоритмы идентифицируют лицо буквально за доли секунды. В-третью очередь, это впечатление футуризма — словно в фильмах про казино Вулкан разведчиков.

Тем не менее за такой кажущейся несложностью прячется полный мир сложных техник и инженерных концепций. Попробуем исследовать, как конкретно действует распознавание лиц в актуальных мобильных телефонах, какие существуют методы, насколько они надёжны и что нас предстоит.

Краткая хроника развития техники

Идентификация лиц как технология существует уже более пятидесяти лет. Начальные попытки автоматического исследования лица были осуществлены еще в 1960-х годах в исследовательских центрах США. Тогда вычислительные машины могли лишь выделять очертания черепа и измерять промежутки между глазами и ртом на монохромных фотографиях.

Изначальные торговые платформы возникли в 90-х, но они были несовершенны: работали медленно и нередко ошибались. Только с прогрессом искусственных сетей и таких платформ, как Vulkan Platinum, высокопроизводительных мобильных процессоров распознавание лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным распознаванием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие стали интегрировать свои разработки.

Основные шаги работы устройства распознавания

Процесс определения лица можно примерно сегментировать на несколько ключевых этапов:

1. Идентификация лиц — устройство определяет присутствие людского образа в изображении.
2. Выделение признаков — механизм анализирует особенности физиономии: форму глаз, носа, губ, положение бровей.
3. Построение модели — создаётся неповторимый электронный отпечаток (faceprint) на основе определённых признаков.
4. Сравнение с эталоном — полученный модель сравнивается с записанной при учёте биометрической информацией владельца.
5. Принятие решения — если сходство достаточно значительное, смартфон деблокируется.

Каждый из этих этапов нуждается в особых методов и усовершенствований для оперативной работы прямо на устройстве.

Железные элементы: что прячется внутри

Стандартная передняя камера.

Самый простой простой метод распознавания лица использует только переднюю видеокамеру смартфона. Подобный метод осуществлён во различных доступных версиях Android-девайсов.

Достоинства:

• Не нуждается в требует дополнительные датчиков.
• Шустро действует при качественном освещённости.

Недостатки:

• Несложно одурачить фотографией или видео.
• Неправильно работает при плохом свете или непривычных ракурсах.

Инфракрасная камера и точечный проекционный аппарат

Более совершенные системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика является основой Face ID от Apple.

Каким образом это действует:

• Точечный проектор проецирует на облик использующего невидимую структуру из тысяч инфракрасных меток (например, Face ID задействует около 30 000 меток).
• ИК камера фиксирует деформацию этой решетки по плоскости физиономии.
• Формируется трехмерная глубинная карта глубины, что почти что неподвластна для подделки обычной фото или маской.

Плюсы

• Надёжная деятельность даже в полной тьме.
• Большая сопротивляемость к фальсификациям.
• Точность идентификации более 99%.

Дополнительные сенсорные устройства

В отдельных девайсах используются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые определяют период прохождения света до предмета и обратно; Трехцветные-датчики глубины; специальные световые лидары для построения более аккуратной 3D-модели физиономии.

Эти технологии применяются в основном во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: искуственный интеллект в действии

Нынешние системы идентификации лиц немыслимы без использования artificial intelligence и машинного обучения. Именно благодаря таким технологиям, как Vulkan Platinum, гаджет может распознавать юзера даже при изменениях внешности: новая укладка, щетина, очки или косметика не становятся помехой для разблокировки.

Детектирование физиономии

В стартовом шаге система обязана мгновенно найти ликовое изображение в пределах полного кадра с камеры. Для данной цели задействуются последовательные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые подготовлены находить лиц человека среди множества других объектов.

Пример: алгоритм MTCNN способен находить физиономию даже при частичном перекрытии (например, платком или ладонью).

Идентификация основных моментов

После обнаружения лица механизм, такая как Vulkan Platinum, устанавливает положение ключевых точек: уголки глаз, кончик носа, границы губ и так далее. Как правило используется от 68 до 128 ключевых меток на лицевой области.

Это необходимо для нормализации изображения: если человек держит мобильник под углом, или наклонил головку, программа корректирует изображение до обычного угла для дальнейшего анализа.

Создание биометрического модели

Далее нейронная сеть строит уплотненное числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след лица длиной от 128 до 512 вещественных чисел.

Данный формат крайне трудно сфальсифицировать: он не удерживает непосредственно фото пользователя, а лишь исключительные характеристики его вида, что делает его совершенным для таких систем, как Вулкан Казино Платинум.

Сравнение и принятие выбора

Когда пользователь желает разблокировать мобильник взором, механизм осуществляет все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный порог (обычно выше 99%), телефон, как и платформа Вулкан Казино Платинум, открывается; если нет — доступ запрещается.

Привыкание к метаморфозам внешнего вида

Увлекательная черта современных системы — возможность самообучения. Если вы регулярно разблокируете мобильное устройство с обновленной прической или оптикой, система постепенно освежает основной шаблон вашего облика для увеличения точности действия без снижения уровня безопасности.

Безопасность биометрических данных.

Множество юзеры боятся сохранять свои био-идентификационные данные на мобильном устройстве из-за вероятности утечки данных или хакерской атаки. Определенные компании, вроде Вулкан Казино Платинум, предлагают решения для улучшения сохранности данных юзеров.

• Локальное сбережение: Большинство устройств хранит био-идентификационные шаблоны только внутри защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Они никогда не выходят из аппарат и не доступны в том числе изготовителю.

• Шифрование: Все данные хранятся только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Приложения третьих девелоперов не имеют прямого доступа к биометрическим; они могут лишь запрашивать факт верификации личности через системный API.

Следует отметить существенную подробность: в случае, если кто-либо сможет получить доступ к вашему телефону физически (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие производители осуществляют систему защиты от неосознанного разблокирования — например, требуют раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют виды распознавания лиц на изображениях?

На сегодняшний день можно различить три ключевых подхода к реализации этой операции:

Софтверное двухмерное распознавание

Используется только фронтальная видеокамера без вспомогательных датчиков дистанции. Подобный метод встречается наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность воплощения; минимальная стоимость; оперативная функционирование при качественном свете.
Минусы: несложно ввести в заблуждение снимком; нестабильная функционирование ночью; слабая защищенность.

Оборудование для 3D сканирование

Задействует инфракрасную видеокамеру + проекционный модуль точек + сенсоры дистанции (Face ID у Apple; подобные решения у Huawei Mate).
Достоинства: значительная достоверность; невозможно обмануть изображение/видеозапись; постоянная функционирование в любых условиях освещения.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Смешанные подходы с ИИ-дополнением

Задействуют комбинацию программируемых методов + техническую обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие товары, например Vulkan Platinum и Google Pixel Face Unlock последних версий, сочетают фронталку c инфракрасным сенсором мобильности Soli Radar для защиты от подделок жестами/масками/видеоэкранами посторонних устройств.

Иллюстрации эксплуатации различных техник

• iPhone серии X/11/12/13/14 применяют только аппаратное трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз внедрил эквивалент Face ID среди Android.
• Samsung Galaxy S10/S20 имеют как программное 2D распознавание по изображению селфи-камерой, так и датчик радужки глаза.
• Huawei Mate20 Pro использует комплекс из ИК-освещения + Dot Projector + ToF-датчик

Вопросы безопасности и ложные срабатывания

Несмотря на замечательный развитие техники за недавние лет, идеальных механизмов пока не существует:

1. Шанс обмана: Доступные телефоны без труда открываются четкой снимком владельца либо роликом с экрана другого устройства.
2. Идентичные близнецы: Даже самые совершенные системы могут ошибиться между однояйцевыми близнецами либо родственниками с очень аналогичной внешностью.
3. Изменения внешнего вида: Внезапное утрата веса/увеличение массы тела, косметические процедуры либо травмы иногда необходимы для перерегистрации биометрии.
4. Условия записи: Интенсивная освещённость солнечным светом либо глубокая темнота могут уменьшить точность определения признаков.

Здесь несколько советов по защищённому применению:

• Для значимых операций всегда применяйте двухфакторную аутентификацию;
• Не включайте возможность “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
• Регулярно апгрейдите ПО мобильного устройства для обеспечения безопасности от новых видов атак;
• Включайте функцию “Требовать открытых глаз” там, где она доступна.

Где также используется технологии помимо мобильных телефонов?

Пускай тема этой статьи посвящена в частности портативным гаджетам, необходимо сказать о других сферах применения технологии:

• Контроль доступа в рабочих помещениях и многоквартирных зданиях;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Цифровые идентификационные документы последнего типа;
• Системы видеонаблюдения городских служб;
• Автоматизирование учёта посещаемости образовательных учреждений/университетов;
• Вход юзеров персональных компьютеров/ноутбуков.

Например: В городском метро уже проверяется система платежа проезда по лицу (“Face Pay”) — хватит пройти через турникет без карты или телефона! Аналогичные инициативы осуществляются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким способом меняется технология сегодня?

Любой годочек проявляются свежие мысли для усовершенствования качества деятельности систем распознавания лиц:

1. Увеличивается детализация датчиков — чем больше элементов фиксируется видеокамерой/глубинными сенсорами, тем меньше шанс ошибки;
2. Развиваются искусственные интеллекты — новейшие архитектуры вида MobileNetV3 дают возможность оперативно адаптироваться к дополнительным особенностям внешности пользователя напрямую на гаджете без отправки данных в облако.
3. Развиваются методы антиспуфинга — теперь мобильные устройства умеют отличать подлинные живые лица от фиксированных фото/масок по мельчайшим микродвижениям.
4. Интеграция со умными устройствами — смарт-часы могут авто блокировать смартфон, если пользователь отошёл далеко.
5. Возникают комбинированные механизмы — к примеру комбинирующие голосовую опознание + облик + отпечаток пальца.

Здесь, которые тренды особенно востребованы на сегодняшний день:

1) Сокращение деталей

Изготовители пытаются сократить габариты выреза (“чёлки”) для датчики на экране за счёт внедрения маленьких ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на устройстве

Для увеличения приватности всё более обработки данных происходит локально без отправки данных во сторонний облачный сервис.

3) Стандартизация стандартов

Гугл интенсивно продвигает норму BiometricPrompt API, с целью чтобы подобные площадки, как Вулкан Платинум, и любые Android-программы были совместимы с всеми формами биометрии унифицированно.

Какое решить на сегодня?

Когда тебе важна предельная безопасность информации, выбирайте топовые аппараты со встроенным ИК-излучателем или ToF-сенсором глубины.

• iPhone всех существующих новейших поколений
• Huawei Mate/Series P линейки
• Mi Expert
• Vivo X модели
• Oppo Найти X линейки.

Если средства скромен – лучше предпочесть классическим способам безопасности (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в Вулкан Платинум, применять только как дополнительную опцию комфорта.

Каким образом повысить комфорт работы функции?

Есть некоторые лайфхаков для тех, кто уже применяет разблокировку через лицо:

1. Регулярно обновляйте свою фотографию-шаблон, если сильно трансформируется внешний вид.
2. Не упускайте из виду очищать объектив фронтальной камеры – разводы могут понизить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам включает камеру когда вы поднимаете его.
4. В процессе записи постарайтесь держать голову неподвижно напротив камеры не допуская сильного наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отворачиваетесь от дисплея.

Будущее эволюции технологии

В предстоящие годы можно предполагать развития полностью дистанционных способов распознавания персоны сразу по нескольким биометрическим параметрам одновременно: физиономия + речь + манера ходьбы + жесты рук!

Также предполагается возникновение свежих подходов охраны конфиденциальности – например, динамическое корректировка электронного образца после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – одна из очень увлекательных техник нашего периода! Она делает интеракцию со телефоном удобнее чем когда-либо прежде, и такие программы, как Вулкан Казино Платинум, могут существенно улучшить ваш юзерский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы понимаете, как работает эта технология изнутри, – сможете вдумчиво подбирать свой следующий девайс!