Каким способом функционирует распознавание лицевых образов в смартфонах

Почему мы выбираем разлочивание по фейсу

В прошлые времена идентификация физиономий превратилось в одной из самых распространённых опций для деблокировки мобильных телефонов. Лишь пару лет тому назад основная масса использующих довольствовались пин-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением подобных технологий, например Вулкан 24, нам вполне просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Какая вещь делает данную возможность настолько популярной? Во-первых, это комфортно: не нужно запоминать замысловатые пароли или искать правильный палец в темноте. Кроме того, это быстро: современные алгоритмы распознают лицо фактически за мгновения ока. В-третью очередь, это впечатление будущего — будто в фильмах про казино вулкан агентов.

Тем не менее за данной видимой несложностью таится весь мир трудных методов и инженерных концепций. Попробуем разобраться, как конкретно функционирует фейсканирование в новейших мобильных телефонах, какие бывают способы, насколько они защищены и что нас ждёт впереди.

Краткая история эволюции технологии

Идентификация лиц как методика имеется уже более 50 лет. Первые попытки автоматического анализа лица были сделаны еще в 1960-х годах в исследовательских центрах США. Тогда компьютеры могли лишь выделять контуры лица и вычислять дистанции между зрачками и устами на ахроматических изображениях.

Первые коммерческие установки возникли в 1990-х годах, но они были неидеальны: функционировали медленно и нередко ошибались. Только с эволюцией синтетических сетей и таких систем, как Вулкан 24 Казино, высокопроизводительных мобильных микросхем идентификация лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным идентификацией лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие начали внедрять свои разработки.

Основные этапы функционирования системы определения

Процесс идентификации лица можно примерно разделить на несколько основных этапов:

Идентификация лиц — аппарат выявляет существование человеческого образа в кадре.
Выделение характеристик — механизм исследует контуры облика: очертания зрительных органов, обонятельного органа, уст, расположение надбровных дуг.
Построение модели — создаётся уникальный цифровой отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение с стандартом — сформированный шаблон сверяется со сохранённой при внесении биометрической данными владельца.
Принятие выбора — если соответствие достаточно значительное, смартфон открывается.

Каждый из данных шагов нуждается в специальных методов и оптимизаций для оперативной работы прямо на устройстве.

Железные компоненты: что находится в их недрах

Типичная селфи камера.

Наиболее простой метод идентификации лица применяет лишь переднюю камеру смартфона смартфона. Данный способ внедрён во многочисленных доступных вариантах Android-девайсов.

Сильные стороны:

Не потребляет дополнительные сенсоров.
Шустро работает при достаточном свете.

Слабые стороны:

Просто одурачить снимком или видео.
Неправильно действует при низком освещённости или необычных точках зрения.

Инфракрасная камера и пунктирный проектор

Более продвинутые системы, такие как Вулкан 24 Казино, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс составляет базу Face ID от Apple.

Каким образом это функционирует:

Точечный устройство проекции отображает на облик использующего невидимую решетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 пятен).
ИК камера фиксирует деформацию этой сетки по плоскости лица.
Получается 3D карта глубины глубины, что практически неосуществима для имитации типичной фото или маскировкой.

Достоинства

Надёжная работа даже в полной неосвещённости.
Высокая сопротивляемость к подделкам.
Точность идентификации свыше 99%.

Дополнительные сенсоры

В отдельных устройствах применяются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые измеряют период распространения света до объекта и обратно; Трехцветные-датчики дальности; специальные оптические дальномеры для создания более детализированной 3D-модели лица.

Эти инновации используются наиболее часто во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные алгоритмы: синтетический разум в исполнении

Текущие системы распознавания лиц невозможны в отсутствие использования ИИ и машинного обучения. Именно благодаря таким технологиям, как Вулкан 24 Казино, устройство может узнавать владельца даже при трансформациях облика: новая причёска, щетина, оптика или макияж не становятся барьером для открытия.

Распознавание лица

При начальном шаге программа обязана оперативно обнаружить лицо внутри полного снимка камеры. Для этой задачи задействуются последовательные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые “обучены” распознавать лица людей среди множества других объектов.

Пример: процесс MTCNN в состоянии распознавать лицо даже в случае частичном закрытии (например, платком или ладонью).

Выделение основных аспектов

После распознавания лица устройство, такая как Вулкан 24 Казино, определяет местоположение главных точек: кончики глаз, кончик носа, контуры губ и так далее. Часто применяется от 68 до 128 главных точек на лице.

Данное требуется для нормализации картинки: если человек находится с телефон под углом, или склонил головку, программа исправляет изображение до нормального состояния для последующего изучения.

Создание биометрического идентификатора модели

Далее нейросеть строит уплотненное числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 флоатов.

Данный шаблон крайне трудно подделать: он не хранит само картинку юзера, а лишь уникальные черты его облика, что делает его оптимальным для таких систем, как Vulkan24.

Сопоставление и принятие решения

Если юзер хочет разблокировать телефон взглядом, механизм воспроизводит все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый уровень (обычно больше 99%), телефон, как и платформа Vulkan24, разблокируется; если нет — доступ блокируется.

Адаптация к изменениям внешнего вида

Увлекательная характеристика актуальных системы — способность самообучения. Если ты постоянно разблокируете смартфон с новой прической или оптикой, алгоритм постепенно обновляет базовый шаблон вашего лица для повышения точности работы без ухудшения безопасности.

Безопасность биометрии данных.

Большинство клиенты беспокоятся сохранять свои биометрические идентификационные данные на мобильном устройстве из-за угрозы утечки информации или взлома устройства. Иные организации, вроде Vulkan24, предлагают решения для увеличения безопасности данных пользователей.

Локальное сбережение: Большинство девайсов хранит биометричные шаблоны лишь внутрь безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Они никогда не покидают гаджет и закрыты даже изготовителю.
Шифрование: Все сведения сохраняются только в кодированном виде с использованием новейших криптографических алгоритмов AES256.
Изоляция программ: Программы внешних разработчиков не обладают непосредственного доступа к биометрическим данным; они могут лишь запрашивать подтверждение верификации идентичности через системный API.

Необходимо подчеркнуть важную особенность: если кто-то получит доступ к вашему телефону физически (например, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие компании осуществляют защиту от неосознанного разблокирования — в частности, заставляют разомкнуть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют категории определения лиц на изображениях?

На сегодняшний день можно выделить определить три основных подхода к реализации этой операции:

Софтверное 2D определение

Используется только передняя камера без дополнительных сенсоров дистанции. Этот способ наблюдается чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность воплощения; умеренная стоимость; оперативная работа при хорошем свете.
Минусы: легко ввести в заблуждение снимком; ненадежная деятельность ночью; слабая охрана.

Аппаратное объёмное сканирование

Использует ИК камеру + проектор пикселей + датчики дистанции (Face ID от Apple; подобные решения у Huawei Mate).
Преимущества: высокая надёжность; не получится обмануть фото/видео; стабильная функционирование при любом освещении.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные подходы с интеграцией ИИ

Применяют комбинацию программных методов + аппаратно-техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например Вулкан 24 Казино и Google Pixel Face Unlock современных версий, комбинируют фронтальную камеру c ИК сенсором движения Soli Radar для предотвращения от подделок руками/масками/видеодисплеями чужих устройств.

Иллюстрации применения различных методов

iPhone серии X/11/12/13/14 используют только техническое трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition впервые внедрил аналог Face ID в числе Android.
Samsung Galaxy S10/S20 имеют как программное обеспечение двухмерное идентификацию по снимку фронтальной камерой, так и сканер ириса глаза.
Huawei Mate20 Pro использует набор из ИК-подсветки + Dot Projector + ToF-сенсор

Трудности охраны и ошибочные тревоги

Несмотря на замечательный прогресс технологий за последние годы, безупречных систем пока не существует:

Шанс подвоха: Недорогие телефоны без труда открываются четкой снимком хозяина или видеозаписью с дисплея иного гаджета.
Идентичные двойняшки: Даже самые безупречные механизмы могут перепутать между монозиготными близнецами либо родственниками с очень схожей внешностью.
Изменения внешности: Внезапное утрата веса/увеличение массы тела, пластические операции либо травмы порой необходимы для повторной регистрации биометрических данных.
Условия фотографирования: Сильная освещённость солнечным светом либо плотная затенение могут снизить аккуратность распознавания признаков.

Здесь пара советов для надёжному использованию:

Для важных операций всегда используйте дополнительную аутентификацию;
Не активируйте функцию “Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
Систематически апгрейдите ПО мобильного устройства для обеспечения безопасности от актуальных атак;
Включайте настройку “Требовать распахнутых глаз” в тех местах, где она имеется.

Где ещё находится применение технология помимо мобильных телефонов?

Несмотря на то, что предмет этой статьи касается конкретно портативным гаджетам, стоит упомянуть о прочих направлениях внедрения технологии:

Контроль входа в рабочих помещениях и жилых домах;
Платёжные терминалы финансовых учреждений (“Face Pay”);
Цифровые паспорта последнего образца;
Системы видеоконтроля городских подразделений;
Автоматизирование регистрации явки учебных заведений/университетов;
Авторизация пользователей персональных компьютеров/ноутбуков.

Например: В московском метро уже проверяется система оплаты проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без карты или мобильника! Аналогичные инициативы развиваются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом изменяется технический процесс в наше время?

Любой год проявляются свежие мысли для повышения уровня функционирования систем идентификации лиц:

Увеличивается чёткость датчиков — чем больше информации фиксируется фотоаппаратом/глубинными сенсорами, тем меньше вероятность неточности;
Развиваются нейронные сети — современные структуры типа MobileNetV3 обеспечивают возможность быстро адаптироваться к новым особенностям облика владельца напрямую на гаджете без пересылки информации в облачное хранилище.
Улучшаются способы антиспуфинга — теперь смартфоны способны отличать реальные живые облики от фиксированных снимков/масок по микроскопическим микродвижениям.
Интеграция со умными устройствами — умные часы могут автоматически блокировать телефон, если пользователь отошёл далеко.
Проявляются смешанные механизмы — в частности комбинирующие аудио аутентификацию + облик + дактилоскопический след.

Вот, которые тренды особенно востребованы сейчас:

1) Миниатюризация компонентов

Изготовители пытаются сократить величину отверстия (“чёлки”) для сенсоры на экране за счёт встраивания маленьких ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработывание прямо на аппарате

Для увеличения личной безопасности всё более вычислений выполняется локально без передачи данных во сторонний облачный сервис.

3) Унификация норм

Google активно пропагандирует эталон BiometricPrompt API, для того чтобы подобные системы, как Вулкан 24, и любые Android-программы могли работать с всеми формами биометрии единообразно.

Что выбрать сегодня?

В случае если вам необходима наивысшая сохранность информации, остановите выбор на флагманские устройства с вмонтированным ИК-проектором либо ToF-сенсором глубины.

iPhone всех существующих актуальных версий
Huawei Companion/P серии
Mix Professional
Vivo X серии
Oppo Обнаружить Х серий.

Если бюджет невелик – лучше предпочесть обычным методам безопасности (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в Вулкан 24, применять только как второстепенную возможность удобства.

Каким образом увеличить практичность использования возможности?

Есть несколько советов для пользователей, кто уже использует разблокировку по лицу:

Периодически обновляйте свою фото-шаблон, если значительно трансформируется внешность.
Не забывайте протирать линзу фронтальной камеры – пятна могут уменьшить четкость!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам запускает фотоаппарат как только вы берёте его в руки.
В процессе записи старайтесь сохранять лицевую часть ровно напротив камеры не допуская сильного наклона головы.
Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвернулись от дисплея.

Возможности развития инноваций

В предстоящие годы можно ожидать развития полностью дистанционных способов распознавания индивидуума сразу по нескольким биометрическим данным параметрам одновременно: физиономия + звучание + походка + движения рук!

Также вероятно возникновение новых методов охраны приватности – например, переменное модификация цифрового шаблона после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – одна из наиболее интересных техник нашего времени! Она обеспечивает общение со телефоном проще чем до этого, и такие аппы, как Vulkan24, могут в разы улучшить ваш опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы осведомлены, как работает эта система внутри, – сможете более осмысленно выбирать свой будущий гаджет!