Как работает определение лицевых образов в телефонах

Для чего мы останавливаемся на разблокирование по фейсу

В недавние времена идентификация лиц стало одной из наиболее востребованных опций для открытия мобильных телефонов. Всего несколько годков назад основная часть юзеров довольствовались PIN-кодами, паролями или датчиками отпечатков пальцев. Но при появлением подобных технологий, например вулкан россия, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какая вещь обуславливает эту возможность такой востребованной? Во-первых, это практично: не нужно помнить трудные пароли или искать правильный палец в мраке. Кроме того, это оперативно: современные системы узнают лицо буквально за мгновение. В-третьих, это ощущение футуризма — словно в кинолентах про вулкан россия разведчиков.

Тем не менее за этой видимой несложностью скрывается полный вселенная комплексных методов и инженерных решений. Давайте понять, как конкретно функционирует фейсканирование в современных смартфонах, какие применяются методы, насколько они защищены и что нас ожидает в будущем.

Короткая хроника развития техники

Идентификация лиц как технология присутствует уже более пятидесяти лет. Изначальные эксперименты автоматизированного изучения лиц были предприняты еще в 1960-х годах в научных учреждениях США. Тогда компьютеры способны были лишь выделять очертания головы и определять дистанции между очами и ртом на монохромных снимках.

Первые торговые платформы возникли в 90-х, но они были далеки от совершенства: функционировали медленно и часто ошибались. Только с прогрессом нейронных сетей и таких площадок, как вулкан россии, сильных мобильных процессоров распознавание лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным идентификацией лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие начали интегрировать свои разработки.

Ключевые шаги действия системы распознавания

Процесс идентификации лица можно ориентировочно поделить на несколько важных этапов:

Идентификация лиц — камера выявляет присутствие людского образа в снимке.
Выделение особенностей — механизм изучает черты облика: форму глаз, носа, уст, расположение бровей.
Построение шаблона — создаётся неповторимый цифровой отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение со эталоном — сформированный шаблон сверяется со записанной при регистрации биометрической информацией владельца.
Принятие выбора — если соответствие достаточно значительное, смартфон открывается.

Каждый из этих этапов запрашивает индивидуальных процедур и улучшений для оперативной работы прямо на устройстве.

Технические составляющие: что находится в их недрах

Стандартная передняя камера.

Самый простой вариант идентификации облика задействует исключительно лицевую видеокамеру мобильного устройства. Данный способ внедрён во различных недорогих версиях Android-девайсов.

Положительные стороны:

Не нуждается в потребляет внешних датчиков.
Быстро функционирует при качественном освещении.

Отрицательные стороны:

Несложно ввести в заблуждение изображением или видеозаписью.
Неудачно функционирует при низком освещении или непривычных углах обзора.

ИК камера и пунктирный проектор

Более усовершенствованные системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс является основой Face ID от Apple.

Каким способом это функционирует:

Точечный проектор показывает на физиономию использующего невидимую сетку из тысяч инфракрасных меток (например, Face ID задействует около 30 000 точек).
ИК камера записывает искривление данной решетки по поверхности лица.
Создаётся 3D карта глубинности, которая почти что неосуществима для подделки стандартной снимком или маской.

Преимущества

Надёжная деятельность даже в полной тьме.
Высокая сопротивляемость к имитациям.
Точность распознавания более 99%.

Дополнительные сенсорные устройства

В определённых аппаратах используются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые измеряют период прохождения луча до предмета и обратно; Трехцветные-датчики глубины; специальные лазерные лидары для построения более точной 3D-модели лица.

Эти технологии используются в основном во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: искуственный интеллект на действии

Текущие системы распознавания лиц невозможны при отсутствии применения artificial intelligence и machine learning. Именно вследствие таким технологиям, как вулкан россии, устройство способно узнавать владельца даже при метаморфозах внешности: новая стрижка, щетина, линзы или косметика не становятся помехой для открытия.

Обнаружение лиц

В стартовом шаге система необходимо оперативно распознать ликовое изображение в пределах всего изображения камеры. Для данной цели задействуются последовательные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые натренированы находить лиц человека среди множества других объектов.

Пример: метод MTCNN способен находить лицо даже при неполном перекрытии (например, платком или ладонью).

Идентификация важных моментов

После распознавания лица механизм, такая как вулкан россии, устанавливает расположение основных точек: края глаз, конец носа, края губ и так далее. Часто применяется от 68 до 128 главных меток на лицевой области.

Это требуется для выравнивания изображения: если юзер держит смартфон под наклоненным, или наклонил голову, программа корректирует картинку до нормального состояния для дальнейшего анализа.

Построение биометрии шаблона

Далее нейросеть строит сжатое числовое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой образ лица длиной от 128 до 512 чисел с плавающей запятой.

Данный формат очень затруднительно сфальсифицировать: он не удерживает непосредственно картинку юзера, а лишь уникальные особенности его облика, что делает его идеальным для таких систем, как vulkan russia.

Сравнение и принятие решения

Если пользователь намеревается открыть мобильник взглядом, механизм повторяет все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый уровень (обычно больше 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ блокируется.

Адаптация к трансформациям облика

Занимательная характеристика актуальных систем — возможность самостоятельного обучения. Если ты постоянно открываете смартфон с свежей укладкой или оптикой, программа постепенно обновляет базовый образец вашего лица для повышения точности работы без ухудшения безопасности.

Защита биометрических информации.

Большинство пользователи боятся хранить свои биометрические идентификационные данные на смартфоне из-за риска утечки информации или взлома устройства. Иные компании, например vulkan russia, предлагают варианты для улучшения сохранности информации пользователей.

Локальное хранение: Большинство аппаратов записывает биометричные шаблоны только в пределах защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не оставляют аппарат и недоступны в том числе изготовителю.
Шифрование: Все информация хранятся только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.
Изоляция приложений: Программы внешних разработчиков не обладают прямого возможности доступа к биометрическим; они могут лишь запрашивать факт верификации идентичности через системный API.

Следует отметить важную подробность: если кто-то достанет физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство производители осуществляют систему защиты от “слепого” разблокирования — к примеру, просят разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают типы распознавания лиц?

Сегодня можно выделить различить 3 ключевых способа к осуществлению этой задачи:

Программное 2D распознавание

Применяется только лицевая видеокамера без вспомогательных датчиков глубины. Подобный метод используется обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота реализации; умеренная цена; оперативная деятельность при достаточном освещении.
Минусы: просто ввести в заблуждение фотографией; нестабильная работа ночью; слабая безопасность.

Оборудование для 3D сканирование

Задействует инфракрасную камеру + проектор точек + датчики глубины (Face ID от Apple; аналогичные технологии у Huawei Mate).
Достоинства: большая надежность; нельзя подделать фото/видео; устойчивая деятельность при любом освещении.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Гибридные методы с дополнением ИИ

Применяют комбинацию программируемых методов + аппаратно-техническую обработку + последующую обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, как вулкан россии и Google Pixel Face Unlock современных версий, комбинируют фронтальную камеру c инфракрасным датчиком мобильности Soli Radar для защиты от фальсификаций жестами/масками/видеоэкранами чужих устройств.

Образцы использования различных техник

iPhone линейки X/11/12/13/14 задействуют только аппаратное трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition в первый раз представил аналог Face ID в ряду Android.
Samsung Galaxy S10 версия/S20 имеют как программное обеспечение плоское определение по фото фронталкой, так и датчик ириса глаза.
Huawei Mate20 Pro задействует набор из ИК-подсветки + Dot Projector + ToF-сенсор

Проблемы защиты и ошибочные сигналы

Несмотря на впечатляющий прогресс техники за прошедшие годы, безупречных систем пока не имеется:

Возможность подвоха: Недорогие телефоны легко “разблокируются” высококачественной фотографией хозяина или же видеозаписью с экрана другого устройства.
Идентичные близнецы: Даже самые совершенные механизмы могут ошибиться между монозиготными близнецами либо родичами с очень аналогичной внешностью.
Изменения облика: Стремительное похудение/увеличение массы тела, пластические операции или травмы порой необходимы для повторной регистрации биометрии.
Условия съёмки: Яркая освещённость солнечным светом либо интенсивная затенение могут понизить точность идентификации признаков.

Вот несколько советов для безопасному использованию:

Для значимых операций всегда применяйте дополнительную аутентификацию;
Не включайте функцию “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
Постоянно обновляйте прошивку смартфона для защиты от актуальных атак;
Включайте функцию “Требовать распахнутых глаз” там, где она доступна.

В каких областях также используется технологии за исключением мобильных телефонов?

Несмотря на то, что предмет данной работы сосредоточена на конкретно смартфонам и планшетам, следует отметить других сферах применения технологии:

Управление доступа в офисах и резиденциях;
Платёжные аппараты финансовых учреждений (“Face Pay”);
Цифровые удостоверения личности современного образца;
Комплексы видеоконтроля муниципальных служб;
Автоматизирование учёта присутствия образовательных учреждений/институтов;
Авторизация пользователей персональных компьютеров/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — хватит пройти через барьер без пластика или мобильника! Похожие проекты осуществляются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким образом изменяется технология в нынешнее время?

Всякий годик проявляются современные идеи для повышения стандарта функционирования систем идентификации лиц:

Увеличивается детализация датчиков — чем больше деталей фиксируется видеокамерой/датчиками глубины, тем меньше шанс ошибки;
Развиваются нейронные сети — новейшие конструкции вида MobileNetV3 обеспечивают возможность оперативно адаптироваться к свежим характеристикам вида владельца непосредственно на девайсе без отправки данных в облако.
Развиваются технологии антиспуфинга — теперь смартфоны могут распознавать подлинные живые облики от фиксированных фотографий/масок по мельчайшим микродвижениям.
Синхронизация со интеллектуальными приборами — интеллектуальные часы могут автоматически закрыть доступ к телефон, если владелец ушёл далеко.
Возникают смешанные механизмы — к примеру комбинирующие голосовую идентификацию + облик + отпечаток пальца.

Итак, какие направления в особенности актуальны в данный момент:

1) Миниатюризация элементов

Изготовители намереваются уменьшить габариты отверстия (“чёлки”) под датчики на дисплее за счёт интеграции миниатюрных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Переработка прямо на устройстве

Для повышения приватности всё более расчётов происходит на месте без пересылки информации во сторонний облачный услугу.

3) Унификация стандартов

Гугл активно продвигает норму BiometricPrompt API, для того чтобы подобные площадки, как вулкан россия, и все Android-аппы были совместимы с любыми видами биометрии унифицированно.

Какое подобрать сегодня?

Если тебе важна максимальная безопасность данных, подбирайте топовые модели с вмонтированным ИК-излучателем или же ToF-сенсором глубины.

iPhone каждого актуальных версий
Huawei Partner/P линейки
Xiaomi Expert
Vivo X серии
Oppo Обнаружить X линейки.

Если бюджет скромен – лучше выбирать классическим способам защиты (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в вулкан россия, применять только как второстепенную возможность комфорта.

Каким образом улучшить комфорт функционирования опции?

Есть пара хитростей для пользователей, кто уже пользуется разблокировку через лицо:

Периодически обновляйте свою фотографию-шаблон, если значительно трансформируется внешний вид.
Не пренебрегайте протирать объектив фронтальной камеры – разводы могут понизить четкость!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам запускает камеру как только вы поднимаете его.
При регистрации старайтесь держать лицевую часть прямо перед объектива не допуская резкого наклона головы.
Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отвернулись от экрана.

Будущее развития технологии

В предстоящие годы можно предполагать появления полностью бесконтактных способов опознания человека сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + звучание + походка + манипуляции руками!

Также возможно возникновение свежих подходов защиты приватности – к примеру, изменяющееся модификация цифрового паттерна после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – единственная из наиболее захватывающих технологий нашего времени! Она делает взаимодействие со смартфоном удобнее чем когда-либо прежде, и такие программы, как vulkan russia, могут в разы повысить ваш пользовательский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы осведомлены, как работает эта технология внутри, – будете в состоянии осознаннее выбирать свой будущий гаджет!