Как функционирует идентификация лиц в телефонах

Зачем мы останавливаемся на разлочивание по фейсу

В последние времена распознавание лиц является одной из самых популярных функций для разблокировки умных телефонов. Лишь некоторые годов ранее основная часть пользователей довольствовались PIN-кодами, ключами доступа или датчиками отпечатков пальцев. Но с появлением подобных технологий, например admiral x, нам достаточно просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Какая вещь превращает данную возможность настолько популярной? Для начала, это комфортно: не нужно запоминать сложные пароли или отыскивать правильный палец в тьме. Кроме того, это быстро: современные системы идентифицируют лицо практически за мгновение. В-третью очередь, это впечатление футуристичности — словно в кинолентах про admiral x casino агентов.

Тем не менее за данной кажущейся простотой таится весь вселенная комплексных методов и инженерных концепций. Попробуем исследовать, как именно функционирует идентификация по лицу в новейших смартфонах, какие бывают способы, насколько они надёжны и что нас ждёт впереди.

Короткая хроника эволюции техники

Распознавание лиц как техника имеется уже более пятидесяти годов. Начальные эксперименты автоматизированного исследования лица были сделаны еще в 1960-х годах в исследовательских центрах США. Тогда компьютеры способны были лишь обозначать контуры лица и измерять дистанции между очами и губами на ахроматических фотографиях.

Первые торговые установки стали доступны в 1990-х годах, но они были далеки от совершенства: работали медленно и нередко ошибались. Только с эволюцией синтетических сетей и таких площадок, как адмирал х, высокопроизводительных мобильных микросхем распознавание лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным распознаванием лица. За этим последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали внедрять свои разработки.

Основные шаги функционирования устройства идентификации

Процесс определения лица можно примерно сегментировать на несколько ключевых этапов:

Распознавание лиц — аппарат выявляет наличие людского образа в снимке.
Выделение особенностей — система исследует контуры лица: конфигурацию глаз, обонятельного органа, губ, позицию бровей.
Построение шаблона — создаётся уникальный цифровой отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение с образцом — полученный образец сопоставляется со зафиксированной при регистрации биометрической данными владельца.
Принятие решения — если совпадение достаточно существенное, смартфон открывается.

Всякий из данных этапов нуждается в индивидуальных процедур и улучшений для быстрой работы прямо на устройстве.

Технические составляющие: что скрыто внутри них

Обычная фронтальная камера.

Наиболее простой метод идентификации облика применяет только лицевую камеру мобильного устройства. Такой способ осуществлён во многих доступных версиях Android-устройств.

Плюсы:

Необходимо потребляет дополнительных датчиков.
Шустро работает при достаточном освещении.

Отрицательные стороны:

Несложно одурачить снимком или роликом.
Неудачно работает при низком свете или нестандартных ракурсах.

ИК фотокамера и пунктирный проекционный аппарат

Более продвинутые системы, такие как адмирал х, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология является основой Face ID от Apple.

Каким образом это работает:

Точечный проектор отображает на лицо пользователя невидимую сетку из тысяч инфракрасных пятен (например, Face ID использует около 30 000 пятен).
ИК устройство записывает деформацию данной решетки по плоскости физиономии.
Формируется трёхмерная карта глубинности, что почти невозможна для фальсификации стандартной фото или маской.

Плюсы

Надёжная работа даже в полной темноте.
Высокая защита к имитациям.
Точность определения выше 99%.

Добавочные датчики

В определённых девайсах применяются также дополнительные сенсоры: ToF (Time-of-Flight), которые фиксируют время движения луча до предмета и обратно; Цветные-датчики глубины; специальные лазерные лидары для формирования более аккуратной 3D-модели лица.

Эти инновации используются чаще всего во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искуственный ум в исполнении

Современные системы распознавания лиц невозможны в отсутствие эксплуатации искусственного интеллекта и machine learning. Именно из-за таким инновациям, как адмирал х, устройство способно идентифицировать владельца даже при изменениях внешности: новая укладка, борода, очки или косметика не становятся препятствием для разблокировки.

Распознавание лица

При начальном шаге программа необходимо быстро обнаружить лицо среди всего кадра с камеры. Для данной цели применяются последовательные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые натренированы распознавать лица людей среди множества других объектов.

Пример: метод MTCNN способен обнаруживать физиономию даже в случае частичном перекрытии (например, шарфом или ладонью).

Идентификация основных точек

После идентификации лица механизм, такая как адмирал х, определяет местоположение ключевых точек: уголки глаз, кончик носа, контуры губ и так далее. Как правило используется от 68 до 128 ключевых маркеров на лицевой области.

Это действие требуется для нормализации изображения: если юзер удерживает смартфон под углом, или наклонил голову, программа корректирует изображение до обычного угла для последующего изучения.

Формирование биометрии модели

Далее нейросеть строит сжатое цифровое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след лица длиной от 128 до 512 чисел с плавающей запятой.

Этот формат крайне сложно сфальсифицировать: он не хранит непосредственно картинку юзера, а лишь исключительные особенности его вида, что делает его идеальным для таких платформ, как admiral-x.

Сопоставление и осуществление заключения

Когда юзер желает открыть мобильник глазами, механизм воспроизводит все описанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый порог (обычно больше 99%), телефон, как и платформа admiral-x, открывается; если нет — доступ блокируется.

Привыкание к метаморфозам внешности

Занимательная черта нынешних системы — способность самостоятельного обучения. Если ты регулярно разблокируете телефон с свежей укладкой или оптикой, алгоритм постепенно освежает эталонный образец вашего внешности для увеличения точности действия без снижения уровня безопасности.

Безопасность биометрических данных.

Большинство пользователи боятся сохранять свои биометрические данные на мобильном устройстве из-за угрозы потери данных или взлома гаджета. Некоторые фирмы, например admiral-x, предлагают варианты для увеличения безопасности сведений юзеров.

Локальное хранение: Преимущественно аппаратов записывает био-идентификационные шаблоны исключительно в пределах безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не выходят из устройство и не доступны включая создателю.
Шифрование: Все данные сберегаются только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.
Изоляция приложений: Приложения сторонних разработчиков не обладают непосредственного возможности доступа к биометрическим; они могут лишь запрашивать подтверждение верификации идентичности через системный API.

Стоит отметить значимую особенность: если какой-то человек получит доступ к вашему телефону физически (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство изготовители реализуют меры безопасности от неосознанного разблокирования — в частности, просят раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют типы распознавания лиц на изображениях?

В настоящее время можно определить 3 основных метода к выполнению этой операции:

Программируемое двухмерное распознавание

Эксплуатируется только лицевая камера без дополнительных сенсоров глубины. Такой метод наблюдается чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота осуществления; умеренная стоимость; скоростная работа при хорошем освещении.
Минусы: просто ввести в заблуждение снимком; неустойчивая деятельность ночью; недостаточная безопасность.

Техническое объёмное оцифровка

Применяет ИК видеокамеру + проекционный модуль точек + датчики глубины (Face ID у Apple; аналогичные решения у Huawei Mate).
Достоинства: большая достоверность; нельзя подделать фото/видео; постоянная работа при любом освещении.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Комбинированные способы с дополнением ИИ

Применяют комбинацию программируемых методов + аппаратно-техническую обработку + постобработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, например адмирал х и Google Pixel Face Unlock современных поколений, сочетают фронтальную камеру c инфракрасным сенсором движения Soli Radar для предотвращения от подделок руками/масками/видеоэкранами посторонних устройств.

Примеры применения различных методов

iPhone модели X/11/12/13/14 используют только техническое трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition в первый раз предложил подобие Face ID в ряду Android.
Samsung Galaxy S10 модель/S20 имеют как программное двухмерное определение по изображению фронтальной камерой, так и сканер радужки глаза.
Huawei Mate20 Pro задействует набор из ИК-подсветки + Dot Projector + ToF-сенсор

Вопросы защиты и ошибочные сигналы

Несмотря на замечательный успехи технологий за недавние лет, безупречных системы пока не наблюдается:

Шанс подвоха: Доступные телефоны без труда открываются качественной фотографией владельца или роликом с экрана другого устройства.
Идентичные близнецы: Даже самые совершенные устройства могут перепутать между монозиготными близнецами либо семьями с очень похожей внешностью.
Изменения облика: Внезапное снижение веса/увеличение массы тела, косметические процедуры или повреждения иногда необходимы для перерегистрации биометрии.
Условия фотографирования: Интенсивная засветка солнечным светом либо плотная затенение могут понизить точность идентификации признаков.

Ниже несколько подсказок по надёжному использованию:

Для критически важных операций всегда внедряйте двухфакторную аутентификацию;
Не включайте возможность “Разблокировка по лицу” на недорогих аппаратах без ИК-сенсоров;
Регулярно обновляйте прошивку ПО смартфона для предотвращения угроз от актуальных атак;
Включайте опцию “Требовать раскрытых глаз” в тех местах, где она имеется.

В каких местах дополнительно находится применение технологии кроме смартфонов?

Хотя предмет данной статьи посвящена в частности мобильным устройствам, необходимо сказать о других сферах применения технологии:

Мониторинг прохода в офисах и резиденциях;
Платёжные терминалы банков (“Face Pay”);
Виртуальные удостоверения личности современного образца;
Комплексы видеомониторинга муниципальных подразделений;
Механизация учёта явки учебных заведений/институтов;
Авторизация участников ПК/ноутбуков.

Например: В городском метро уже проверяется система оплаты проезда по фейсу (“Face Pay”) — хватит пройти через турникет без пластика или мобильника! Похожие инициативы реализуются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом трансформируется техпроцесс в наше время?

Каждый годочек проявляются новые мысли для повышения уровня работы систем распознавания лиц:

Увеличивается детализация датчиков — чем больше информации фиксируется фотоаппаратом/глубинными сенсорами, тем меньше шанс неточности;
Совершенствуются нейронные сети — передовые конструкции типа MobileNetV3 дают возможность скоростно обучаться дополнительным характеристикам вида пользователя непосредственно на девайсе без пересылки информации в облачное хранилище.
Улучшаются технологии антиспуфинга — теперь телефоны способны отличать реальные движущиеся лица от статичных фото/маскировок по незаметным движениям кожи.
Интеграция со интеллектуальными приборами — смарт-часы могут автоматически закрыть доступ к телефон, если владелец ушёл далеко.
Возникают смешанные системы — к примеру комбинирующие голосовую опознание + физиономию + дактилоскопический след.

Итак, какие тенденции очень актуальны на сегодняшний день:

1) Миниатюризация деталей

Изготовители намереваются сократить величину отверстия (“чёлки”) для датчики на дисплее за счёт интеграции компактных ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработка прямо на аппарате

Для улучшения личной безопасности всё больше обработки данных выполняется внутри устройства без отправки данных во внешний облачный услугу.

3) Унификация норм

Google активно продвигает норму BiometricPrompt API, для того чтобы такие платформы, вроде admiral x, и каждые Android-аппы могли работать с различными типами биометрии стандартизированно.

Какое выбрать сегодня?

Если вам всем нужна наивысшая защита данных, остановите выбор на передовые модели с интегрированным ИК-проектором или ToF-сенсором глубины.

iPhone всех актуальных моделей
Huawei Mate/P Series серии
Mix Expert
Vivo X модели
Оппо Find Икс серий.

Если бюджет скромен – лучше предпочесть классическим методам защиты (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в admiral x, задействовать только как опциональную возможность комфорта.

Как увеличить практичность использования возможности?

Есть пара хитростей для тех, кто уже применяет разблокировку через лицо:

Периодически обновляйте свою фотографию-шаблон, если кардинально трансформируется внешность.
Не пренебрегайте очищать линзу фронтальной камеры – загрязнения могут уменьшить четкость!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам активирует фотоаппарат как только вы поднимаете его.
В процессе регистрационного процесса постарайтесь сохранять лицевую часть прямо напротив камеры не допуская сильного наклона головы.
Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отвели взгляд от дисплея.

Возможности развития инноваций

В ближайшие годы можно ожидать появления полностью бесконтактных способов идентификации персоны сразу по нескольким биометрическим данным параметрам одновременно: физиономия + речь + манера ходьбы + движения рук!

Также предполагается появление новых подходов обеспечения приватности – к примеру, изменяющееся модификация электронного шаблона после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – единственная из наиболее захватывающих технологий нашего эпохи! Она делает интеракцию со смартфоном комфортнее чем до этого, и такие аппы, как admiral-x, могут существенно улучшить ваш пользовательский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы понимаете, как устроена эта методика в деталях, – сможете осознаннее выбирать свой очередной девайс!