Как функционирует определение лиц в мобильных устройствах

Для чего мы предпочитаем разблокирование по фейсу

В последние годы определение лиц является одной из самых распространённых опций для открытия умных телефонов. Всего пару годков назад основная масса использующих удовлетворялись PIN-кодами, паролями или датчиками отпечатков пальцев. Но при появлением подобных технологий, например Вулкан Платинум, нам достаточно просто взглянуть на экран — и устройство тут же узнает своего владельца.

Что превращает эту функцию настолько популярной? Во-первых, это удобно: не нужно удерживать в памяти замысловатые пароли или искать правильный палец в мраке. Кроме того, это оперативно: современные программы узнают лицо фактически за доли секунды. В-третью очередь, это впечатление будущего — как будто в кинофильмах про вулкан платинум зеркало разведчиков.

Однако за такой кажущейся простотой таится весь универсум трудных техник и инженерных разработок. Давайте разобраться, как точно функционирует идентификация по лицу в новейших гаджетах, какие применяются методы, насколько они защищены и что нас ждёт впереди.

Короткая история эволюции технологии

Идентификация лиц как техника существует уже более пятидесяти лет. Первые пробы автоматизированного анализа облика были сделаны еще в 1960-х годы в лабораториях США. Тогда вычислительные машины способны были лишь определять очертания черепа и определять дистанции между зрачками и устами на черно-белых изображениях.

Изначальные торговые системы появились в девяностых годах, но они были несовершенны: действовали неспешно и нередко ошибались. Только с прогрессом искусственных сетей и таких платформ, как Vulkan Platinum, сильных мобильных чипов определение лиц стало по-настоящему массовым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным распознаванием лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие начали внедрять собственные разработки.

Ключевые этапы функционирования механизма распознавания

Процесс распознавания лица можно условно поделить на несколько основных этапов:

Идентификация лица — устройство распознает существование гуманного лица в изображении.
Определение характеристик — алгоритм анализирует особенности облика: очертания глаз, носа, уст, позицию бровей.
Построение модели — создаётся уникальный электронный отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение со стандартом — сформированный модель сравнивается с зафиксированной при регистрации биометрической сведениями владельца.
Принятие выбора — если сходство достаточно существенное, смартфон открывается.

Всякий из указанных этапов запрашивает специальных процедур и усовершенствований для скорой работы прямо на устройстве.

Технические составляющие: что прячется внутри них

Типичная селфи камера.

Самый простой вариант идентификации облика применяет только фронтальную камеру мобильного устройства. Подобный подход реализован во многочисленных доступных вариантах Android-устройств.

Плюсы:

Необходимо нуждается в внешних сенсоров.
Быстро действует при хорошем свете.

Слабые стороны:

Несложно одурачить изображением или роликом.
Плохо работает при слабом свете или нестандартных ракурсах.

Инфракрасная камера и пунктирный проектор

Более усовершенствованные системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс составляет базу Face ID от Apple.

Как это работает:

Точечный проекционный прибор проецирует на физиономию использующего невидимую структуру из тысяч инфракрасных меток (например, Face ID применяет около 30 000 пятен).
Инфракрасная устройство регистрирует искривление данной сетки по плоскости физиономии.
Создаётся трехмерная глубинная карта глубины, что почти невозможна для фальсификации стандартной снимком или маской.

Выигрыши

Надёжная функционирование даже в полной неосвещённости.
Большая защита к имитациям.
Точность идентификации более 99%.

Добавочные сенсорные устройства

В некоторых аппаратах задействуются также экстра сенсоры: ToF (Time-of-Flight), которые измеряют время движения луча до объекта и обратно; Трехцветные-датчики дальности; специальные лазерные измерители расстояния для создания более точной 3D-модели лица.

Эти разработки встречаются чаще всего во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: синтетический разум на действии

Нынешние устройства распознавания физиономий немыслимы при отсутствии использования ИИ и machine learning. Именно вследствие таким инновациям, как Vulkan Platinum, гаджет способно узнавать пользователя даже при изменениях облика: новая укладка, растительность на лице, очки или косметика не становятся барьером для открытия.

Детектирование лиц

В стартовом шаге система обязана оперативно распознать лицо в пределах всего кадра камеры. Для этой задачи задействуются последовательные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые натренированы идентифицировать лиц человека среди множества других объектов.

Пример: алгоритм MTCNN в состоянии распознавать лицо даже при неполном перекрытии (например, платком или рукой).

Выделение важных аспектов

После обнаружения лица система, такая как Vulkan Platinum, устанавливает расположение основных точек: кончики глаз, кончик носа, границы губ и так далее. Как правило применяется от 68 до 128 главных меток на лицевой поверхности.

Данное нужно для нормализации изображения: если пользователь держит телефон под наклоненным, или склонил головку, программа исправляет картинку до нормального состояния для дальнейшего анализа.

Построение биометрического шаблона

Далее нейросеть строит сжатое математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 чисел с плавающей запятой.

Этот образец очень затруднительно имитировать: он не хранит само фото юзера, а лишь особенные особенности его внешности, что делает его идеальным для таких платформ, как Вулкан Казино Платинум.

Сравнение и принятие решения

В случае, когда юзер желает разлочить телефон глазами, система повторяет все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный порог (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, открывается; если нет — доступ запрещается.

Адаптация к метаморфозам внешнего вида

Занимательная характеристика современных систем — возможность самообучения. Если вы часто открываете мобильное устройство с свежей стрижкой или очками, программа постепенно модернизирует эталонный модель вашего облика для увеличения точности действия без ухудшения безопасности.

Безопасность биометрии информации.

Многие юзеры опасаются держать свои биометрические данные на телефоне из-за угрозы утечки информации или взлома гаджета. Иные организации, такие как Вулкан Казино Платинум, предлагают решения для повышения сохранности сведений юзеров.

Локальное сбережение: Преимущественно устройств хранит био-идентификационные шаблоны лишь в пределах защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они всегда не покидают устройство и недоступны в том числе изготовителю.
Шифрование: Все сведения сохраняются только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.
Изоляция приложений: Приложения сторонних разработчиков не обладают прямого доступа к биометрическим; они могут лишь требовать подтверждение верификации личности через системный API.

Стоит упомянуть значимую подробность: если какой-то человек получит доступ к вашему телефону физически (например, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие производители реализуют систему защиты от неосознанного разблокирования — например, просят разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие имеются категории идентификации лиц?

На сегодняшний день можно выделить различить три основных способа к реализации этой функции:

Софтверное двухмерное определение

Применяется только фронтальная камера без экстра датчиков дистанции. Такой способ наблюдается чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота воплощения; умеренная стоимость; быстрая работа при хорошем освещении.
Минусы: легко обмануть фотографией; ненадежная функционирование ночью; слабая защищенность.

Аппаратное трёхмерное оцифровка

Использует ИК видеокамеру + проектор точек + сенсоры глубины (Face ID у Apple; подобные решения у Huawei Mate).
Достоинства: большая достоверность; невозможно подделать фото/видео; стабильная функционирование при любом освещении.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Гибридные способы с интеграцией ИИ

Используют комбинацию программируемых методов + аппаратную обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие продукты, как Vulkan Platinum и Google Pixel Face Unlock современных поколений, комбинируют фронталку c инфракрасным сенсором движения Soli Radar для защиты от фальсификаций жестами/масками/видеоэкранами чужих устройств.

Образцы применения разнообразных способов

iPhone модели X/11/12/13/14 используют только аппаратное трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition первый раз внедрил аналог Face ID в ряду Android.
Samsung Galaxy S10/S20 обеспечивают как программное обеспечение 2D идентификацию по изображению фронтальной камерой, так и сканер ириса глаза.
Huawei Mate20 Pro задействует комплекс из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Вопросы охраны и ошибочные сигналы

Несмотря на поразительный прогресс технологий за прошедшие лет, совершенных системы пока не существует:

Возможность мошенничества: Недорогие смартфоны просто “разблокируются” четкой снимком владельца либо видео с дисплея иного гаджета.
Идентичные близняшки: Даже самые совершенные системы могут спутать между однояйцевыми близнецами либо родичами с очень схожей внешностью.
Изменения облика: Внезапное утрата веса/увеличение массы тела, пластические операции либо травмы иногда требуют обновления данных биометрии.
Условия записи: Сильная освещённость солнцем или плотная затенение могут снизить аккуратность распознавания признаков.

Вот несколько рекомендаций по безопасному использованию:

Для важных операций всегда используйте дополнительную аутентификацию;
Не активируйте возможность “Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
Систематически обновляйте прошивку прошивку мобильного устройства для защиты от современных угроз;
Включайте опцию “Требовать открытых глаз” в тех местах, где она имеется.

В каких областях также используется технологии за исключением мобильных телефонов?

Несмотря на то, что тема этой публикации сосредоточена на конкретно мобильным устройствам, необходимо сказать о альтернативных областях использования технологии:

Мониторинг доступа в рабочих помещениях и жилых домах;
Платёжные аппараты банков (“Face Pay”);
Электронные паспорта нового типа;
Установки видеонаблюдения городских сервисов;
Механизация отслеживания посещаемости школ/вузов;
Авторизация юзеров компьютеров/ноутбуков.

Например: В городском метро уже проверяется система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через турникет без карты или мобильника! Аналогичные инициативы реализуются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как трансформируется технология сегодня?

Любой год появляются свежие мысли для улучшения стандарта работы систем лицевого распознавания:

Увеличивается разрешение сенсоров — чем больше деталей фиксируется камерой/глубинными сенсорами, тем меньше вероятность ошибки;
Развиваются искусственные интеллекты — современные архитектуры типа MobileNetV3 обеспечивают возможность быстро обучаться новым характеристикам вида владельца непосредственно на девайсе без отправки данных в облако.
Улучшаются способы антиспуфинга — теперь смартфоны могут различать реальные движущиеся лица от статичных фотографий/маскировок по мельчайшим микродвижениям.
Интеграция со смарт-гаджетами — интеллектуальные часы могут автоматически блокировать мобильный телефон, если пользователь ушёл далеко.
Возникают гибридные системы — в частности комбинирующие речевую аутентификацию + лицо + отпечаток пальца.

Здесь, те тренды очень востребованы в данный момент:

1) Уменьшение элементов

Изготовители намереваются уменьшить размер отверстия (“чёлки”) для датчики на дисплее за счёт интеграции миниатюрных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Переработка прямо на устройстве

Для улучшения приватности всё больше вычислений осуществляется на месте без пересылки данных во внешний облачный услугу.

3) Унификация стандартов

Google энергично продвигает стандарт BiometricPrompt API, чтобы аналогичные платформы, вроде Вулкан Платинум, и все Android-программы могли работать с различными типами биометрии стандартизированно.

Что подобрать сегодня?

Когда вам всем важна предельная защита информации, остановите выбор на флагманские аппараты с вмонтированным ИК-проектором или же ToF-сенсором глубины.

iPhone каждого новейших поколений
Huawei Partner/P Series серии
Mi Expert
Vivo X модели
Oppo Find X серии.

Если финансы ограничен – лучше предпочесть традиционным способам защиты (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в Вулкан Платинум, задействовать только как второстепенную опцию удобства.

Как увеличить практичность использования возможности?

Есть некоторые советов для пользователей, кто уже использует разблокировку через лицо:

Часто обновляйте свою изображение-шаблон, если кардинально изменяется внешность.
Не пренебрегайте очищать линзу фронтальной камеры – разводы могут снизить четкость!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам активирует фотоаппарат как только вы поднимаете его.
При регистрации старайтесь держать лицевую часть прямо впереди объектива исключая сильного наклона головы.
Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отворачиваетесь от дисплея.

Перспективы развития инноваций

В скоро наступающие периоды можно предвкушать развития полностью бесконтактных способов распознавания индивидуума сразу по нескольким биометрическим данным параметрам одновременно: облик + речь + шаги + манипуляции руками!

Также возможно возникновение современных подходов защиты приватности – например, переменное изменение диджитал образца после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень увлекательных инноваций нашего периода! Она делает взаимодействие со телефоном проще чем до этого, и такие программы, как Вулкан Казино Платинум, могут существенно оптимизировать ваш пользовательский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы понимаете, как работает эта система в деталях, – сумеете осознаннее подбирать свой очередной девайс!