Как действует распознавание лиц в смартфонах

Зачем мы предпочитаем разлочивание по лицу

В последние годы идентификация лиц превратилось в одной из самых распространённых опций для открытия мобильных телефонов. Еще несколько годков назад большинство пользователей обходились пин-кодами, паролями или датчиками отпечатков пальцев. Но с появлением таких технологий, например Spinto, нам вполне просто взглянуть на экран — и устройство тут же узнает своего владельца.

Что обуславливает эту конкретную функцию такой востребованной? Во-первых, это практично: не нужно запоминать трудные пароли или искать верный палец в темноте. Во-вторых, это оперативно: современные системы узнают лицо практически за доли секунды. В-третьем пункте, это впечатление футуризма — словно в кинолентах про спинто казино агентов.

Однако за такой кажущейся легкостью таится целый универсум сложных технологий и инженерных решений. Попробуем понять, как точно работает фейсканирование в актуальных мобильных телефонах, какие применяются способы, насколько они защищены и что нас ожидает в будущем.

Сжатая повествование эволюции инноваций

Идентификация лиц как методика имеется уже более 50 годов. Начальные попытки автоматизированного анализа лица были предприняты еще в 1960-х годы в лабораториях США. Тогда ЭВМ способны были лишь выделять контуры лица и вычислять промежутки между зрачками и губами на черно-белых снимках.

Начальные торговые системы стали доступны в 90-х, но они были неидеальны: действовали неспешно и часто ошибались. Только с развитием искусственных сетей и таких систем, как Спинто, мощных мобильных чипов идентификация лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным распознаванием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие стали интегрировать личные разработки.

Основные этапы функционирования системы определения

Процесс распознавания лица можно ориентировочно поделить на несколько важных этапов:

Распознавание лиц — аппарат определяет наличие человеческого образа в кадре.
Определение характеристик — система изучает черты облика: очертания глаз, обонятельного органа, губ, позицию надбровных дуг.
Построение шаблона — создаётся уникальный цифровой отпечаток (faceprint) на основе выделенных признаков.
Сравнение со образцом — полученный образец сопоставляется с зафиксированной при учёте биометрической информацией владельца.
Принятие определения — если сходство достаточно существенное, смартфон открывается.

Всякий из этих шагов запрашивает специальных алгоритмов и усовершенствований для скорой работы прямо на устройстве.

Железные компоненты: что прячется внутри

Типичная фронтальная камера.

Самый простой простой вариант идентификации физиономии задействует только лицевую камеру смартфона мобильного устройства. Подобный способ реализован во многочисленных недорогих версиях Android-устройств.

Преимущества:

Не нуждается в внешних сенсоров.
Оперативно действует при хорошем свете.

Недостатки:

Просто ввести в заблуждение изображением или видеозаписью.
Неправильно работает при слабом свете или непривычных точках зрения.

Инфракрасная камера и пунктирный проектор

Более продвинутые системы, такие как Спинто, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс составляет базу Face ID от Apple.

Каким способом это функционирует:

Точечный проектор отображает на физиономию пользователя невидимую решетку из тысяч инфракрасных пятен (например, Face ID использует около 30 000 точек).
Инфракрасная камера регистрирует изменение формы этой сетки по плоскости физиономии.
Получается трёхмерная карта глубины глубины, которая почти невозможна для фальсификации типичной снимком или маской.

Преимущества

Надёжная функционирование даже в полной тьме.
Большая устойчивость к фальсификациям.
Точность распознавания более 99%.

Дополнительные сенсоры

В отдельных девайсах используются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые фиксируют время прохождения луча до объекта и обратно; Трехцветные-датчики глубины; специальные лазерные лидары для построения более детализированной 3D-модели лица.

Эти технологии встречаются наиболее часто во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: синтетический разум на работе

Современные механизмы идентификации лиц немыслимы при отсутствии использования ИИ и machine learning. Именно благодаря таким разработкам, как Спинто, аппарат в состоянии идентифицировать юзера даже при трансформациях внешнего вида: новая стрижка, щетина, оптика или косметика не становятся барьером для деблокировки.

Детектирование физиономии

При начальном стадии программа необходимо оперативно распознать образ лица среди целого снимка камеры. Для этого используются каскадные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые натренированы идентифицировать лица людей среди множества других объектов.

Пример: алгоритм MTCNN способен обнаруживать физиономию даже в случае частичном перекрытии (например, платком или ладонью).

Определение основных моментов

После идентификации лица механизм, такая как Спинто, определяет расположение основных точек: края глаз, конец носа, контуры губ и так далее. Как правило задействуется от 68 до 128 основных маркеров на лице.

Это требуется для нормализации картинки: если пользователь находится с мобильник под наклоненным, или повернул головку, программа исправляет картинку до обычного угла для последующего изучения.

Построение биометрического идентификатора модели

Далее нейросеть строит сжатое математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой образ лица длиной от 128 до 512 чисел с плавающей запятой.

Этот образец крайне затруднительно подделать: он не хранит само картинку пользователя, а лишь исключительные особенности его внешности, что делает его совершенным для таких систем, как Спинто казино.

Сравнительный анализ и принятие выбора

В случае, когда юзер хочет разблокировать телефон взглядом, механизм воспроизводит все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый границу (обычно превышает 99%), телефон, как и платформа Спинто казино, разблокируется; если нет — доступ блокируется.

Адаптация к изменениям внешности

Интересная черта актуальных системы — способность самообучения. Если ты часто разблокируете телефон с свежей стрижкой или оптикой, алгоритм постепенно освежает эталонный шаблон вашего лица для увеличения точности действия без ухудшения безопасности.

Безопасность биометрических информации.

Большинство клиенты опасаются хранить свои биометрические идентификационные данные на телефоне из-за риска утечки информации или взлома гаджета. Иные организации, вроде Спинто казино, предоставляют методы для улучшения безопасности данных клиентов.

Локальное сбережение: Большинство аппаратов сохраняет биометрические шаблоны исключительно внутри защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не покидают устройство и не доступны включая изготовителю.
Шифрование: Все сведения сохраняются только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.
Изоляция приложений: Приложения внешних девелоперов не имеют непосредственного доступа к биометрическим; они могут лишь требовать подтверждение верификации личности через системный API.

Необходимо подчеркнуть важную деталь: если кто-либо достанет физический доступ к вашему телефону (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие производители реализуют защиту от “слепого” разблокирования — к примеру, требуют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются виды определения лиц?

Сегодня можно различить три главных подхода к выполнению этой операции:

Программируемое двухмерное определение

Эксплуатируется только лицевая видеокамера без дополнительных детекторов глубины. Подобный метод встречается чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность осуществления; минимальная цена; скоростная работа при качественном свете.
Минусы: легко ввести в заблуждение снимком; ненадежная работа ночью; недостаточная защищенность.

Аппаратное трёхмерное сканирование

Применяет ИК видеокамеру + проектор точек + сенсоры глубины (Face ID у Apple; подобные технологии у Huawei Mate).
Преимущества: высокая надежность; нельзя подделать фото/видео; стабильная деятельность в любых условиях освещения.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Гибридные подходы с ИИ-дополнением

Задействуют комбинацию софтверных методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, например Спинто и Google Pixel Face Unlock последних версий, комбинируют фронтальную камеру c ИК датчиком движения Soli Radar для предотвращения от фальсификаций руками/масками/видеодисплеями чужих устройств.

Образцы использования разнообразных способов

iPhone модели X/11/12/13/14 используют только техническое трёхмерное сканирование
Xiaomi Mi8 Explorer Edition в первый раз внедрил аналог Face ID в ряду Android.
Samsung Galaxy S10/S20 обеспечивают как программное двухмерное распознавание по изображению фронтальной камерой, так и сенсор глазного ириса.
Huawei Mate20 Pro задействует комплекс из ИК-инфракрасного света + Dot Projector + ToF-датчик

Проблемы защиты и ошибочные срабатывания

Несмотря на поразительный развитие техники за последние лет, идеальных механизмов пока не имеется:

Вероятность подвоха: Недорогие телефоны легко открываются высококачественной изображением хозяина либо видеозаписью с дисплея иного гаджета.
Идентичные близняшки: Даже самые идеальные устройства могут спутать между монозиготными близнецами либо семьями с очень аналогичной внешностью.
Трансформации внешности: Стремительное снижение веса/набор веса, пластические операции либо повреждения иногда необходимы для перерегистрации биометрии.
Условия съёмки: Интенсивная подсветка солнечным светом либо интенсивная тень могут уменьшить верность идентификации признаков.

Здесь некоторые подсказок для безопасному применению:

Для значимых операций всегда внедряйте двухфакторную аутентификацию;
Не запускайте функцию “Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
Регулярно обновляйте программное обеспечение мобильного устройства для защиты от актуальных атак;
Включайте опцию “Требовать раскрытых глаз” в тех местах, где она есть.

Где дополнительно используется технологии кроме смартфонов?

Хотя основная мысль данной статьи сосредоточена на именно смартфонам и планшетам, необходимо сказать о альтернативных областях использования технологии:

Мониторинг прохода в офисах и резиденциях;
Платёжные аппараты финансовых учреждений (“Face Pay”);
Электронные паспорта современного образца;
Установки видеоконтроля городских подразделений;
Автоматизирование учёта посещаемости школ/университетов;
Аутентификация пользователей ПК/ноутбуков.

Например: В городском метро уже проверяется система платежа проезда по фейсу (“Face Pay”) — хватит пройти через барьер без пластика или мобильника! Похожие программы развиваются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом трансформируется технология сегодня?

Любой годик появляются свежие концепции для усовершенствования уровня работы систем идентификации лиц:

Увеличивается детализация датчиков — чем больше информации фиксируется камерой/глубинными сенсорами, тем меньше шанс неточности;
Развиваются искусственные интеллекты — передовые конструкции вида MobileNetV3 обеспечивают возможность скоростно обучаться дополнительным чертам облика пользователя прямо на устройстве без отправки данных в облако.
Улучшаются способы антиспуфинга — теперь смартфоны умеют отличать настоящие живые лица от статичных фото/маскировок по мельчайшим микродвижениям.
Синхронизация со умными устройствами — смарт-часы могут авто блокировать телефон, если обладатель отошёл далеко.
Возникают гибридные устройства — к примеру комбинирующие голосовую идентификацию + физиономию + пальцевой отпечаток.

Вот, те тенденции особенно востребованы сейчас:

1) Миниатюризация элементов

Производители намереваются сократить габариты отверстия (“чёлки”) под сенсоры на дисплее за счёт внедрения миниатюрных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработывание прямо на девайсе

Для улучшения конфиденциальности всё больше расчётов выполняется на месте без передачи данных во дополнительный облачный сервис.

3) Унификация стандартов

Гугл интенсивно продвигает стандарт BiometricPrompt API, чтобы такие площадки, например как Spinto, и все Android-приложения были совместимы с любыми видами биометрии единообразно.

Какое подобрать на сегодня?

Когда вам всем необходима предельная безопасность информации, остановите выбор на флагманские модели со встроенным ИК-проектором или ToF-сенсором глубины.

iPhone всех новейших поколений
Huawei Partner/Series P ряда
Mix Expert
Vivo X линейки
Oppo Обнаружить Икс серии.

Если бюджет скромен – лучше отдавать предпочтение обычным средствам безопасности (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в Spinto, применять только как дополнительную возможность комфорта.

Как увеличить практичность использования возможности?

Есть несколько советов для тех, кто уже применяет функцию распознавания лица:

Регулярно обновляйте свою фотографию-шаблон, если значительно трансформируется внешность.
Не забывайте чистить объектив фронтальной камеры – разводы могут понизить точность!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам запускает камеру если вы берёте его в руки.
Во время регистрации старайтесь сохранять лицевую часть прямо впереди видеоустройства исключая резкого наклона головы.
Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отворачиваетесь от экрана.

Возможности развития инноваций

В предстоящие годы можно предвкушать появления полностью бесконтактных способов опознания персоны сразу по нескольким биометрическим параметрам одновременно: облик + звучание + шаги + манипуляции руками!

Также возможно появление новых подходов охраны приватности – скажем, переменное модификация диджитал паттерна после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – единственная из наиболее увлекательных технологий нашего эпохи! Она предоставляет интеракцию со смартфоном удобнее чем до этого, и такие аппы, как Спинто казино, могут значительно улучшить ваш юзерский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы осведомлены, как функционирует эта методика в деталях, – сможете более осмысленно подбирать свой очередной гаджет!