Каким способом работает определение лиц в смартфонах

Почему мы выбираем разблокирование по фейсу

В недавние годы идентификация физиономий превратилось в одной из наиболее востребованных возможностей для деблокировки смартфонов. Лишь несколько годов тому назад большинство юзеров обходились PIN-кодами, паролями или датчиками отпечатков пальцев. Но при появлением таких технологий, например Вулкан Платинум, нам вполне просто взглянуть на экран — и устройство тут же узнает своего владельца.

Какой аспект обуславливает эту конкретную функцию очень нужной? Для начала, это комфортно: не нужно запоминать трудные пароли или искать правильный палец в тьме. Во-вторых, это оперативно: современные алгоритмы распознают лицо фактически за доли секунды. В-третью очередь, это чувство будущего — словно в фильмах про vulkan platinum агентов.

Впрочем за данной кажущейся легкостью таится целый мир комплексных техник и инженерных концепций. Давайте разобраться, как точно действует фейсканирование в новейших мобильных телефонах, какие существуют способы, насколько они защищены и что нас предстоит.

Краткая история прогресса технологии

Распознавание лиц как техника существует уже более 50 годов. Начальные пробы автоматизированного исследования лиц были сделаны еще в 1960-х годах в лабораториях США. Тогда компьютеры способны были лишь определять контуры черепа и измерять дистанции между глазами и устами на черно-белых снимках.

Первые торговые платформы возникли в 1990-х годах, но они были несовершенны: функционировали медленно и часто давали сбои. Только с развитием искусственных сетей и таких систем, как Vulkan Platinum, мощных мобильных чипов идентификация лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным сканированием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и прочие начали интегрировать свои разработки.

Ключевые шаги действия механизма идентификации

Процесс определения лица можно условно сегментировать на несколько ключевых этапов:

1. Идентификация лиц — устройство определяет наличие человеческого лица в изображении.
2. Выделение особенностей — алгоритм исследует черты физиономии: форму глаз, обонятельного органа, уст, позицию бровей.
3. Построение структуры — создаётся особенный цифровой отпечаток (faceprint) на основе определённых признаков.
4. Сравнение со эталоном — созданный шаблон сравнивается со зафиксированной при внесении биометрической сведениями владельца.
5. Принятие решения — если соответствие достаточно значительное, смартфон открывается.

Любой из этих этапов запрашивает особых процедур и усовершенствований для оперативной работы непосредственно на девайсе.

Железные элементы: что находится внутри них

Стандартная селфи камера.

Наиболее легкий метод распознавания облика задействует лишь переднюю камеру смартфона. Такой метод внедрён во многих недорогих моделях Android-устройств.

Преимущества:

• Не потребляет внешних сенсоров.
• Шустро действует при хорошем свете.

Отрицательные стороны:

• Просто обмануть изображением или видео.
• Плохо функционирует при низком свете или необычных углах обзора.

ИК камера и пунктирный проектор

Более продвинутые системы, такие как Vulkan Platinum, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика составляет базу Face ID от Apple.

Каким способом это функционирует:

• Точечный проектор отображает на облик пользователя невидимую структуру из тысяч инфракрасных меток (например, Face ID задействует около 30 000 пятен).
• ИК устройство фиксирует искривление этой решетки по поверхности физиономии.
• Создаётся трёхмерная карта глубинности, что практически невозможна для фальсификации типичной фотографией или маской.

Преимущества

• Надёжная работа даже в полной тьме.
• Сильная сопротивляемость к имитациям.
• Точность определения свыше 99%.

Добавочные сенсорные устройства

В некоторых девайсах задействуются также экстра сенсорные устройства: ToF (Time-of-Flight), которые фиксируют время движения света до предмета и обратно; Цветные-датчики глубины; специальные лазерные дальномеры для построения более детализированной 3D-модели физиономии.

Эти инновации встречаются в основном во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: искусственный разум на работе

Нынешние механизмы идентификации физиономий невозможны в отсутствие использования искусственного интеллекта и машинного обучения. Именно из-за таким технологиям, как Vulkan Platinum, устройство может идентифицировать пользователя даже при изменениях облика: новая укладка, борода, оптика или макияж не становятся препятствием для открытия.

Распознавание лиц

При первом стадии алгоритм обязана оперативно обнаружить лицо внутри целого снимка с камеры. Для этой задачи используются последовательные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые подготовлены находить лица людей среди множества других объектов.

Пример: процесс MTCNN способен распознавать облик даже при неполном перекрытии (например, платком или ладонью).

Определение основных аспектов

После обнаружения лица система, такая как Vulkan Platinum, вычисляет местоположение главных точек: уголки глаз, кончик носа, контуры губ и так далее. Как правило задействуется от 68 до 128 основных меток на лицевой поверхности.

Это необходимо для стабилизации изображения: если человек держит телефон под наклоном, или склонил головку, программа корректирует картинку до нормального состояния для дальнейшего анализа.

Создание биометрии шаблона

Далее нейронная сеть строит сжатое числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след лица длиной от 128 до 512 чисел с плавающей запятой.

Этот шаблон крайне сложно сфальсифицировать: он не хранит само изображение пользователя, а лишь особенные характеристики его вида, что делает его совершенным для таких площадок, как Вулкан Казино Платинум.

Сравнение и вынесение решения

В случае, когда пользователь хочет разлочить телефон взглядом, механизм повторяет все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый уровень (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, разблокируется; если нет — доступ запрещается.

Адаптация к трансформациям внешнего вида

Интересная особенность нынешних системы — способность самообучения. Если ты регулярно разблокируете смартфон с новой укладкой или оптикой, алгоритм постепенно обновляет базовый образец вашего облика для улучшения точности функционирования без ухудшения безопасности.

Защита биометрии данных.

Большинство пользователи опасаются держать свои биометрические идентификационные данные на телефоне из-за угрозы утечки информации или хакерской атаки. Иные фирмы, такие как Вулкан Казино Платинум, предлагают варианты для повышения безопасности данных клиентов.

• Локальное сбережение: Большинство аппаратов хранит биометричные образцы только внутри защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Они никогда не оставляют устройство и недоступны в том числе создателю.

• Шифрование: Все информация хранятся только в кодированном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Программы внешних девелоперов не имеют непосредственного возможности доступа к биометрическим данным; они могут лишь запрашивать факт подтверждения идентичности через системный API.

Стоит отметить важную подробность: в случае, если какой-то человек достанет физический доступ к вашему телефону (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие компании реализуют защиту от автоматического разблокирования — в частности, заставляют раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие имеются виды определения лиц на изображениях?

На сегодняшний день можно определить определить три главных подхода к реализации этой операции:

Программное плоское распознавание

Эксплуатируется только фронтальная видеокамера без дополнительных датчиков глубины. Этот подход встречается наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность реализации; умеренная цена; быстрая деятельность при достаточном освещении.
Минусы: несложно одурачить фотографией; неустойчивая функционирование ночью; слабая защищенность.

Аппаратное 3D оцифровка

Применяет инфракрасную камеру + проекционный модуль пикселей + датчики дистанции (Face ID от Apple; подобные технологии у Huawei Mate).
Преимущества: большая достоверность; невозможно подделать изображение/видеозапись; устойчивая функционирование в любых условиях освещения.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Смешанные методы с интеграцией ИИ

Задействуют комбинацию программных методов + техническую обработку + последующую обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, как Vulkan Platinum и Google Pixel Face Unlock современных версий, объединяют фронталку c ИК датчиком мобильности Soli Radar для защиты от фальсификаций жестами/масками/видеоэкранами посторонних устройств.

Примеры использования разнообразных техник

• iPhone линейки X/11/12/13/14 применяют только физическое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition в первый раз предложил подобие Face ID в числе Android.
• Samsung Galaxy S10/S20 поддерживают как программное обеспечение 2D распознавание по снимку фронталкой, так и датчик глазного ириса.
• Huawei Mate20 Pro задействует набор из ИК-подсветки + Dot Projector + ToF-датчик

Трудности безопасности и ошибочные срабатывания

Несмотря на замечательный прогресс технологий за последние лет, совершенных механизмов пока не наблюдается:

1. Возможность обмана: Недорогие мобильники легко “разблокируются” четкой изображением пользователя или видеозаписью с экрана другого устройства.
2. Идентичные двойняшки: Даже самые совершенные устройства могут перепутать между монозиготными близнецами либо родственниками с очень похожей внешностью.
3. Метаморфозы облика: Стремительное похудение/увеличение массы тела, хирургические вмешательства либо повреждения иногда необходимы для повторной регистрации биометрии.
4. Условия съёмки: Яркая освещённость солнцем или же интенсивная затенение могут снизить аккуратность определения признаков.

Вот несколько рекомендаций для надёжному эксплуатации:

• Для важных операций всегда применяйте двухфакторную аутентификацию;
• Не включайте опцию “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
• Систематически апгрейдите прошивку телефона для обеспечения безопасности от новых видов атак;
• Включайте функцию “Требовать открытых глаз” в тех местах, где она доступна.

В каких местах дополнительно применяется технологии кроме смартфонов?

Несмотря на то, что основная мысль этой работы касается конкретно мобильным устройствам, следует отметить прочих направлениях внедрения технологии:

• Управление входа в офисах и многоквартирных зданиях;
• Платёжные устройства банков (“Face Pay”);
• Виртуальные удостоверения личности последнего поколения;
• Комплексы видеонаблюдения муниципальных подразделений;
• Автоматизация отслеживания посещаемости школ/институтов;
• Аутентификация участников ПК/ноутбуков.

Например: В городском метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — хватит пройти через турникет без пластика или мобильника! Похожие программы осуществляются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким образом меняется техпроцесс в наше время?

Каждый годочек проявляются новые мысли для повышения стандарта деятельности систем идентификации лиц:

1. Увеличивается разрешение сенсорных устройств — чем больше информации фиксируется видеокамерой/глубинными сенсорами, тем меньше риск ошибки;
2. Развиваются искусственные интеллекты — современные архитектуры вида MobileNetV3 дают возможность скоростно осваивать свежим характеристикам вида пользователя непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Развиваются технологии антиспуфинга — теперь смартфоны способны распознавать подлинные живые облики от статичных фото/масок по незаметным микродвижениям.
4. Интеграция со интеллектуальными приборами — умные часы могут автоматически заблокировать смартфон, если пользователь удалился на значительное расстояние.
5. Возникают гибридные механизмы — к примеру комбинирующие речевую идентификацию + лицо + дактилоскопический след.

Здесь, которые направления очень популярны на сегодняшний день:

1) Сокращение деталей

Производители пытаются сократить величину выреза (“чёлки”) под сенсоры на дисплее за счёт встраивания миниатюрных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на устройстве

Для увеличения приватности всё более обработки данных выполняется локально без отправки данных во внешний облачный услугу.

3) Стандартизация норм

Google активно пропагандирует эталон BiometricPrompt API, с целью чтобы такие площадки, как Вулкан Платинум, и каждые Android-программы могли взаимодействовать с различными типами биометрии унифицированно.

Какое решить на сегодня?

Когда тебе важна наивысшая безопасность информации, подбирайте флагманские модели со встроенным ИК-излучателем или же ToF-датчиком глубины.

• iPhone всех существующих актуальных версий
• Huawei Companion/P ряда
• Mix Expert
• Vivo X серии
• Oppo Обнаружить Икс серий.

Если бюджет скромен – лучше отдавать предпочтение обычным способам безопасности (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в Вулкан Платинум, задействовать только как дополнительную опцию удобства.

Каким образом увеличить комфорт использования опции?

Есть несколько лайфхаков для пользователей, кто уже использует разблокировку через лицо:

1. Периодически обновляйте свою изображение-шаблон, если значительно трансформируется облик.
2. Не забывайте очищать объектив передней камеры – загрязнения могут снизить точность!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам включает фотоаппарат если вы поднимаете его.
4. Во время регистрации пытайтесь сохранять лицевую часть прямо перед видеоустройства не допуская значительного наклона головы.
5. Используйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отворачиваетесь от экрана.

Возможности эволюции инноваций

В ближайшие периоды можно предполагать появления полностью бесконтактных способов идентификации индивидуума сразу по нескольким биометрическим данным параметрам одновременно: физиономия + речь + походка + движения рук!

Также возможно развитие новых подходов обеспечения приватности – скажем, переменное модификация диджитал паттерна после каждой удачной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – единственная из самых захватывающих техник нашего периода! Она делает интеракцию со телефоном удобнее чем когда-либо прежде, и такие программы, как Вулкан Казино Платинум, могут существенно улучшить ваш опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы осведомлены, как работает эта система в деталях, – сумеете вдумчиво выбирать свой будущий гаджет!