Каким способом работает идентификация лиц в смартфонах

Зачем мы предпочитаем разблокирование по лицу

В последние годы идентификация лиц превратилось в одной из самых популярных опций для открытия мобильных телефонов. Лишь несколько годков назад основная масса юзеров довольствовались PIN-кодами, паролями или датчиками отпечатков пальцев. Но при появлением подобных технологий, как Вулкан Платинум, нам вполне просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Какая вещь делает данную функцию настолько популярной? Во-первых, это практично: не нужно удерживать в памяти сложные пароли или находить верный палец в мраке. Также, это оперативно: современные программы узнают лицо буквально за мгновение. В-третьем пункте, это впечатление футуризма — как будто в фильмах про Вулкан казино разведчиков.

Однако за такой видимой несложностью таится весь вселенная сложных техник и инженерных решений. Попробуем исследовать, как именно действует фейсканирование в новейших смартфонах, какие применяются способы, насколько они безопасны и что нас ожидает в будущем.

Короткая повествование прогресса инноваций

Идентификация лиц как техника присутствует уже более 50 годов. Изначальные пробы автоматизированного анализа лиц были осуществлены еще в 1960-х годы в исследовательских центрах США. Тогда вычислительные машины способны были лишь обозначать силуэты черепа и определять дистанции между глазами и ртом на монохромных снимках.

Изначальные торговые системы стали доступны в 90-х, но они были несовершенны: работали медленно и часто давали сбои. Только с эволюцией нейронных сетей и таких платформ, как Vulkan Platinum, высокопроизводительных мобильных микросхем распознавание лиц стало по-настоящему массовым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным сканированием лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и другие стали внедрять свои решения.

Ключевые стадии действия устройства идентификации

Процесс распознавания лица можно условно разделить на несколько важных этапов:

1. Обнаружение лиц — камера выявляет наличие людского образа в кадре.
2. Выделение особенностей — механизм анализирует контуры лица: конфигурацию глаз, обонятельного органа, уст, расположение надбровных дуг.
3. Построение структуры — создаётся особенный виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со эталоном — сформированный шаблон сравнивается с зафиксированной при учёте биометрической информацией владельца.
5. Принятие решения — если сходство достаточно существенное, смартфон разблокируется.

Всякий из указанных стадий требует особых алгоритмов и усовершенствований для скорой работы непосредственно на девайсе.

Аппаратные компоненты: что прячется внутри

Обычная передняя камера.

Наиболее легкий метод идентификации облика задействует исключительно фронтальную камеру смартфона смартфона. Данный способ осуществлён во различных доступных моделях Android-девайсов.

Плюсы:

• Не требует внешних датчиков.
• Шустро работает при хорошем свете.

Отрицательные стороны:

• Несложно ввести в заблуждение снимком или роликом.
• Неправильно работает при плохом освещённости или нестандартных точках зрения.

ИК камера и точечный проекционный аппарат

Более совершенные системы, такие как Vulkan Platinum, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика лежит в основе Face ID от Apple.

Каким способом это функционирует:

• Точечный проектор проецирует на облик юзера невидимую структуру из тысяч инфракрасных меток (например, Face ID задействует около 30 000 пятен).
• Инфракрасная камера регистрирует искривление данной сетки по поверхности лица.
• Создаётся 3D карта глубины глубины, которая почти что невозможна для подделки обычной фото или маской.

Выигрыши

• Надёжная функционирование даже в полной тьме.
• Сильная сопротивляемость к подделкам.
• Точность определения выше 99%.

Дополнительные сенсоры

В отдельных девайсах используются также экстра датчики: ToF (Time-of-Flight), которые измеряют период распространения света до предмета и обратно; Трехцветные-датчики глубины; специальные световые лидары для формирования более точной 3D-модели лица.

Эти инновации применяются наиболее часто во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: синтетический ум в работе

Нынешние устройства распознавания лиц невозможны без применения artificial intelligence и machine learning. Именно из-за таким разработкам, как Vulkan Platinum, гаджет может узнавать пользователя даже при метаморфозах облика: новая укладка, борода, оптика или грим не становятся барьером для деблокировки.

Детектирование физиономии

В первом шаге алгоритм необходимо мгновенно обнаружить ликовое изображение среди всего снимка с камеры. Для данной цели задействуются последовательные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые подготовлены идентифицировать лица людей среди множества других объектов.

Пример: метод MTCNN может распознавать физиономию даже с частичном закрытии (например, шарфом или ладонью).

Идентификация ключевых аспектов

После идентификации лица система, такая как Vulkan Platinum, вычисляет положение ключевых точек: уголки глаз, кончик носа, контуры губ и так далее. Как правило задействуется от 68 до 128 основных точек на лице.

Это требуется для выравнивания визуала: если пользователь удерживает мобильник под наклоном, или повернул голову, программа исправляет картинку до обычного угла для последующего изучения.

Создание биометрического идентификатора модели

Далее нейросеть строит уплотненное математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой образ лица длиной от 128 до 512 вещественных чисел.

Этот шаблон крайне сложно подделать: он не сохраняет само картинку юзера, а лишь особенные характеристики его внешности, что делает его идеальным для таких площадок, как Вулкан Казино Платинум.

Сравнение и осуществление заключения

В случае, когда пользователь желает разблокировать телефон взглядом, программа повторяет все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный уровень (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ блокируется.

Привыкание к трансформациям облика

Интересная особенность современных системы — возможность самостоятельного обучения. Если ты часто доступаете к смартфон с свежей прической или очками, система постепенно обновляет базовый шаблон вашего облика для улучшения точности функционирования без ухудшения безопасности.

Защита биометрических информации.

Большинство юзеры беспокоятся хранить свои био-идентификационные данные на мобильном устройстве из-за риска потери данных или хакерской атаки. Иные организации, например Вулкан Казино Платинум, предоставляют решения для увеличения сохранности информации пользователей.

• Локальное сбережение: Основная часть аппаратов хранит биометрические модели только внутрь защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не выходят из аппарат и недоступны включая изготовителю.

• Шифрование: Все данные хранятся только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция приложений: Программы внешних разработчиков не имеют прямого доступа к биометрическим; они могут лишь требовать факт верификации идентичности через системный API.

Следует упомянуть значимую подробность: если кто-то получит доступ к вашему телефону физически (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство производители реализуют систему защиты от неосознанного разблокирования — в частности, требуют раскрыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют типы распознавания лиц на изображениях?

В настоящее время можно определить определить три ключевых подхода к осуществлению этой функции:

Программное двухмерное идентификация

Применяется только лицевая камера без дополнительных датчиков глубины. Подобный способ используется наиболее часто в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность воплощения; умеренная стоимость; скоростная работа при достаточном освещении.
Минусы: просто обмануть снимком; нестабильная функционирование ночью; низкая безопасность.

Аппаратное объёмное сканирование

Задействует ИК камеру + проекционный модуль точек + датчики глубины (Face ID у Apple; подобные технологии у Huawei Mate).
Достоинства: значительная достоверность; не получится обмануть изображение/видеозапись; стабильная функционирование при любом освещении.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные методы с ИИ-дополнением

Задействуют комбинацию программируемых методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, как Vulkan Platinum и Google Pixel Face Unlock последних поколений, сочетают фронталку c ИК сенсором движения Soli Radar для защиты от фальсификаций руками/масками/видеоэкранами посторонних устройств.

Примеры эксплуатации разнообразных методов

• iPhone серии X/11/12/13/14 используют только физическое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition впервые предложил подобие Face ID в числе Android.
• Samsung Galaxy S10 версия/S20 имеют как программное двухмерное распознавание по фото селфи-камерой, так и сенсор ириса глаза.
• Huawei Mate20 Pro использует систему из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Трудности безопасности и ошибочные сигналы

Несмотря на замечательный развитие технологий за прошедшие годы, идеальных систем пока не имеется:

1. Шанс подвоха: Доступные смартфоны легко “разблокируются” качественной снимком владельца либо роликом с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые безупречные устройства могут спутать между монозиготными близнецами либо родственниками с очень аналогичной внешностью.
3. Метаморфозы облика: Резкое утрата веса/увеличение массы тела, хирургические вмешательства или травмы иногда требуют перерегистрации биометрии.
4. Условия фотографирования: Сильная засветка солнечным светом или глубокая затенение могут уменьшить аккуратность определения признаков.

Ниже пара подсказок для надёжному эксплуатации:

• Для критически важных операций всегда используйте двухфакторную аутентификацию;
• Не активируйте функцию “Разблокировка по лицу” на бюджетных моделях без ИК-сенсоров;
• Регулярно обновляйте ПО мобильного устройства для предотвращения угроз от актуальных атак;
• Включайте настройку “Требовать раскрытых глаз” там, где она есть.

Где дополнительно находится применение технология за исключением смартфонов?

Пускай основная мысль данной статьи посвящена в частности мобильным устройствам, следует отметить прочих направлениях внедрения технологии:

• Мониторинг входа в офисах и многоквартирных зданиях;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Электронные паспорта последнего поколения;
• Установки видеонаблюдения городских служб;
• Автоматизирование учёта посещаемости образовательных учреждений/университетов;
• Вход участников персональных компьютеров/ноутбуков.

Например: В московском метро уже тестируется система оплаты проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без карты или телефона! Схожие проекты развиваются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом изменяется технология сегодня?

Всякий год возникают современные концепции для повышения качества деятельности систем распознавания лиц:

1. Увеличивается разрешение сенсоров — чем больше информации фиксируется фотоаппаратом/датчиками глубины, тем меньше риск ошибки;
2. Совершенствуются искусственные интеллекты — новейшие конструкции типа MobileNetV3 дают возможность быстро адаптироваться к дополнительным характеристикам внешности обладателя прямо на устройстве без отправки данных в облако.
3. Совершенствуются методы антиспуфинга — теперь смартфоны умеют различать реальные движущиеся облики от статичных фото/маскировок по мельчайшим движениям кожи.
4. Интеграция со умными устройствами — умные часы могут авто заблокировать смартфон, если владелец удалился на значительное расстояние.
5. Возникают смешанные системы — например комбинирующие речевую идентификацию + лицо + отпечаток пальца.

Вот, какие тренды очень популярны сейчас:

1) Сокращение деталей

Компании пытаются минимизировать размер выреза (“чёлки”) для сенсоры на экране за счёт внедрения маленьких ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработка прямо на устройстве

Для увеличения конфиденциальности всё более обработки данных осуществляется внутри устройства без передачи данных во внешний облачный услугу.

3) Упорядочивание регламентов

Гугл энергично продвигает эталон BiometricPrompt API, для того чтобы такие системы, вроде Вулкан Платинум, и любые Android-аппы могли работать с всеми формами биометрии единообразно.

Какое решить сегодня?

В случае если вам необходима наивысшая безопасность данных, выбирайте флагманские устройства с интегрированным ИК-проектором либо ToF-датчиком глубины.

• iPhone всех актуальных моделей
• Huawei Mate/P ряда
• Mix Pro
• Vivo X серии
• Оппо Найти X серии.

Если средства ограничен – лучше отдавать предпочтение классическим средствам защиты (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в Вулкан Платинум, задействовать только как второстепенную возможность комфорта.

Как улучшить удобство функционирования функции?

Есть пара лайфхаков для пользователей, кто уже применяет функцию распознавания лица:

1. Регулярно обновляйте свою изображение-шаблон, если сильно меняется внешний вид.
2. Не забывайте протирать объектив передней камеры – пятна могут понизить точность!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам включает фотоаппарат как только вы поднимаете его.
4. Во время регистрационного процесса старайтесь сохранять лицевую часть неподвижно напротив камеры не допуская сильного наклона головы.
5. Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отворачиваетесь от экрана.

Возможности прогресса инноваций

В ближайшие годы можно предвкушать возникновения полностью бесконтактных способов распознавания человека сразу по нескольким биометрическим параметрам одновременно: облик + речь + походка + жесты рук!

Также возможно появление свежих подходов охраны конфиденциальности – скажем, изменяющееся изменение диджитал паттерна после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – единственная из самых интересных техник нашего времени! Она делает взаимодействие со мобильным устройством проще чем до этого, и такие аппы, как Вулкан Казино Платинум, могут существенно повысить ваш юзерский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы понимаете, как функционирует эта система внутри, – будете в состоянии осознаннее выбирать свой следующий устройство!