Каким образом функционирует распознавание лиц в мобильных устройствах

Зачем мы предпочитаем разблокирование по лицу

В последние времена определение физиономий превратилось в одной из самых популярных возможностей для открытия мобильных телефонов. Всего несколько годов тому назад основная часть пользователей довольствовались PIN-кодами, паролями или датчиками отпечатков пальцев. Но с появлением подобных технологий, например admiral x, нам достаточно лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Какой аспект делает эту конкретную особенность настолько популярной? Прежде всего, это удобно: не нужно запоминать замысловатые пароли или искать верный палец в темноте. Также, это мгновенно: современные системы узнают лицо фактически за мгновения ока. В-третью очередь, это ощущение будущего — будто в кинолентах про адмирал х разведчиков.

Впрочем за данной видимой легкостью таится целый вселенная трудных методов и инженерных решений. Попробуем исследовать, как именно работает фейсканирование в современных мобильных телефонах, какие применяются способы, насколько они безопасны и что нас ожидает в будущем.

Сжатая история прогресса технологии

Идентификация лиц как методика имеется уже более 50 лет. Начальные пробы автоматизированного анализа облика были предприняты еще в 1960-х годы в лабораториях США. Тогда компьютеры могли лишь определять очертания лица и определять промежутки между очами и ртом на ахроматических фотографиях.

Первые торговые системы стали доступны в 1990-х годах, но они были неидеальны: действовали неспешно и часто ошибались. Только с развитием нейронных сетей и таких платформ, как адмирал х, мощных мобильных микросхем распознавание лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным распознаванием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие стали внедрять личные разработки.

Главные стадии функционирования устройства определения

Процесс определения лица можно ориентировочно поделить на несколько важных этапов:

1. Распознавание лица — устройство определяет присутствие людского лица в снимке.
2. Выделение характеристик — система анализирует черты физиономии: очертания зрительных органов, обонятельного органа, губ, позицию бровей.
3. Построение шаблона — создаётся особенный цифровой отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с стандартом — полученный образец сверяется с сохранённой при внесении биометрической информацией владельца.
5. Принятие выбора — если соответствие достаточно высокое, смартфон деблокируется.

Каждый из этих шагов запрашивает индивидуальных процедур и улучшений для быстрой работы прямо на устройстве.

Железные компоненты: что находится внутри

Обычная передняя камера.

Наиболее несложный способ определения облика задействует лишь лицевую камеру мобильного устройства. Такой способ осуществлён во многих бюджетных моделях Android-устройств.

Преимущества:

• Необходимо нуждается в дополнительных сенсоров.
• Быстро действует при хорошем освещённости.

Отрицательные стороны:

• Несложно обмануть изображением или роликом.
• Неудачно работает при плохом освещённости или непривычных точках зрения.

Инфракрасная камера и пунктирный проекционный аппарат

Более усовершенствованные системы, такие как адмирал х, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс лежит в основе Face ID от Apple.

Как это работает:

• Точечный проектор отображает на облик юзера невидимую сетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 точек).
• ИК устройство регистрирует изменение формы этой решетки по плоскости физиономии.
• Формируется 3D карта глубины, что почти неосуществима для фальсификации обычной снимком или маской.

Преимущества

• Надёжная функционирование даже в полной темноте.
• Высокая устойчивость к подделкам.
• Точность распознавания свыше 99%.

Дополнительные датчики

В отдельных девайсах задействуются также дополнительные датчики: ToF (Time-of-Flight), которые определяют период прохождения луча до цели и обратно; RGB-датчики дальности; специальные световые лидары для построения более детализированной 3D-модели лица.

Эти инновации используются в основном во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные методы: искуственный разум в работе

Текущие механизмы распознавания лиц неосуществимы при отсутствии применения artificial intelligence и машинного обучения. Именно вследствие таким инновациям, как адмирал х, устройство способно распознавать юзера даже при метаморфозах внешнего вида: новая укладка, борода, оптика или макияж не становятся препятствием для деблокировки.

Детектирование лиц

При первом стадии алгоритм необходимо оперативно распознать лицо среди полного снимка камеры. Для данной цели задействуются каскадные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые подготовлены находить лиц человека среди множества других объектов.

Пример: алгоритм MTCNN может обнаруживать лицо даже в случае частичном закрытии (например, шарфом или ладонью).

Выделение ключевых моментов

После обнаружения лица устройство, такая как адмирал х, определяет положение ключевых точек: края глаз, конец носа, контуры губ и так далее. Обычно применяется от 68 до 128 основных меток на лице.

Данное требуется для выравнивания визуала: если пользователь удерживает мобильник под углом, или повернул голову, программа корректирует картинку до стандартного положения для дальнейшего анализа.

Создание биометрического шаблона

Далее искусственная сеть строит сжатое числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след внешности длиной от 128 до 512 чисел с плавающей запятой.

Этот образец крайне затруднительно подделать: он не хранит непосредственно картинку пользователя, а лишь уникальные черты его облика, что делает его идеальным для таких систем, как admiral-x.

Сопоставление и принятие выбора

Если человек хочет открыть смартфон взором, система повторяет все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный границу (обычно больше 99%), телефон, как и платформа admiral-x, разблокируется; если нет — доступ блокируется.

Адаптация к трансформациям облика

Увлекательная особенность нынешних систем — способность самообучения. Если ты постоянно открываете мобильное устройство с свежей прической или оптикой, система постепенно обновляет эталонный модель вашего внешности для повышения точности работы без ухудшения безопасности.

Защита биометрии данных.

Большинство клиенты опасаются хранить свои биометрические идентификационные данные на телефоне из-за вероятности утечки данных или взлома устройства. Некоторые компании, такие как admiral-x, предлагают методы для улучшения безопасности сведений клиентов.

• Локальное сбережение: Преимущественно девайсов сохраняет биометрические образцы только внутри безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не выходят из устройство и не доступны даже создателю.

• Шифрование: Все сведения хранятся только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Приложения сторонних девелоперов не имеют прямого возможности доступа к биометрическим; они могут лишь запрашивать факт верификации идентичности через системный API.

Необходимо упомянуть существенную подробность: в случае, если кто-либо достанет физический доступ к вашему телефону (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество компании внедряют меры безопасности от “слепого” разблокирования — к примеру, просят раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют категории распознавания лиц?

Сегодня можно выделить определить 3 ключевых метода к реализации этой задачи:

Софтверное двухмерное идентификация

Эксплуатируется только лицевая видеокамера без вспомогательных датчиков дистанции. Такой подход встречается чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота воплощения; низкая цена; быстрая деятельность при качественном освещении.
Минусы: легко ввести в заблуждение снимком; ненадежная работа ночью; низкая охрана.

Оборудование для 3D сканирование

Использует инфракрасную видеокамеру + проектор пикселей + сенсоры дистанции (Face ID от Apple; подобные технологии у Huawei Mate).
Преимущества: высокая надёжность; не получится подделать изображение/видеозапись; стабильная функционирование при любом освещении.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные подходы с ИИ-дополнением

Используют комбинацию программных методов + аппаратную обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные товары, как адмирал х и Google Pixel Face Unlock новейших версий, объединяют фронталку c инфракрасным сенсором движения Soli Radar для предотвращения от фальсификаций жестами/масками/видеодисплеями чужих устройств.

Образцы использования разных техник

• iPhone серии X/11/12/13/14 используют только физическое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз внедрил эквивалент Face ID в ряду Android.
• Samsung Galaxy S10/S20 поддерживают как программное плоское идентификацию по изображению селфи-камерой, так и сканер радужки глаза.
• Huawei Mate20 Pro применяет набор из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Вопросы защиты и ложные сигналы

Несмотря на впечатляющий успехи технологий за прошедшие годы, совершенных системы пока не существует:

1. Шанс подвоха: Бюджетные смартфоны без труда доступны высококачественной изображением хозяина либо видеозаписью с экрана другого устройства.
2. Идентичные близнецы: Даже самые безупречные системы могут ошибиться между монозиготными близнецами либо родственниками с очень аналогичной внешностью.
3. Трансформации внешности: Внезапное снижение веса/увеличение массы тела, косметические процедуры либо повреждения в некоторых случаях необходимы для повторной регистрации биометрии.
4. Условия записи: Интенсивная засветка солнцем или плотная тень могут снизить аккуратность распознавания признаков.

Ниже пара подсказок по безопасному применению:

• Для важных операций всегда используйте дополнительную аутентификацию;
• Не включайте функцию “Разблокировка по лицу” на недорогих аппаратах без ИК-сенсоров;
• Регулярно обновляйте ПО смартфона для защиты от актуальных атак;
• Включайте функцию “Требовать открытых глаз” в тех местах, где она имеется.

В каких областях также применяется технология кроме смартфонов?

Хотя тема данной работы сосредоточена на в частности смартфонам и планшетам, следует отметить других сферах применения технологии:

• Контроль доступа в деловых центрах и многоквартирных зданиях;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Электронные паспорта современного поколения;
• Системы видеомониторинга городских служб;
• Автоматизация отслеживания посещаемости образовательных учреждений/институтов;
• Авторизация участников ПК/ноутбуков.

Например: В столичном метро уже проверяется система платежа проезда по фейсу (“Face Pay”) — хватит пройти через барьер без карты или телефона! Схожие инициативы развиваются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Как изменяется технология сегодня?

Любой годик возникают современные мысли для повышения качества работы систем лицевого распознавания:

1. Увеличивается чёткость датчиков — чем больше деталей фиксируется видеокамерой/датчиками глубины, тем меньше шанс неточности;
2. Улучшаются нейросети — передовые архитектуры типа MobileNetV3 дают возможность скоростно обучаться свежим особенностям облика обладателя непосредственно на девайсе без отправки данных в облако.
3. Развиваются способы антиспуфинга — теперь мобильные устройства могут распознавать реальные живые лица от неподвижных фотографий/масок по мельчайшим микродвижениям.
4. Синхронизация со смарт-гаджетами — смарт-часы могут самостоятельно блокировать смартфон, если обладатель ушёл далеко.
5. Возникают гибридные устройства — к примеру комбинирующие аудио опознание + лицо + отпечаток пальца.

Итак, какие направления очень актуальны сейчас:

1) Уменьшение компонентов

Изготовители намереваются минимизировать размер отверстия (“чёлки”) для сенсоры на дисплее за счёт интеграции компактных ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Переработка прямо на устройстве

Для повышения личной безопасности всё больше вычислений выполняется на месте без отправки информации во внешний облачный сервис.

3) Упорядочивание регламентов

Google активно продвигает стандарт BiometricPrompt API, с целью чтобы подобные площадки, вроде admiral x, и все Android-программы могли работать с различными типами биометрии стандартизированно.

Что решить сегодня?

Когда тебе важна предельная защита информации, выбирайте передовые аппараты с интегрированным ИК-проектором либо ToF-сенсором глубины.

• iPhone всех существующих новейших моделей
• Huawei Mate/Series P серии
• Mi Expert
• Vivo X серии
• Оппо Обнаружить Икс линейки.

Если средства невелик – лучше предпочесть обычным способам безопасности (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в admiral x, применять только как дополнительную опцию удобства.

Каким образом повысить практичность функционирования возможности?

Есть пара хитростей для пользователей, кто уже пользуется функцию распознавания лица:

1. Регулярно обновляйте свою фото-шаблон, если сильно трансформируется внешний вид.
2. Не пренебрегайте очищать линзу передней камеры – пятна могут уменьшить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам включает фотоаппарат если вы берёте его в руки.
4. Во время записи старайтесь держать лицевую часть ровно перед объектива без сильного наклона головы.
5. Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отвернулись от дисплея.

Будущее прогресса технологии

В ближайшие периоды можно предполагать появления полностью бесконтактных способов распознавания персоны сразу по нескольким биометрическим данным параметрам одновременно: физиономия + звучание + манера ходьбы + движения рук!

Также предполагается развитие современных методов защиты личной информации – к примеру, переменное модификация электронного шаблона после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – одна из самых захватывающих инноваций нашего времени! Она делает взаимодействие со мобильным устройством проще чем когда-либо прежде, и такие аппы, как admiral-x, могут в разы повысить ваш пользовательский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы понимаете, как работает эта методика в деталях, – будете в состоянии более осмысленно определять свой будущий устройство!