Каким способом работает определение лиц в смартфонах

Зачем мы предпочитаем разблокирование по лицу

В последние времена распознавание лиц превратилось в одной из самых популярных опций для разблокировки смартфонов. Еще несколько годов ранее основная масса юзеров довольствовались PIN-кодами, паролями или сканерами отпечатков пальцев. Но при появлением подобных технологий, как admiral x, нам достаточно лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Что делает эту особенность очень нужной? Во-первых, это комфортно: не нужно помнить трудные пароли или находить нужный палец в тьме. Во-вторых, это мгновенно: современные системы распознают лицо буквально за мгновение. В-третью очередь, это впечатление футуризма — будто в кинолентах про admiral x зеркало шпионов.

Однако за данной на первый взгляд простотой таится весь мир трудных методов и инженерных концепций. Попробуем исследовать, как конкретно работает фейсканирование в современных гаджетах, какие существуют методы, насколько они безопасны и что нас ожидает в будущем.

Краткая хроника эволюции инноваций

Распознавание лиц как методика присутствует уже более 50 годов. Изначальные попытки автоматического изучения лица были осуществлены еще в 1960-х годы в исследовательских центрах США. Тогда вычислительные машины способны были лишь обозначать очертания черепа и измерять дистанции между зрачками и губами на черно-белых изображениях.

Начальные бизнес системы появились в 1990-х годах, но они были далеки от совершенства: функционировали медленно и часто ошибались. Только с прогрессом искусственных сетей и таких платформ, как адмирал х, высокопроизводительных мобильных чипов идентификация лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным сканированием лица. За этим последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие стали внедрять свои решения.

Основные шаги работы системы распознавания

Процесс определения лица можно ориентировочно сегментировать на несколько основных этапов:

1. Распознавание лица — камера выявляет наличие людского лица в кадре.
2. Определение признаков — система исследует черты физиономии: очертания зрительных органов, обонятельного органа, уст, позицию надбровных дуг.
3. Построение структуры — создаётся особенный цифровой отпечаток (faceprint) на основе определённых признаков.
4. Сравнение с стандартом — созданный модель сопоставляется со зафиксированной при внесении биометрической данными владельца.
5. Принятие выбора — если сходство достаточно высокое, смартфон деблокируется.

Всякий из этих шагов требует индивидуальных методов и оптимизаций для быстрой работы прямо на устройстве.

Железные компоненты: что находится внутри

Стандартная фронтальная камера.

Наиболее легкий способ идентификации облика применяет только переднюю видеокамеру смартфона. Такой способ реализован во различных доступных моделях Android-устройств.

Преимущества:

• Не нуждается в дополнительные датчиков.
• Шустро функционирует при качественном освещении.

Недостатки:

• Просто ввести в заблуждение снимком или роликом.
• Неудачно работает при низком свете или непривычных углах обзора.

Инфракрасная фотокамера и пунктирный проекционный аппарат

Более продвинутые системы, такие как адмирал х, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика лежит в основе Face ID от Apple.

Каким способом это функционирует:

• Точечный проектор показывает на лицо использующего невидимую структуру из тысяч инфракрасных меток (например, Face ID использует около 30 000 пятен).
• ИК камера записывает изменение формы этой решетки по поверхности лица.
• Формируется трехмерная глубинная карта глубины, которая почти что неосуществима для фальсификации стандартной снимком или маскировкой.

Преимущества

• Надёжная функционирование даже в полной темноте.
• Большая устойчивость к подделкам.
• Точность определения выше 99%.

Добавочные сенсорные устройства

В некоторых устройствах используются также вспомогательные сенсоры: ToF (Time-of-Flight), которые определяют период движения луча до цели и обратно; Трехцветные-датчики глубины; специальные оптические дальномеры для формирования более точной 3D-модели физиономии.

Эти разработки встречаются в основном во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: искуственный интеллект в работе

Нынешние устройства опознания лиц невозможны в отсутствие применения искусственного интеллекта и машинного обучения. Именно из-за таким технологиям, как адмирал х, аппарат может идентифицировать пользователя даже при изменениях внешнего вида: новая стрижка, растительность на лице, оптика или грим не становятся препятствием для разблокировки.

Детектирование физиономии

При стартовом этапе система обязана оперативно распознать образ лица среди полного изображения камеры. Для данной цели применяются последовательные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые “обучены” идентифицировать лица людей среди множества других объектов.

Пример: метод MTCNN в состоянии распознавать лицо даже с частичном закрытии (например, шарфом или рукой).

Идентификация важных точек

После идентификации лица устройство, такая как адмирал х, вычисляет положение главных точек: кончики глаз, верхушка носа, границы губ и так далее. Обычно задействуется от 68 до 128 ключевых маркеров на лицевой поверхности.

Это действие необходимо для стабилизации визуала: если пользователь держит мобильник под наклоненным, или склонил головку, программа исправляет картинку до стандартного положения для дальнейшего анализа.

Создание биометрического идентификатора образца

Далее искусственная сеть строит уплотненное числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ лица длиной от 128 до 512 флоатов.

Этот формат очень трудно имитировать: он не удерживает само фото юзера, а лишь исключительные особенности его облика, что делает его идеальным для таких платформ, как admiral-x.

Сопоставление и принятие решения

В случае, когда человек намеревается разлочить телефон глазами, система повторяет все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный границу (обычно больше 99%), телефон, как и платформа admiral-x, открывается; если нет — доступ не предоставляется.

Приспособление к трансформациям облика

Занимательная черта актуальных систем — способность самостоятельного обучения. Если ты часто разблокируете мобильное устройство с обновленной прической или оптикой, алгоритм постепенно освежает базовый шаблон вашего внешности для повышения точности работы без ухудшения безопасности.

Безопасность биометрических данных.

Многие юзеры опасаются хранить свои биометрические идентификационные данные на телефоне из-за риска утечки данных или взлома гаджета. Определенные компании, такие как admiral-x, предлагают методы для увеличения сохранности информации юзеров.

• Локальное сохранение: Преимущественно девайсов хранит био-идентификационные модели исключительно внутри защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не выходят из гаджет и закрыты включая создателю.

• Шифрование: Все информация хранятся только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Программы внешних разработчиков не обладают прямого доступа к биометрическим данным; они могут лишь требовать факт подтверждения идентичности через системный API.

Следует упомянуть существенную особенность: если кто-либо сможет получить доступ к вашему телефону физически (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие компании осуществляют систему защиты от неосознанного разблокирования — к примеру, требуют раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают категории распознавания лиц на изображениях?

На сегодняшний день можно выделить три главных метода к выполнению этой задачи:

Программируемое 2D определение

Применяется только фронтальная видеокамера без экстра детекторов дистанции. Такой способ встречается чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость реализации; низкая цена; оперативная функционирование при достаточном освещении.
Минусы: несложно ввести в заблуждение фотографией; нестабильная деятельность ночью; низкая охрана.

Оборудование для объёмное оцифровка

Использует ИК видеокамеру + проектор пикселей + датчики глубины (Face ID у Apple; подобные технологии у Huawei Mate).
Достоинства: большая достоверность; не получится подделать изображение/видеозапись; стабильная деятельность при любом освещении.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с ИИ-дополнением

Используют комбинацию софтверных методов + техническую обработку + постобработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные товары, например адмирал х и Google Pixel Face Unlock новейших поколений, объединяют фронталку c инфракрасным датчиком мобильности Soli Radar для предотвращения от подделок руками/масками/видеоэкранами посторонних устройств.

Иллюстрации эксплуатации разных техник

• iPhone серии X/11/12/13/14 применяют только аппаратное трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition впервые внедрил эквивалент Face ID в ряду Android.
• Samsung Galaxy S10/S20 обеспечивают как софтверное плоское определение по изображению фронтальной камерой, так и датчик глазного ириса.
• Huawei Mate20 Pro применяет набор из ИК-подсветки + Dot Projector + ToF-сенсор

Проблемы охраны и ложные тревоги

Несмотря на поразительный успехи инноваций за недавние лет, совершенных механизмов пока не существует:

1. Возможность обмана: Доступные смартфоны легко доступны четкой снимком хозяина или роликом с экрана другого устройства.
2. Идентичные близнецы: Даже самые идеальные механизмы могут ошибиться между однояйцевыми близнецами либо родственниками с очень схожей внешностью.
3. Метаморфозы облика: Стремительное снижение веса/увеличение массы тела, пластические операции либо травмы в некоторых случаях требуют повторной регистрации биометрии.
4. Условия записи: Интенсивная засветка солнечным светом либо интенсивная тень могут снизить верность идентификации признаков.

Здесь пара рекомендаций для надёжному использованию:

• Для важных операций всегда используйте двухэтапную аутентификацию;
• Не включайте функцию “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
• Постоянно обновляйте программное обеспечение смартфона для предотвращения угроз от актуальных атак;
• Включайте опцию “Требовать распахнутых глаз” в тех местах, где она доступна.

В каких областях дополнительно применяется технология за исключением мобильных телефонов?

Хотя тема этой статьи посвящена конкретно мобильным устройствам, следует отметить прочих направлениях внедрения технологии:

• Управление входа в деловых центрах и резиденциях;
• Платёжные терминалы банков (“Face Pay”);
• Виртуальные паспорта современного образца;
• Установки видеомониторинга муниципальных служб;
• Автоматизация учёта явки учебных заведений/институтов;
• Вход юзеров компьютеров/ноутбуков.

Например: В московском метро уже проверяется система оплаты проезда по фейсу (“Face Pay”) — нужно лишь пройти через барьер без карты или мобильника! Похожие программы осуществляются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как трансформируется техпроцесс в наше время?

Всякий годочек проявляются новые мысли для улучшения уровня функционирования систем идентификации лиц:

1. Увеличивается детализация сенсорных устройств — чем больше деталей фиксируется видеокамерой/датчиками глубины, тем меньше риск неточности;
2. Развиваются искусственные интеллекты — новейшие архитектуры вида MobileNetV3 позволяют быстро осваивать дополнительным особенностям внешности пользователя непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Развиваются методы антиспуфинга — теперь мобильные устройства умеют отличать настоящие движущиеся облики от фиксированных снимков/масок по мельчайшим микродвижениям.
4. Взаимодействие со смарт-гаджетами — смарт-часы могут автоматически заблокировать мобильный телефон, если пользователь ушёл далеко.
5. Появляются гибридные устройства — к примеру совмещающие речевую аутентификацию + физиономию + пальцевой отпечаток.

Вот, те тенденции в особенности востребованы в данный момент:

1) Миниатюризация элементов

Производители стараются минимизировать размер отверстия (“чёлки”) для сенсоры на экране за счёт интеграции миниатюрных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на устройстве

Для увеличения личной безопасности всё более расчётов выполняется локально без отправки информации во сторонний облачный сервис.

3) Унификация регламентов

Гугл интенсивно продвигает норму BiometricPrompt API, с целью чтобы подобные системы, вроде admiral x, и все Android-приложения были совместимы с различными типами биометрии унифицированно.

Какое подобрать сегодня?

В случае если тебе нужна максимальная защита данных, остановите выбор на передовые модели со встроенным ИК-излучателем или ToF-датчиком глубины.

• iPhone каждого последних поколений
• Huawei Partner/Series P серии
• Mi Professional
• Vivo X серии
• Оппо Find Х серии.

Если финансы скромен – лучше отдавать предпочтение классическим способам безопасности (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в admiral x, применять только как опциональную опцию комфорта.

Каким образом улучшить удобство работы возможности?

Есть некоторые хитростей для тех, кто уже использует разблокировку по лицу:

1. Регулярно обновляйте свою изображение-шаблон, если сильно изменяется внешний вид.
2. Не пренебрегайте чистить линзу фронтальной камеры – пятна могут уменьшить точность!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам включает камеру если вы поднимаете его.
4. Во время записи постарайтесь держать лицо неподвижно перед камеры без резкого наклона головы.
5. Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отвернулись от дисплея.

Будущее эволюции техники

В ближайшие годы можно предвкушать возникновения полностью безконтактных способов опознания человека сразу по нескольким биометрическим данным параметрам одновременно: лицо + звучание + шаги + жесты рук!

Также вероятно возникновение свежих подходов обеспечения приватности – например, изменяющееся изменение электронного паттерна после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – единственная из самых интересных инноваций нашего периода! Она обеспечивает общение со телефоном удобнее чем когда-либо прежде, и такие программы, как admiral-x, могут значительно оптимизировать ваш опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы знаете, как устроена эта методика в деталях, – будете в состоянии более осмысленно подбирать свой будущий устройство!