Как действует идентификация лиц в телефонах

Почему мы останавливаемся на разлочивание по лицевому распознаванию

В последние годы распознавание физиономий является одной из наиболее востребованных возможностей для деблокировки смартфонов. Всего несколько лет назад основная масса юзеров обходились PIN-кодами, ключами доступа или датчиками отпечатков пальцев. Но с появлением подобных технологий, например вулкан россия, нам достаточно лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Что делает эту возможность такой востребованной? Для начала, это практично: не нужно запоминать замысловатые пароли или искать верный палец в темноте. Во-вторых, это мгновенно: современные программы идентифицируют лицо буквально за доли секунды. В-третьем пункте, это ощущение будущего — как будто в фильмах про казино вулкан шпионов.

Однако за этой видимой легкостью скрывается целый мир трудных технологий и инженерных концепций. Позвольте нам понять, как конкретно функционирует фейсканирование в актуальных гаджетах, какие существуют технологии, насколько они защищены и что нас ожидает в будущем.

Короткая хроника прогресса инноваций

Распознавание лиц как техника присутствует уже более 50 лет. Первые пробы машинного изучения лица были осуществлены еще в 1960-х годы в лабораториях США. Тогда вычислительные машины могли лишь выделять очертания лица и определять расстояния между зрачками и устами на черно-белых изображениях.

Изначальные торговые системы возникли в 1990-х годах, но они были несовершенны: действовали неспешно и часто ошибались. Только с эволюцией синтетических сетей и таких платформ, как вулкан россии, мощных мобильных процессоров идентификация лиц стало по-настоящему массовым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным идентификацией лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и другие стали интегрировать личные решения.

Основные шаги действия устройства идентификации

Процесс определения лица можно условно сегментировать на несколько ключевых этапов:

1. Обнаружение лица — устройство распознает существование гуманного лица в снимке.
2. Определение признаков — система исследует черты физиономии: очертания глаз, обонятельного органа, губ, положение бровей.
3. Построение структуры — создаётся неповторимый виртуальный отпечаток (faceprint) на основе определённых признаков.
4. Сравнение со образцом — полученный модель сопоставляется с записанной при внесении биометрической сведениями владельца.
5. Принятие решения — если совпадение достаточно существенное, смартфон деблокируется.

Любой из этих шагов нуждается в индивидуальных алгоритмов и оптимизаций для быстрой работы непосредственно на девайсе.

Аппаратные элементы: что прячется внутри

Стандартная фронтальная камера.

Самый легкий метод распознавания облика использует исключительно лицевую камеру мобильного устройства. Подобный способ осуществлён во различных бюджетных версиях Android-устройств.

Преимущества:

• Не нуждается в внешних сенсоров.
• Шустро функционирует при качественном освещённости.

Недостатки:

• Легко одурачить снимком или роликом.
• Неправильно действует при плохом освещённости или непривычных ракурсах.

ИК камера и пунктирный проектор

Более усовершенствованные системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология составляет базу Face ID от Apple.

Каким способом это действует:

• Точечный проекционный прибор проецирует на физиономию юзера невидимую решетку из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 точек).
• ИК устройство регистрирует деформацию данной решетки по плоскости лица.
• Создаётся трёхмерная глубинная карта глубины, которая практически неподвластна для имитации обычной фотографией или маской.

Преимущества

• Надёжная деятельность даже в полной темноте.
• Большая устойчивость к имитациям.
• Точность распознавания выше 99%.

Дополнительные датчики

В некоторых устройствах применяются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые определяют период распространения луча до предмета и обратно; RGB-датчики глубины; специальные лазерные лидары для формирования более детализированной 3D-модели лица.

Эти технологии применяются наиболее часто во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: синтетический разум в исполнении

Современные механизмы распознавания лиц немыслимы при отсутствии эксплуатации artificial intelligence и machine learning. Именно вследствие таким разработкам, как вулкан россии, аппарат в состоянии узнавать владельца даже при изменениях внешности: новая причёска, щетина, оптика или косметика не становятся барьером для деблокировки.

Обнаружение лиц

В первом этапе программа обязана оперативно найти лицо в пределах целого снимка камеры. Для данной цели используются каскадные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые подготовлены идентифицировать лица людей среди множества других объектов.

Пример: метод MTCNN в состоянии распознавать физиономию даже с частичном закрытии (например, платком или рукой).

Определение ключевых точек

После распознавания лица система, такая как вулкан россии, устанавливает положение основных точек: края глаз, конец носа, границы губ и так далее. Часто применяется от 68 до 128 ключевых маркеров на лицевой поверхности.

Это требуется для выравнивания изображения: если пользователь находится с мобильник под углом, или повернул голову, программа “выпрямляет” изображение до обычного угла для дальнейшего анализа.

Создание биометрического идентификатора модели

Далее нейросеть строит компактное математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 чисел с плавающей запятой.

Данный формат очень трудно имитировать: он не хранит само изображение юзера, а лишь уникальные характеристики его облика, что делает его совершенным для таких платформ, как vulkan russia.

Сопоставление и вынесение выбора

В случае, когда человек желает разблокировать смартфон глазами, система воспроизводит все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает заданный границу (обычно превышает 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ запрещается.

Адаптация к изменениям облика

Интересная характеристика нынешних системы — возможность самостоятельного обучения. Если вы регулярно доступаете к смартфон с обновленной прической или очками, программа постепенно модернизирует эталонный образец вашего облика для повышения точности работы без снижения уровня безопасности.

Безопасность биометрических данных данных.

Большинство клиенты боятся сохранять свои биометрические данные на телефоне из-за риска утечки данных или взлома устройства. Некоторые фирмы, например vulkan russia, предоставляют методы для увеличения защиты информации клиентов.

• Локальное хранение: Преимущественно устройств записывает биометричные образцы исключительно внутрь защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не выходят из устройство и недоступны даже создателю.

• Шифрование: Все сведения хранятся только в кодированном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция приложений: Программы внешних девелоперов не обладают непосредственного возможности доступа к биометрическим данным; они могут лишь требовать факт подтверждения идентичности через системный API.

Следует упомянуть важную деталь: если какой-то человек сможет получить физический доступ к вашему телефону (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство изготовители внедряют систему защиты от неосознанного разблокирования — к примеру, заставляют разомкнуть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют категории распознавания лиц?

В настоящее время можно определить определить 3 основных метода к реализации этой функции:

Программируемое двухмерное идентификация

Эксплуатируется только фронтальная камера без дополнительных датчиков глубины. Подобный подход используется наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость осуществления; минимальная затраты; скоростная работа при хорошем свете.
Минусы: несложно обмануть фотографией; неустойчивая деятельность ночью; недостаточная охрана.

Аппаратное объёмное оцифровка

Использует инфракрасную камеру + проекционный модуль пикселей + сенсоры дистанции (Face ID от Apple; аналогичные решения у Huawei Mate).
Плюсы: значительная надёжность; не получится исказить изображение/видеозапись; постоянная деятельность при любом освещении.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с дополнением ИИ

Используют комбинацию софтверных методов + аппаратную обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например вулкан россии и Google Pixel Face Unlock новейших версий, комбинируют фронталку c ИК датчиком мобильности Soli Radar для защиты от подделок жестами/масками/видеодисплеями чужих устройств.

Образцы эксплуатации разных способов

• iPhone линейки X/11/12/13/14 применяют только техническое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition первый раз представил эквивалент Face ID в числе Android.
• Samsung Galaxy S10/S20 обеспечивают как софтверное плоское идентификацию по изображению фронталкой, так и датчик глазного ириса.
• Huawei Mate20 Pro использует комплекс из ИК-подсветки + Dot Projector + ToF-датчик

Вопросы охраны и ложные тревоги

Несмотря на замечательный успехи техники за последние лет, безупречных механизмов пока не существует:

1. Вероятность обмана: Доступные мобильники просто доступны высококачественной изображением пользователя либо видеозаписью с экрана другого устройства.
2. Идентичные близнецы: Даже самые совершенные системы могут перепутать между однояйцевыми близнецами либо семьями с очень аналогичной внешностью.
3. Изменения облика: Стремительное похудение/набор веса, хирургические вмешательства или травмы порой необходимы для перерегистрации биометрии.
4. Условия записи: Интенсивная подсветка солнцем либо интенсивная тень могут уменьшить верность распознавания признаков.

Вот некоторые рекомендаций по надёжному применению:

• Для критически важных операций всегда применяйте двухэтапную аутентификацию;
• Не включайте функцию “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
• Постоянно обновляйте прошивку ПО телефона для обеспечения безопасности от новых видов атак;
• Включайте настройку “Требовать открытых глаз” везде, где она доступна.

В каких областях также находится применение технология за исключением мобильных телефонов?

Хотя тема нашей статьи посвящена конкретно портативным гаджетам, необходимо сказать о альтернативных областях использования технологии:

• Управление доступа в рабочих помещениях и резиденциях;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Виртуальные удостоверения личности последнего образца;
• Комплексы видеоконтроля муниципальных сервисов;
• Механизация регистрации явки учебных заведений/университетов;
• Авторизация юзеров ПК/ноутбуков.

Например: В московском метро уже тестируется система платежа проезда по лицу (“Face Pay”) — нужно лишь пройти через барьер без пластика или мобильника! Схожие инициативы осуществляются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким образом изменяется технический процесс в наше время?

Любой год появляются новые идеи для улучшения стандарта функционирования систем идентификации лиц:

1. Увеличивается чёткость сенсоров — чем больше информации фиксируется видеокамерой/датчиками глубины, тем меньше вероятность погрешности;
2. Совершенствуются нейросети — современные структуры модели MobileNetV3 обеспечивают возможность оперативно адаптироваться к дополнительным чертам облика владельца напрямую на гаджете без отправки данных в облако.
3. Улучшаются технологии антиспуфинга — теперь мобильные устройства могут отличать реальные живые лица от фиксированных снимков/маскировок по микроскопическим движениям кожи.
4. Синхронизация со интеллектуальными приборами — умные часы могут автоматически закрыть доступ к телефон, если владелец ушёл далеко.
5. Проявляются смешанные механизмы — например комбинирующие голосовую идентификацию + облик + пальцевой отпечаток.

Вот, те направления очень актуальны на сегодняшний день:

1) Миниатюризация компонентов

Компании стараются минимизировать габариты отверстия (“чёлки”) для сенсоры на дисплее за счёт интеграции миниатюрных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на устройстве

Для улучшения личной безопасности всё больше обработки данных выполняется локально без пересылки данных во сторонний облачный сервис.

3) Упорядочивание стандартов

Гугл интенсивно продвигает стандарт BiometricPrompt API, чтобы подобные платформы, например как вулкан россия, и любые Android-приложения могли работать с различными типами биометрии единообразно.

Что подобрать сегодня?

Когда вам всем нужна наивысшая защита данных, остановите выбор на передовые устройства с интегрированным ИК-проектором или ToF-сенсором глубины.

• iPhone всех последних поколений
• Huawei Companion/P Series линейки
• Xiaomi Pro
• Vivo X линейки
• Oppo Найти Х серии.

Если бюджет скромен – лучше отдавать предпочтение классическим средствам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в вулкан россия, задействовать только как второстепенную возможность удобства.

Каким образом улучшить практичность работы опции?

Есть пара советов для тех, кто уже пользуется разблокировку по лицу:

1. Регулярно меняйте свою изображение-шаблон, если сильно изменяется внешность.
2. Не забывайте очищать линзу фронтальной камеры – пятна могут понизить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам включает камеру если вы берёте его в руки.
4. В процессе регистрационного процесса старайтесь держать лицо неподвижно перед видеоустройства без значительного наклона головы.
5. Используйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отвернулись от экрана.

Перспективы прогресса технологии

В ближайшие годы можно предвкушать возникновения полностью безконтактных способов опознания человека сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + голос + шаги + движения рук!

Также вероятно возникновение новых подходов охраны конфиденциальности – например, динамическое модификация электронного паттерна после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из наиболее захватывающих техник нашего эпохи! Она предоставляет общение со телефоном проще чем раньше, и такие программы, как vulkan russia, могут в разы оптимизировать ваш юзерский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы знаете, как функционирует эта система в деталях, – сумеете более осмысленно выбирать свой очередной устройство!