Как функционирует определение лиц в телефонах

Зачем мы предпочитаем разблокировку по лицу

В недавние времена определение лиц является одной из самых распространённых возможностей для разблокировки умных телефонов. Лишь несколько лет тому назад основная часть пользователей довольствовались пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением таких технологий, как admiral x, нам достаточно просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Что превращает данную функцию очень нужной? Прежде всего, это комфортно: не нужно удерживать в памяти сложные пароли или находить правильный палец в тьме. Также, это быстро: современные системы узнают лицо буквально за мгновение. В-третьем пункте, это чувство будущего — словно в кинолентах про admiral x шпионов.

Тем не менее за такой на первый взгляд легкостью скрывается весь универсум сложных техник и инженерных концепций. Давайте понять, как конкретно работает распознавание лиц в новейших мобильных телефонах, какие существуют способы, насколько они защищены и что нас ожидает в будущем.

Сжатая хроника развития техники

Идентификация лиц как техника существует уже более 50 лет. Изначальные эксперименты автоматического изучения облика были предприняты еще в 1960-х годы в научных учреждениях США. Тогда ЭВМ умели лишь определять контуры лица и определять промежутки между очами и устами на черно-белых изображениях.

Изначальные бизнес платформы стали доступны в 1990-х годах, но они были неидеальны: функционировали медленно и нередко ошибались. Только с прогрессом нейронных сетей и таких площадок, как адмирал х, сильных мобильных микросхем идентификация лиц стало по-настоящему массовым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным сканированием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие стали интегрировать свои решения.

Ключевые этапы работы системы определения

Процесс распознавания лица можно примерно поделить на несколько важных этапов:

1. Распознавание лица — устройство определяет наличие человеческого лица в изображении.
2. Определение особенностей — алгоритм исследует особенности облика: очертания зрительных органов, обонятельного органа, губ, позицию бровей.
3. Построение структуры — создаётся особенный цифровой отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со эталоном — созданный шаблон сверяется с записанной при учёте биометрической сведениями владельца.
5. Принятие решения — если соответствие достаточно существенное, смартфон открывается.

Всякий из данных шагов нуждается в специальных алгоритмов и усовершенствований для быстрой работы непосредственно на девайсе.

Технические элементы: что скрыто в их недрах

Стандартная фронтальная камера.

Простейший несложный метод идентификации лица применяет только переднюю камеру смартфона смартфона. Данный подход осуществлён во различных доступных моделях Android-устройств.

Положительные стороны:

• Не нуждается в нуждается в внешних сенсоров.
• Шустро работает при хорошем освещённости.

Недостатки:

• Просто ввести в заблуждение фотографией или видео.
• Плохо работает при низком освещённости или необычных углах обзора.

ИК камера и пунктирный проекционный аппарат

Более усовершенствованные системы, такие как адмирал х, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология составляет базу Face ID от Apple.

Как это функционирует:

• Точечный проекционный прибор проецирует на лицо использующего невидимую сетку из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 точек).
• ИК устройство фиксирует искривление данной решетки по поверхности лица.
• Формируется трехмерная карта глубины, которая почти неподвластна для фальсификации стандартной снимком или маской.

Преимущества

• Надёжная деятельность даже в полной неосвещённости.
• Высокая защита к имитациям.
• Точность распознавания выше 99%.

Дополнительные сенсоры

В некоторых аппаратах задействуются также вспомогательные датчики: ToF (Time-of-Flight), которые определяют время прохождения луча до цели и обратно; Цветные-датчики дальности; специальные световые лидары для построения более детализированной 3D-модели лица.

Эти технологии используются наиболее часто во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: искуственный интеллект на действии

Текущие системы идентификации лиц немыслимы при отсутствии эксплуатации искусственного интеллекта и машинного обучения. Именно вследствие таким технологиям, как адмирал х, гаджет в состоянии идентифицировать пользователя даже при трансформациях внешности: новая причёска, борода, оптика или грим не становятся барьером для деблокировки.

Распознавание лиц

При начальном шаге программа обязана мгновенно найти лицо внутри полного снимка камеры. Для этой задачи применяются последовательные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые “обучены” находить человеческие лица среди множества других объектов.

Пример: процесс MTCNN может находить физиономию даже при частичном закрытии (например, платком или ладонью).

Определение основных аспектов

После идентификации лица система, такая как адмирал х, устанавливает положение основных точек: края глаз, кончик носа, границы губ и так далее. Обычно задействуется от 68 до 128 основных меток на лицевой области.

Это действие необходимо для стабилизации изображения: если человек держит смартфон под углом, или наклонил головку, программа “выпрямляет” изображение до нормального состояния для последующего изучения.

Создание биометрического идентификатора шаблона

Далее искусственная сеть строит компактное цифровое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 вещественных чисел.

Такой образец очень трудно имитировать: он не сохраняет непосредственно фото пользователя, а лишь исключительные особенности его вида, что делает его совершенным для таких систем, как admiral-x.

Сравнение и принятие выбора

Когда человек желает открыть смартфон глазами, система воспроизводит все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает заданный порог (обычно превышает 99%), телефон, как и платформа admiral-x, разблокируется; если нет — доступ запрещается.

Приспособление к метаморфозам облика

Увлекательная характеристика актуальных систем — возможность самообучения. Если вы постоянно доступаете к телефон с обновленной стрижкой или оптикой, программа постепенно обновляет эталонный шаблон вашего облика для увеличения точности действия без снижения уровня безопасности.

Охрана биометрических информации.

Множество пользователи боятся хранить свои биометрические данные на телефоне из-за угрозы потери данных или взлома устройства. Определенные фирмы, такие как admiral-x, предлагают методы для увеличения сохранности данных клиентов.

• Локальное хранение: Преимущественно аппаратов записывает биометрические образцы лишь в пределах безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не оставляют гаджет и недоступны в том числе изготовителю.

• Шифрование: Все сведения хранятся только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Приложения сторонних девелоперов не имеют непосредственного возможности доступа к биометрическим данным; они могут лишь запрашивать подтверждение верификации идентичности через системный API.

Следует отметить важную подробность: если какой-то человек сможет получить доступ к вашему телефону физически (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство производители осуществляют защиту от автоматического разблокирования — в частности, требуют разомкнуть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют категории распознавания лиц?

На сегодняшний день можно различить три главных подхода к осуществлению этой операции:

Программное двухмерное распознавание

Применяется только фронтальная видеокамера без вспомогательных детекторов дистанции. Такой способ наблюдается чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость реализации; умеренная стоимость; быстрая работа при хорошем свете.
Минусы: несложно одурачить фотографией; нестабильная работа ночью; низкая защищенность.

Техническое трёхмерное сканирование

Применяет ИК видеокамеру + проектор точек + сенсоры дистанции (Face ID у Apple; подобные технологии у Huawei Mate).
Преимущества: значительная надежность; невозможно исказить изображение/видеозапись; постоянная функционирование в любых условиях освещения.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Смешанные подходы с дополнением ИИ

Используют комбинацию программных методов + техническую обработку + последующую обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие товары, как адмирал х и Google Pixel Face Unlock новейших версий, сочетают фронтальную камеру c ИК датчиком мобильности Soli Radar для предотвращения от фальсификаций руками/масками/видеоэкранами посторонних устройств.

Примеры использования различных способов

• iPhone линейки X/11/12/13/14 применяют только физическое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition первый раз представил аналог Face ID среди Android.
• Samsung Galaxy S10/S20 поддерживают как программное обеспечение плоское идентификацию по изображению фронтальной камерой, так и сканер ириса глаза.
• Huawei Mate20 Pro применяет набор из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Проблемы охраны и ошибочные сигналы

Несмотря на поразительный прогресс инноваций за недавние годы, безупречных системы пока не имеется:

1. Возможность обмана: Бюджетные телефоны без труда “разблокируются” четкой изображением владельца или видеозаписью с экрана другого устройства.
2. Идентичные близняшки: Даже самые безупречные устройства могут ошибиться между однояйцевыми близнецами либо родичами с очень аналогичной внешностью.
3. Изменения внешнего вида: Резкое утрата веса/набор веса, пластические операции или повреждения иногда необходимы для повторной регистрации биометрии.
4. Условия фотографирования: Интенсивная засветка солнцем или глубокая темнота могут понизить верность идентификации признаков.

Вот пара рекомендаций по безопасному использованию:

• Для значимых операций всегда применяйте двухэтапную аутентификацию;
• Не включайте опцию “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
• Постоянно обновляйте прошивку ПО смартфона для предотвращения угроз от современных угроз;
• Включайте опцию “Требовать раскрытых глаз” там, где она имеется.

В каких областях ещё находится применение технологии помимо мобильных телефонов?

Пускай тема нашей публикации сосредоточена на конкретно портативным гаджетам, стоит упомянуть о прочих направлениях внедрения технологии:

• Управление входа в рабочих помещениях и жилых домах;
• Платёжные терминалы банков (“Face Pay”);
• Электронные паспорта нового образца;
• Системы видеонаблюдения муниципальных служб;
• Автоматизирование отслеживания посещаемости образовательных учреждений/университетов;
• Вход юзеров ПК/ноутбуков.

Например: В столичном метро уже проверяется система оплаты проезда по лицу (“Face Pay”) — хватит пройти через турникет без пластика или мобильника! Схожие инициативы развиваются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким способом меняется технический процесс в нынешнее время?

Всякий годочек возникают свежие идеи для улучшения уровня функционирования систем распознавания лиц:

1. Увеличивается детализация сенсорных устройств — чем больше элементов фиксируется видеокамерой/датчиками глубины, тем меньше шанс ошибки;
2. Улучшаются искусственные интеллекты — передовые архитектуры модели MobileNetV3 обеспечивают возможность оперативно осваивать свежим характеристикам облика владельца напрямую на гаджете без пересылки информации в облачное хранилище.
3. Развиваются методы антиспуфинга — теперь мобильные устройства способны отличать подлинные живые лица от фиксированных фото/маскировок по мельчайшим движениям кожи.
4. Интеграция со интеллектуальными приборами — смарт-часы могут автоматически заблокировать телефон, если владелец отошёл далеко.
5. Появляются гибридные механизмы — в частности объединяющие голосовую идентификацию + облик + пальцевой отпечаток.

Итак, которые направления очень востребованы сейчас:

1) Сокращение деталей

Компании намереваются сократить габариты выреза (“чёлки”) для сенсоры на дисплее за счёт внедрения миниатюрных ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на девайсе

Для повышения приватности всё больше обработки данных выполняется на месте без передачи данных во внешний облачный сервис.

3) Унификация норм

Google интенсивно продвигает стандарт BiometricPrompt API, для того чтобы аналогичные платформы, вроде admiral x, и любые Android-программы были совместимы с различными типами биометрии унифицированно.

Какое решить на сегодня?

В случае если вам всем нужна наивысшая безопасность информации, подбирайте передовые устройства с вмонтированным ИК-проектором или ToF-сенсором глубины.

• iPhone всех существующих последних версий
• Huawei Partner/P Series серии
• Xiaomi Pro
• Vivo X модели
• Oppo Найти Икс серии.

Если бюджет невелик – лучше предпочесть классическим способам защиты (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в admiral x, применять только как дополнительную опцию комфорта.

Как улучшить практичность функционирования возможности?

Есть некоторые советов для пользователей, кто уже использует разблокировку через лицо:

1. Регулярно меняйте свою изображение-шаблон, если сильно изменяется облик.
2. Не упускайте из виду чистить объектив передней камеры – разводы могут снизить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам запускает камеру если вы поднимаете его.
4. При регистрации пытайтесь удерживать голову прямо напротив объектива не допуская значительного наклона головы.
5. Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отворачиваетесь от экрана.

Перспективы прогресса технологии

В предстоящие годы можно ожидать появления полностью дистанционных способов опознания индивидуума сразу по нескольким биометрическим данным параметрам одновременно: облик + звучание + манера ходьбы + манипуляции руками!

Также вероятно появление новых способов охраны конфиденциальности – скажем, изменяющееся корректировка цифрового образца после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – одна из очень захватывающих инноваций нашего времени! Она обеспечивает взаимодействие со телефоном удобнее чем до этого, и такие аппы, как admiral-x, могут значительно повысить ваш пользовательский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы понимаете, как устроена эта методика изнутри, – будете в состоянии осознаннее определять свой будущий гаджет!