Как действует идентификация лицевых образов в мобильных устройствах

Для чего мы останавливаемся на разблокирование по лицевому распознаванию

В недавние годы определение лиц является одной из самых популярных возможностей для деблокировки смартфонов. Всего несколько годов тому назад основная масса юзеров довольствовались пин-кодами, паролями или датчиками отпечатков пальцев. Но с появлением подобных технологий, например admiral x, нам достаточно лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какая вещь делает данную функцию настолько популярной? Прежде всего, это удобно: не нужно помнить замысловатые пароли или отыскивать правильный палец в тьме. Во-вторых, это мгновенно: современные алгоритмы узнают лицо буквально за доли секунды. В-третью очередь, это впечатление будущего — будто в кинолентах про адмирал х казино разведчиков.

Однако за этой видимой легкостью прячется весь универсум трудных технологий и инженерных решений. Давайте разобраться, как точно действует идентификация по лицу в современных мобильных телефонах, какие применяются технологии, насколько они защищены и что нас ожидает в будущем.

Сжатая хроника развития технологии

Распознавание лиц как техника присутствует уже более пятидесяти лет. Первые эксперименты автоматизированного анализа облика были сделаны еще в 1960-х годах в лабораториях США. Тогда вычислительные машины способны были лишь выделять очертания лица и измерять промежутки между глазами и ртом на черно-белых изображениях.

Первые коммерческие платформы возникли в 1990-х годах, но они были несовершенны: действовали неспешно и часто давали сбои. Только с эволюцией искусственных сетей и таких платформ, как адмирал х, сильных мобильных микросхем идентификация лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным сканированием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие стали интегрировать собственные разработки.

Главные стадии функционирования устройства распознавания

Процесс распознавания лица можно ориентировочно сегментировать на несколько ключевых этапов:

1. Обнаружение лица — аппарат определяет наличие людского образа в изображении.
2. Извлечение признаков — алгоритм анализирует черты физиономии: очертания зрительных органов, носа, губ, расположение бровей.
3. Построение структуры — создаётся неповторимый электронный отпечаток (faceprint) на основе определённых признаков.
4. Сравнение с образцом — сформированный модель сопоставляется с записанной при регистрации биометрической сведениями владельца.
5. Принятие выбора — если соответствие достаточно высокое, смартфон деблокируется.

Всякий из данных стадий запрашивает особых процедур и оптимизаций для скорой работы прямо на устройстве.

Железные компоненты: что прячется внутри них

Стандартная передняя камера.

Самый простой несложный метод идентификации лица использует лишь фронтальную камеру смартфона. Такой подход внедрён во различных недорогих моделях Android-девайсов.

Сильные стороны:

• Необходимо требует дополнительных датчиков.
• Быстро функционирует при качественном освещении.

Отрицательные стороны:

• Несложно ввести в заблуждение снимком или видео.
• Плохо действует при слабом свете или необычных ракурсах.

ИК камера и точечный проекционный аппарат

Более усовершенствованные системы, такие как адмирал х, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс лежит в основе Face ID от Apple.

Каким образом это работает:

• Точечный проектор показывает на облик юзера невидимую сетку из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 точек).
• ИК устройство записывает деформацию этой решетки по плоскости лица.
• Формируется трёхмерная карта глубины глубины, которая почти невозможна для фальсификации типичной фото или маскировкой.

Преимущества

• Надёжная работа даже в полной темноте.
• Высокая устойчивость к имитациям.
• Точность определения выше 99%.

Дополнительные сенсорные устройства

В некоторых устройствах используются также вспомогательные датчики: ToF (Time-of-Flight), которые измеряют время прохождения луча до цели и обратно; Цветные-датчики дальности; специальные оптические измерители расстояния для формирования более точной 3D-модели физиономии.

Эти инновации используются чаще всего во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: искуственный разум на работе

Нынешние механизмы идентификации физиономий немыслимы при отсутствии применения искусственного интеллекта и machine learning. Именно благодаря таким разработкам, как адмирал х, аппарат в состоянии узнавать юзера даже при трансформациях внешности: новая укладка, борода, оптика или косметика не становятся препятствием для открытия.

Обнаружение физиономии

На первом стадии система должна быстро распознать лицо в пределах целого изображения камеры. Для этой задачи задействуются каскадные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые натренированы идентифицировать человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN может обнаруживать физиономию даже при частичном перекрытии (например, шалью или рукой).

Выделение ключевых моментов

После распознавания лица устройство, такая как адмирал х, определяет местоположение основных точек: кончики глаз, конец носа, контуры губ и так далее. Обычно используется от 68 до 128 ключевых маркеров на лицевой поверхности.

Данное необходимо для выравнивания картинки: если юзер находится с мобильник под наклоненным, или повернул головку, программа исправляет картинку до нормального состояния для дальнейшего анализа.

Построение биометрии шаблона

Далее искусственная сеть строит компактное числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 вещественных чисел.

Данный формат очень затруднительно имитировать: он не удерживает само картинку пользователя, а лишь особенные характеристики его внешности, что делает его совершенным для таких платформ, как admiral-x.

Сравнение и осуществление выбора

Если пользователь хочет открыть мобильник взглядом, механизм осуществляет все описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает заданный порог (обычно превышает 99%), телефон, как и платформа admiral-x, доступен; если нет — доступ не предоставляется.

Адаптация к метаморфозам облика

Интересная черта современных системы — возможность самостоятельного обучения. Если ты постоянно доступаете к телефон с свежей стрижкой или очками, алгоритм постепенно модернизирует основной модель вашего внешности для повышения точности работы без снижения уровня безопасности.

Охрана биометрических информации.

Большинство юзеры беспокоятся хранить свои био-идентификационные данные на телефоне из-за вероятности утечки данных или взлома устройства. Определенные компании, вроде admiral-x, предлагают варианты для повышения защиты информации пользователей.

• Локальное сохранение: Преимущественно девайсов хранит биометрические образцы только внутрь защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не выходят из аппарат и закрыты включая изготовителю.

• Шифрование: Все данные сберегаются только в кодированном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция приложений: Приложения третьих разработчиков не обладают непосредственного возможности доступа к биометрическим; они могут лишь запрашивать факт верификации личности через системный API.

Необходимо подчеркнуть значимую подробность: если какой-то человек получит физический доступ к вашему телефону (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество изготовители реализуют систему защиты от автоматического разблокирования — к примеру, просят разомкнуть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют типы определения лиц?

Сегодня можно определить определить 3 главных способа к осуществлению этой операции:

Программируемое двухмерное идентификация

Используется только фронтальная камера без вспомогательных сенсоров глубины. Такой способ используется обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: простота воплощения; низкая цена; оперативная работа при качественном свете.
Минусы: просто обмануть снимком; ненадежная деятельность ночью; недостаточная защищенность.

Оборудование для 3D сканирование

Применяет инфракрасную видеокамеру + проектор точек + датчики дистанции (Face ID от Apple; аналогичные технологии у Huawei Mate).
Плюсы: значительная надежность; нельзя обмануть изображение/видеозапись; стабильная работа при любом освещении.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные подходы с ИИ-дополнением

Используют комбинацию программируемых методов + техническую обработку + последующую обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие товары, например адмирал х и Google Pixel Face Unlock новейших поколений, объединяют фронтальную камеру c ИК датчиком движения Soli Radar для предотвращения от фальсификаций жестами/масками/видеоэкранами посторонних устройств.

Иллюстрации использования различных техник

• iPhone модели X/11/12/13/14 используют только техническое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition первый раз предложил подобие Face ID среди Android.
• Samsung Galaxy S10/S20 обеспечивают как софтверное плоское распознавание по фото фронталкой, так и сенсор ириса глаза.
• Huawei Mate20 Pro задействует систему из ИК-освещения + Dot Projector + ToF-датчик

Трудности безопасности и ошибочные сигналы

Несмотря на замечательный развитие технологий за последние годы, идеальных системы пока не существует:

1. Возможность подвоха: Бюджетные мобильники без труда открываются четкой фотографией пользователя либо роликом с экрана другого устройства.
2. Идентичные близнецы: Даже самые идеальные устройства могут ошибиться между монозиготными близнецами либо родственниками с очень аналогичной внешностью.
3. Трансформации облика: Внезапное снижение веса/увеличение массы тела, косметические процедуры либо травмы в некоторых случаях необходимы для обновления данных биометрических данных.
4. Условия записи: Яркая подсветка солнцем либо плотная затенение могут уменьшить аккуратность распознавания признаков.

Вот некоторые советов по безопасному использованию:

• Для критически важных операций всегда применяйте двухфакторную аутентификацию;
• Не запускайте возможность “Разблокировка по лицу” на недорогих аппаратах без ИК-сенсоров;
• Систематически обновляйте прошивку программное обеспечение смартфона для защиты от новых видов атак;
• Включайте функцию “Требовать распахнутых глаз” там, где она имеется.

В каких местах дополнительно применяется технология за исключением мобильных телефонов?

Хотя предмет данной публикации касается конкретно мобильным устройствам, стоит упомянуть о альтернативных областях использования технологии:

• Мониторинг входа в офисах и резиденциях;
• Платёжные устройства банков (“Face Pay”);
• Электронные паспорта нового поколения;
• Системы видеонаблюдения городских сервисов;
• Автоматизирование регистрации присутствия учебных заведений/университетов;
• Вход участников персональных компьютеров/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — хватит пройти через турникет без пластика или мобильника! Похожие инициативы осуществляются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как изменяется технический процесс сегодня?

Каждый годочек возникают новые концепции для усовершенствования качества деятельности систем распознавания лиц:

1. Увеличивается разрешение сенсоров — чем больше деталей фиксируется фотоаппаратом/глубинными сенсорами, тем меньше риск ошибки;
2. Развиваются нейронные сети — современные конструкции вида MobileNetV3 обеспечивают возможность оперативно обучаться свежим чертам облика обладателя напрямую на гаджете без пересылки информации в облачное хранилище.
3. Улучшаются способы антиспуфинга — теперь мобильные устройства способны различать настоящие живые облики от статичных фото/маскировок по микроскопическим микродвижениям.
4. Синхронизация со умными устройствами — смарт-часы могут самостоятельно заблокировать мобильный телефон, если обладатель удалился на значительное расстояние.
5. Появляются комбинированные устройства — в частности комбинирующие речевую аутентификацию + физиономию + пальцевой отпечаток.

Здесь, те тенденции очень востребованы в данный момент:

1) Сокращение элементов

Изготовители намереваются минимизировать размер прорези (“чёлки”) для сенсоры на дисплее за счёт внедрения маленьких ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработка прямо на аппарате

Для увеличения приватности всё более расчётов осуществляется внутри устройства без отправки данных во дополнительный облачный услугу.

3) Упорядочивание стандартов

Гугл активно продвигает стандарт BiometricPrompt API, с целью чтобы аналогичные системы, вроде admiral x, и любые Android-аппы могли работать с различными типами биометрии стандартизированно.

Что выбрать на сегодня?

Если тебе нужна максимальная безопасность информации, подбирайте топовые аппараты с вмонтированным ИК-излучателем либо ToF-сенсором глубины.

• iPhone всех существующих новейших версий
• Huawei Companion/P линейки
• Mix Pro
• Vivo X линейки
• Oppo Find X серии.

Если бюджет ограничен – лучше выбирать классическим методам защиты (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в admiral x, задействовать только как второстепенную возможность комфорта.

Каким способом повысить практичность использования опции?

Есть пара лайфхаков для тех, кто уже применяет функцию распознавания лица:

1. Часто обновляйте свою фотографию-шаблон, если значительно меняется облик.
2. Не забывайте очищать линзу передней камеры – разводы могут понизить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам включает фотоаппарат если вы поднимаете его.
4. В процессе записи старайтесь держать голову прямо перед объектива исключая значительного наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвели взгляд от дисплея.

Возможности прогресса инноваций

В ближайшие периоды можно ожидать развития полностью дистанционных способов распознавания персоны сразу по нескольким биометрическим параметрам одновременно: физиономия + речь + походка + жесты рук!

Также предполагается появление современных подходов охраны конфиденциальности – к примеру, изменяющееся корректировка цифрового паттерна после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее захватывающих инноваций нашего периода! Она предоставляет общение со смартфоном проще чем раньше, и такие приложения, как admiral-x, могут значительно повысить ваш пользовательский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы знаете, как устроена эта технология в деталях, – сумеете более осмысленно подбирать свой будущий девайс!