Каким образом работает идентификация лиц в смартфонах

Зачем мы предпочитаем разлочивание по лицевому распознаванию

В прошлые времена определение лиц стало одной из самых распространённых опций для деблокировки умных телефонов. Лишь некоторые годов тому назад большинство использующих удовлетворялись PIN-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением таких технологий, например admiral x, нам достаточно просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Что обуславливает данную особенность очень нужной? Для начала, это комфортно: не нужно помнить замысловатые пароли или находить правильный палец в мраке. Также, это быстро: современные системы узнают лицо буквально за мгновения ока. В-третьих, это ощущение футуристичности — будто в кинолентах про адмирал х казино агентов.

Тем не менее за такой видимой несложностью прячется полный мир комплексных техник и инженерных решений. Попробуем исследовать, как точно функционирует распознавание лиц в современных смартфонах, какие существуют технологии, насколько они защищены и что нас ждёт впереди.

Короткая история прогресса инноваций

Распознавание лиц как методика существует уже более 50 годов. Изначальные пробы автоматического исследования облика были предприняты еще в 1960-х годы в лабораториях США. Тогда вычислительные машины могли лишь обозначать очертания лица и измерять расстояния между очами и ртом на монохромных фотографиях.

Первые бизнес системы появились в 1990-х годах, но они были несовершенны: функционировали медленно и нередко ошибались. Только с прогрессом синтетических сетей и таких платформ, как адмирал х, мощных мобильных микросхем идентификация лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным распознаванием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и другие начали внедрять собственные разработки.

Основные стадии функционирования системы определения

Процесс идентификации лица можно примерно поделить на несколько основных этапов:

1. Обнаружение лиц — аппарат распознает существование людского лица в кадре.
2. Извлечение особенностей — алгоритм изучает черты лица: очертания глаз, носа, губ, позицию надбровных дуг.
3. Построение модели — создаётся неповторимый цифровой отпечаток (faceprint) на основе определённых признаков.
4. Сравнение с стандартом — полученный образец сравнивается со сохранённой при учёте биометрической информацией владельца.
5. Принятие определения — если совпадение достаточно существенное, смартфон деблокируется.

Каждый из данных шагов запрашивает специальных процедур и оптимизаций для быстрой работы прямо на устройстве.

Железные компоненты: что находится внутри них

Обычная передняя камера.

Самый простой несложный способ определения физиономии использует только фронтальную видеокамеру смартфона. Такой способ реализован во многочисленных доступных версиях Android-устройств.

Сильные стороны:

• Не потребляет внешних сенсоров.
• Шустро работает при достаточном освещении.

Минусы:

• Просто одурачить снимком или роликом.
• Плохо действует при низком свете или необычных углах обзора.

ИК фотокамера и точечный проектор

Более усовершенствованные системы, такие как адмирал х, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика составляет базу Face ID от Apple.

Каким способом это работает:

• Точечный проектор проецирует на облик использующего невидимую решетку из тысяч инфракрасных точек (например, Face ID применяет около 30 000 меток).
• ИК камера фиксирует изменение формы этой решетки по поверхности лица.
• Получается трехмерная карта глубины, что почти что невозможна для фальсификации обычной фото или маской.

Достоинства

• Надёжная деятельность даже в полной темноте.
• Большая устойчивость к фальсификациям.
• Точность распознавания свыше 99%.

Добавочные сенсорные устройства

В отдельных аппаратах применяются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые фиксируют время движения света до цели и обратно; Трехцветные-датчики глубины; специальные лазерные измерители расстояния для создания более детализированной 3D-модели лица.

Эти технологии применяются наиболее часто во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные методы: синтетический ум на исполнении

Текущие устройства распознавания лиц неосуществимы при отсутствии эксплуатации artificial intelligence и машинного обучения. Именно из-за таким разработкам, как адмирал х, аппарат способно узнавать владельца даже при трансформациях облика: новая стрижка, растительность на лице, очки или косметика не становятся помехой для разблокировки.

Распознавание лиц

В начальном шаге алгоритм необходимо оперативно распознать лицо среди целого изображения с камеры. Для данной цели используются многоуровневые классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые “обучены” идентифицировать лиц человека среди множества других объектов.

Пример: алгоритм MTCNN может распознавать лицо даже с частичном закрытии (например, шарфом или ладонью).

Определение основных моментов

После распознавания лица механизм, такая как адмирал х, вычисляет расположение ключевых точек: кончики глаз, конец носа, границы губ и так далее. Как правило применяется от 68 до 128 главных меток на лице.

Данное требуется для выравнивания изображения: если человек держит смартфон под наклоном, или наклонил головку, программа корректирует изображение до стандартного положения для дальнейшего анализа.

Формирование биометрического модели

Далее нейросеть строит уплотненное математическое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 флоатов.

Такой образец очень сложно сфальсифицировать: он не хранит непосредственно картинку пользователя, а лишь уникальные черты его вида, что делает его совершенным для таких площадок, как admiral-x.

Сопоставление и осуществление решения

В случае, когда человек хочет разлочить смартфон взором, механизм воспроизводит все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный уровень (обычно выше 99%), телефон, как и платформа admiral-x, открывается; если нет — доступ блокируется.

Адаптация к метаморфозам внешнего вида

Увлекательная характеристика актуальных систем — способность самообучения. Если вы постоянно открываете мобильное устройство с обновленной стрижкой или очками, система постепенно обновляет эталонный модель вашего лица для увеличения точности действия без ухудшения безопасности.

Безопасность биометрических данных данных.

Большинство юзеры опасаются держать свои био-идентификационные данные на смартфоне из-за риска утечки данных или взлома гаджета. Определенные компании, вроде admiral-x, предлагают методы для улучшения защиты данных пользователей.

• Локальное сохранение: Основная часть девайсов сохраняет биометричные шаблоны лишь внутри защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не выходят из аппарат и закрыты в том числе изготовителю.

• Шифрование: Все сведения сохраняются только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция приложений: Программы сторонних девелоперов не имеют непосредственного возможности доступа к биометрическим данным; они могут лишь требовать факт подтверждения личности через системный API.

Следует подчеркнуть значимую подробность: в случае, если кто-либо достанет доступ к вашему телефону физически (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество изготовители осуществляют защиту от неосознанного разблокирования — в частности, требуют раскрыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют виды определения лиц?

Сегодня можно определить 3 главных метода к осуществлению этой задачи:

Программное плоское распознавание

Используется только лицевая видеокамера без экстра детекторов глубины. Этот способ встречается наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость осуществления; низкая цена; быстрая деятельность при хорошем освещении.
Минусы: легко одурачить фотографией; ненадежная деятельность ночью; низкая охрана.

Техническое трёхмерное оцифровка

Задействует инфракрасную камеру + проектор пикселей + сенсоры глубины (Face ID у Apple; аналогичные решения у Huawei Mate).
Достоинства: высокая надёжность; нельзя подделать изображение/видеозапись; устойчивая работа в любых условиях освещения.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные методы с интеграцией ИИ

Задействуют комбинацию программируемых методов + аппаратно-техническую обработку + постобработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные товары, как адмирал х и Google Pixel Face Unlock современных поколений, объединяют фронтальную камеру c ИК сенсором мобильности Soli Radar для защиты от подделок жестами/масками/видеодисплеями посторонних устройств.

Примеры эксплуатации разных методов

• iPhone модели X/11/12/13/14 применяют только техническое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition впервые предложил подобие Face ID в ряду Android.
• Samsung Galaxy S10 версия/S20 имеют как программное обеспечение двухмерное идентификацию по изображению фронталкой, так и сканер ириса глаза.
• Huawei Mate20 Pro применяет систему из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Проблемы защиты и ошибочные тревоги

Несмотря на замечательный успехи техники за прошедшие лет, безупречных системы пока не существует:

1. Вероятность обмана: Доступные телефоны легко “разблокируются” качественной изображением хозяина либо видеозаписью с экрана другого устройства.
2. Идентичные близняшки: Даже самые безупречные устройства могут ошибиться между монозиготными близнецами либо семьями с очень аналогичной внешностью.
3. Метаморфозы облика: Резкое утрата веса/увеличение массы тела, косметические процедуры либо повреждения порой требуют повторной регистрации биометрии.
4. Условия съёмки: Яркая подсветка солнцем либо глубокая затенение могут уменьшить верность определения признаков.

Ниже пара рекомендаций по безопасному применению:

• Для значимых операций всегда внедряйте дополнительную аутентификацию;
• Не запускайте опцию “Разблокировка по лицу” на недорогих моделях без ИК-сенсоров;
• Систематически обновляйте прошивку прошивку мобильного устройства для обеспечения безопасности от новых видов атак;
• Включайте функцию “Требовать раскрытых глаз” везде, где она имеется.

В каких местах дополнительно применяется технологии кроме мобильных телефонов?

Пускай тема данной статьи сосредоточена на в частности мобильным устройствам, необходимо сказать о прочих направлениях внедрения технологии:

• Управление прохода в рабочих помещениях и многоквартирных зданиях;
• Платёжные устройства банков (“Face Pay”);
• Виртуальные удостоверения личности современного поколения;
• Комплексы видеонаблюдения муниципальных сервисов;
• Автоматизация регистрации явки школ/вузов;
• Авторизация участников ПК/ноутбуков.

Например: В московском метро уже проверяется система платежа проезда по фейсу (“Face Pay”) — нужно лишь пройти через турникет без карты или телефона! Схожие инициативы развиваются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Как изменяется технический процесс сегодня?

Каждый годик появляются свежие мысли для повышения уровня функционирования систем лицевого распознавания:

1. Увеличивается детализация сенсорных устройств — чем больше информации фиксируется фотоаппаратом/датчиками глубины, тем меньше вероятность неточности;
2. Развиваются нейросети — передовые конструкции типа MobileNetV3 дают возможность оперативно осваивать дополнительным характеристикам вида пользователя непосредственно на девайсе без отправки данных в облако.
3. Улучшаются методы антиспуфинга — теперь телефоны умеют различать подлинные анимированные лица от статичных снимков/масок по микроскопическим микродвижениям.
4. Интеграция со интеллектуальными приборами — умные часы могут авто блокировать смартфон, если владелец ушёл далеко.
5. Проявляются комбинированные механизмы — в частности комбинирующие аудио идентификацию + лицо + пальцевой отпечаток.

Итак, какие тенденции очень актуальны сейчас:

1) Сокращение компонентов

Компании намереваются минимизировать габариты прорези (“чёлки”) под сенсоры на экране за счёт встраивания миниатюрных ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на устройстве

Для увеличения приватности всё более расчётов осуществляется на месте без пересылки данных во сторонний облачный услугу.

3) Упорядочивание стандартов

Гугл активно пропагандирует норму BiometricPrompt API, с целью чтобы аналогичные площадки, например как admiral x, и все Android-программы были совместимы с различными типами биометрии унифицированно.

Какое выбрать на сегодня?

Когда тебе важна предельная сохранность данных, выбирайте топовые модели с интегрированным ИК-проектором или же ToF-датчиком глубины.

• iPhone каждого новейших моделей
• Huawei Companion/Series P линейки
• Xiaomi Pro
• Vivo X модели
• Oppo Найти X серии.

Если финансы ограничен – лучше выбирать классическим методам безопасности (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в admiral x, применять только как опциональную опцию удобства.

Каким образом повысить удобство работы возможности?

Есть некоторые хитростей для пользователей, кто уже пользуется функцию распознавания лица:

1. Периодически меняйте свою фотографию-шаблон, если кардинально трансформируется внешность.
2. Не забывайте протирать объектив фронтальной камеры – загрязнения могут уменьшить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам запускает фотоаппарат как только вы берёте его в руки.
4. Во время записи пытайтесь удерживать лицо ровно перед видеоустройства не допуская значительного наклона головы.
5. Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отвернулись от экрана.

Будущее прогресса технологии

В предстоящие годы можно ожидать появления полностью бесконтактных способов идентификации индивидуума сразу по нескольким биометрическим данным параметрам одновременно: облик + голос + манера ходьбы + манипуляции руками!

Также вероятно развитие свежих способов охраны приватности – скажем, динамическое модификация диджитал шаблона после каждой удачной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – одна из очень интересных техник нашего эпохи! Она обеспечивает взаимодействие со мобильным устройством комфортнее чем до этого, и такие приложения, как admiral-x, могут существенно повысить ваш юзерский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы знаете, как функционирует эта система в деталях, – сможете осознаннее выбирать свой следующий гаджет!