Каким образом действует идентификация лиц в телефонах

Каким образом действует идентификация лиц в телефонах

Почему мы предпочитаем разлочивание по лицевому распознаванию

В прошлые времена распознавание физиономий превратилось в одной из наиболее востребованных функций для разблокировки смартфонов. Всего несколько годов тому назад большинство юзеров довольствовались PIN-кодами, секретными кодами или датчиками отпечатков пальцев. Но с появлением таких технологий, например admiral x, нам достаточно просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Какая вещь делает данную возможность настолько популярной? Во-первых, это комфортно: не нужно помнить замысловатые пароли или отыскивать правильный палец в мраке. Кроме того, это быстро: современные программы узнают лицо практически за мгновение. В-третью очередь, это впечатление будущего — будто в кинофильмах про адмирал х шпионов.

Однако за этой кажущейся простотой прячется целый мир трудных методов и инженерных концепций. Попробуем разобраться, как конкретно работает распознавание лиц в актуальных гаджетах, какие применяются способы, насколько они защищены и что нас ожидает в будущем.

Сжатая повествование развития технологии

Идентификация лиц как техника присутствует уже более пятидесяти годов. Начальные эксперименты автоматического изучения облика были осуществлены еще в 1960-х годы в исследовательских центрах США. Тогда ЭВМ способны были лишь выделять очертания лица и определять расстояния между зрачками и губами на черно-белых изображениях.

Начальные бизнес системы стали доступны в девяностых годах, но они были далеки от совершенства: работали медленно и часто давали сбои. Только с прогрессом синтетических сетей и таких площадок, как адмирал х, сильных мобильных микросхем распознавание лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с достоверным трёхмерным распознаванием лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали внедрять собственные разработки.

Главные стадии работы устройства идентификации

Процесс распознавания лица можно ориентировочно поделить на несколько важных этапов:

  1. Обнаружение лица — устройство определяет наличие человеческого образа в снимке.
  2. Выделение особенностей — алгоритм исследует особенности физиономии: очертания глаз, обонятельного органа, уст, положение бровей.
  3. Построение структуры — создаётся неповторимый виртуальный отпечаток (faceprint) на основе выделенных признаков.
  4. Сравнение со эталоном — сформированный модель сопоставляется с сохранённой при учёте биометрической данными владельца.
  5. Принятие определения — если сходство достаточно существенное, смартфон деблокируется.

Любой из этих стадий запрашивает особых процедур и оптимизаций для скорой работы прямо на устройстве.

Аппаратные компоненты: что скрыто в их недрах

Стандартная фронтальная камера.

Самый простой простой способ определения лица применяет лишь переднюю камеру мобильного устройства. Данный подход внедрён во различных недорогих вариантах Android-девайсов.

Положительные стороны:

  • Необходимо требует дополнительные датчиков.
  • Оперативно функционирует при достаточном освещённости.

Недостатки:

  • Несложно ввести в заблуждение снимком или видеозаписью.
  • Плохо работает при плохом свете или нестандартных углах обзора.

Инфракрасная камера и пунктирный проектор

Более совершенные системы, такие как адмирал х, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс составляет базу Face ID от Apple.

Каким образом это действует:

  • Точечный проектор показывает на облик юзера невидимую структуру из тысяч инфракрасных точек (например, Face ID использует около 30 000 меток).
  • ИК камера регистрирует искривление этой сетки по плоскости физиономии.
  • Создаётся 3D карта глубины, которая практически неподвластна для имитации стандартной снимком или маскировкой.

Достоинства

  • Надёжная деятельность даже в полной тьме.
  • Сильная защита к подделкам.
  • Точность определения свыше 99%.

Дополнительные сенсоры

В отдельных аппаратах используются также экстра сенсорные устройства: ToF (Time-of-Flight), которые фиксируют период распространения света до предмета и обратно; Трехцветные-датчики глубины; специальные лазерные измерители расстояния для создания более аккуратной 3D-модели физиономии.

Эти технологии используются в основном во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искусственный разум в действии

Текущие устройства распознавания физиономий немыслимы при отсутствии использования искусственного интеллекта и machine learning. Именно вследствие таким инновациям, как адмирал х, гаджет в состоянии распознавать юзера даже при изменениях внешности: новая стрижка, щетина, оптика или грим не становятся препятствием для открытия.

Распознавание лиц

При начальном шаге алгоритм должна оперативно распознать лицо среди полного кадра камеры. Для этого применяются каскадные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые натренированы идентифицировать лица людей среди множества других объектов.

Пример: процесс MTCNN в состоянии распознавать лицо даже в случае частичном закрытии (например, шарфом или ладонью).

Выделение ключевых точек

После обнаружения лица механизм, такая как адмирал х, определяет местоположение ключевых точек: края глаз, конец носа, контуры губ и так далее. Часто используется от 68 до 128 основных меток на лице.

Данное необходимо для нормализации визуала: если юзер удерживает мобильник под наклоном, или склонил головку, программа корректирует картинку до нормального состояния для дальнейшего анализа.

Построение биометрии модели

Далее нейросеть строит сжатое цифровое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след внешности длиной от 128 до 512 чисел с плавающей запятой.

Данный образец очень трудно сфальсифицировать: он не сохраняет само изображение юзера, а лишь исключительные черты его облика, что делает его идеальным для таких площадок, как admiral-x.

Сравнительный анализ и принятие выбора

В случае, когда пользователь желает разблокировать смартфон взглядом, программа повторяет все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает заданный границу (обычно больше 99%), телефон, как и платформа admiral-x, открывается; если нет — доступ запрещается.

Адаптация к метаморфозам облика

Увлекательная черта современных системы — способность самообучения. Если ты постоянно открываете мобильное устройство с свежей укладкой или оптикой, система постепенно модернизирует основной образец вашего лица для увеличения точности действия без ухудшения безопасности.

Охрана биометрических информации.

Множество юзеры опасаются держать свои био-идентификационные данные на телефоне из-за угрозы утечки данных или хакерской атаки. Некоторые организации, такие как admiral-x, предлагают варианты для повышения защиты информации клиентов.

  • Локальное сбережение: Преимущественно устройств хранит био-идентификационные модели только внутри защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они никогда не оставляют гаджет и недоступны в том числе производителю.

  • Шифрование: Все данные сберегаются только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.

  • Изоляция приложений: Приложения третьих разработчиков не имеют непосредственного доступа к биометрическим; они могут лишь требовать подтверждение верификации идентичности через системный API.

Необходимо упомянуть существенную подробность: в случае, если кто-либо получит физический доступ к вашему телефону (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество производители реализуют систему защиты от неосознанного разблокирования — к примеру, просят открыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют категории распознавания лиц?

Сегодня можно выделить определить 3 ключевых метода к выполнению этой функции:

Программируемое плоское определение

Используется только фронтальная видеокамера без вспомогательных датчиков глубины. Такой метод используется чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость реализации; умеренная цена; скоростная деятельность при хорошем свете.
Минусы: легко ввести в заблуждение фотографией; ненадежная работа ночью; недостаточная защищенность.

Техническое 3D сканирование

Использует ИК видеокамеру + проекционный модуль пикселей + датчики глубины (Face ID у Apple; подобные решения у Huawei Mate).
Преимущества: высокая надежность; невозможно исказить изображение/видеозапись; постоянная работа при любом освещении.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные способы с дополнением ИИ

Задействуют комбинацию программируемых методов + техническую обработку + постобработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, как адмирал х и Google Pixel Face Unlock новейших поколений, объединяют фронтальную камеру c ИК сенсором движения Soli Radar для защиты от подделок руками/масками/видеоэкранами посторонних устройств.

Иллюстрации применения разнообразных методов

  • iPhone серии X/11/12/13/14 задействуют только физическое трёхмерное 3D-сканирование
  • Xiaomi Mi8 Explorer Edition впервые внедрил эквивалент Face ID в числе Android.
  • Samsung Galaxy S10/S20 имеют как программное обеспечение двухмерное распознавание по фото селфи-камерой, так и сенсор ириса глаза.
  • Huawei Mate20 Pro задействует систему из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Проблемы безопасности и ошибочные срабатывания

Несмотря на впечатляющий прогресс технологий за последние годы, безупречных систем пока не существует:

  1. Шанс обмана: Доступные телефоны без труда доступны качественной снимком владельца или роликом с экрана другого устройства.
  2. Идентичные близнецы: Даже самые идеальные устройства могут перепутать между однояйцевыми близнецами либо родичами с очень похожей внешностью.
  3. Трансформации внешности: Резкое похудение/набор веса, косметические процедуры либо повреждения порой требуют обновления данных биометрии.
  4. Условия съёмки: Сильная подсветка солнечным светом либо плотная темнота могут понизить верность определения признаков.

Здесь некоторые рекомендаций для защищённому эксплуатации:

  • Для важных операций всегда применяйте дополнительную аутентификацию;
  • Не включайте возможность “Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
  • Систематически обновляйте прошивку программное обеспечение смартфона для предотвращения угроз от новых видов атак;
  • Включайте функцию “Требовать раскрытых глаз” везде, где она имеется.

Где ещё находится применение технология за исключением смартфонов?

Хотя предмет этой публикации посвящена конкретно портативным гаджетам, следует отметить прочих направлениях внедрения технологии:

  • Мониторинг прохода в деловых центрах и резиденциях;
  • Платёжные устройства банков (“Face Pay”);
  • Электронные паспорта последнего типа;
  • Системы видеоконтроля муниципальных подразделений;
  • Автоматизация отслеживания явки образовательных учреждений/институтов;
  • Авторизация пользователей компьютеров/ноутбуков.

Например: В московском метро уже проверяется система оплаты проезда по лицу (“Face Pay”) — хватит пройти через барьер без пластика или мобильника! Похожие проекты развиваются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким образом трансформируется техпроцесс в наше время?

Каждый годик возникают новые идеи для повышения стандарта деятельности систем распознавания лиц:

  1. Увеличивается детализация сенсорных устройств — чем больше деталей фиксируется камерой/датчиками глубины, тем меньше шанс неточности;
  2. Развиваются нейронные сети — новейшие конструкции вида MobileNetV3 дают возможность оперативно адаптироваться к дополнительным чертам внешности обладателя прямо на устройстве без отправки данных в облако.
  3. Улучшаются способы антиспуфинга — теперь смартфоны способны отличать подлинные движущиеся лица от фиксированных фото/маскировок по незаметным движениям кожи.
  4. Синхронизация со умными устройствами — умные часы могут автоматически закрыть доступ к телефон, если владелец ушёл далеко.
  5. Возникают смешанные системы — например совмещающие речевую опознание + лицо + пальцевой отпечаток.

Вот, те направления в особенности актуальны в данный момент:

1) Уменьшение элементов

Изготовители стараются сократить габариты отверстия (“чёлки”) под датчики на экране за счёт интеграции маленьких ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на девайсе

Для повышения конфиденциальности всё более обработки данных осуществляется внутри устройства без передачи данных во внешний облачный услугу.

3) Упорядочивание стандартов

Google энергично продвигает стандарт BiometricPrompt API, чтобы такие площадки, как admiral x, и любые Android-приложения могли работать с различными типами биометрии единообразно.

Какое выбрать на сегодня?

Если вам всем нужна предельная защита информации, остановите выбор на топовые устройства с вмонтированным ИК-излучателем либо ToF-датчиком глубины.

  • iPhone всех существующих новейших версий
  • Huawei Partner/P Series ряда
  • Xiaomi Pro
  • Vivo X серии
  • Oppo Найти X серий.

Если бюджет скромен – лучше выбирать традиционным способам защиты (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в admiral x, задействовать только как дополнительную опцию удобства.

Как увеличить практичность работы опции?

Есть пара советов для людей, кто уже использует разблокировку через лицо:

  1. Периодически меняйте свою фото-шаблон, если кардинально изменяется облик.
  2. Не пренебрегайте чистить линзу передней камеры – пятна могут понизить точность!
  3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам активирует камеру если вы берёте его в руки.
  4. Во время записи старайтесь удерживать лицо ровно напротив камеры исключая резкого наклона головы.
  5. Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отвернулись от дисплея.

Перспективы эволюции инноваций

В предстоящие годы можно предполагать возникновения полностью дистанционных способов распознавания индивидуума сразу по нескольким биометрическим данным параметрам одновременно: облик + звучание + шаги + жесты рук!

Также предполагается появление современных подходов защиты приватности – например, динамическое изменение цифрового паттерна после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень захватывающих технологий нашего эпохи! Она обеспечивает интеракцию со смартфоном комфортнее чем раньше, и такие программы, как admiral-x, могут существенно улучшить ваш пользовательский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы знаете, как устроена эта технология в деталях, – сумеете осознаннее подбирать свой очередной устройство!