Каким образом действует идентификация лиц в мобильных устройствах
Почему мы предпочитаем разблокировку по лицу
В последние времена распознавание лиц превратилось в одной из самых распространённых возможностей для открытия смартфонов. Всего некоторые лет тому назад основная часть пользователей обходились пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но при появлением таких технологий, например вулкан россия, нам достаточно просто взглянуть на экран — и аппарат тут же узнает своего владельца.
Какая вещь превращает эту особенность настолько популярной? Прежде всего, это практично: не нужно помнить замысловатые пароли или искать правильный палец в тьме. Во-вторых, это оперативно: современные алгоритмы узнают лицо практически за мгновение. В-третьем пункте, это чувство футуризма — как будто в фильмах про vulkan russia шпионов.
Впрочем за данной кажущейся несложностью таится целый мир трудных методов и инженерных решений. Давайте разобраться, как точно функционирует распознавание лиц в современных гаджетах, какие бывают способы, насколько они надёжны и что нас ждёт впереди.
Краткая повествование эволюции техники
Распознавание лиц как методика присутствует уже более 50 лет. Изначальные попытки автоматизированного исследования облика были сделаны еще в 1960-х годах в исследовательских центрах США. Тогда ЭВМ могли лишь обозначать очертания черепа и измерять дистанции между очами и ртом на ахроматических изображениях.
Начальные коммерческие системы стали доступны в девяностых годах, но они были несовершенны: действовали неспешно и часто ошибались. Только с развитием нейронных сетей и таких платформ, как вулкан россии, мощных мобильных процессоров распознавание лиц стало по-настоящему массовым явлением.
В 2017 году Apple представила iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным сканированием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали внедрять свои решения.
Основные стадии функционирования системы распознавания
Процесс идентификации лица можно ориентировочно сегментировать на несколько ключевых этапов:
- Обнаружение лица — устройство распознает наличие людского образа в кадре.
- Определение характеристик — система анализирует черты физиономии: форму зрительных органов, обонятельного органа, губ, позицию бровей.
- Построение модели — создаётся уникальный виртуальный отпечаток (faceprint) на основе определённых признаков.
- Сравнение со стандартом — сформированный модель сверяется со зафиксированной при учёте биометрической сведениями владельца.
- Принятие определения — если соответствие достаточно высокое, смартфон деблокируется.
Всякий из данных шагов требует специальных процедур и усовершенствований для быстрой работы непосредственно на девайсе.
Аппаратные составляющие: что прячется внутри них
Типичная передняя камера.
Простейший простой метод распознавания облика задействует исключительно лицевую камеру мобильного устройства. Данный метод внедрён во многих доступных вариантах Android-девайсов.
Достоинства:
- Не потребляет внешних сенсоров.
- Быстро функционирует при хорошем свете.
Недостатки:
- Просто ввести в заблуждение фотографией или видеозаписью.
- Неправильно работает при низком освещённости или непривычных точках зрения.
Инфракрасная камера и пунктирный проекционный аппарат
Более продвинутые системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология лежит в основе Face ID от Apple.
Каким способом это работает:
- Точечный проектор проецирует на лицо использующего невидимую структуру из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 точек).
- ИК камера фиксирует искривление данной сетки по плоскости лица.
- Создаётся трёхмерная карта глубины глубинности, что почти неосуществима для фальсификации стандартной снимком или маскировкой.
Преимущества
- Надёжная функционирование даже в полной темноте.
- Высокая устойчивость к имитациям.
- Точность идентификации более 99%.
Дополнительные сенсорные устройства
В отдельных устройствах используются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые измеряют период распространения света до предмета и обратно; Трехцветные-датчики глубины; специальные световые дальномеры для построения более детализированной 3D-модели физиономии.
Эти технологии используются в основном во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).
Софтверные процедуры: синтетический разум в действии
Современные механизмы распознавания лиц неосуществимы в отсутствие использования ИИ и машинного обучения. Именно благодаря таким инновациям, как вулкан россии, устройство может распознавать пользователя даже при метаморфозах облика: новая стрижка, растительность на лице, оптика или косметика не становятся барьером для открытия.
Детектирование лиц
На первом стадии система должна оперативно обнаружить ликовое изображение в пределах всего изображения с камеры. Для этой задачи используются каскадные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые “обучены” распознавать лиц человека среди множества других объектов.
Пример: алгоритм MTCNN может находить лицо даже в случае неполном перекрытии (например, шалью или рукой).
Идентификация важных моментов
После идентификации лица устройство, такая как вулкан россии, вычисляет местоположение ключевых точек: края глаз, верхушка носа, края губ и так далее. Как правило задействуется от 68 до 128 главных точек на лицевой области.
Это действие требуется для нормализации визуала: если юзер держит телефон под наклоном, или повернул голову, программа исправляет картинку до нормального состояния для последующего изучения.
Создание биометрии модели
Далее искусственная сеть строит компактное цифровое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след внешности длиной от 128 до 512 флоатов.
Этот формат крайне сложно имитировать: он не сохраняет непосредственно изображение юзера, а лишь уникальные характеристики его вида, что делает его оптимальным для таких систем, как vulkan russia.
Сравнительный анализ и осуществление решения
В случае, когда человек желает разлочить смартфон взором, механизм воспроизводит все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.
Если аналогичность превышает установленный уровень (обычно больше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ блокируется.
Привыкание к метаморфозам внешности
Занимательная черта актуальных систем — способность самообучения. Если вы постоянно открываете смартфон с новой прической или очками, система постепенно освежает эталонный модель вашего внешности для улучшения точности функционирования без снижения уровня безопасности.
Охрана биометрии данных.
Большинство клиенты беспокоятся сохранять свои био-идентификационные данные на мобильном устройстве из-за риска потери данных или взлома устройства. Некоторые компании, такие как vulkan russia, предлагают методы для повышения сохранности информации клиентов.
-
Локальное сбережение: Преимущественно аппаратов хранит био-идентификационные образцы лишь внутрь защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не выходят из аппарат и недоступны даже создателю.
-
Шифрование: Все информация сберегаются только в кодированном виде с использованием современных криптографических алгоритмов AES256.
-
Изоляция приложений: Приложения внешних девелоперов не обладают прямого возможности доступа к биометрическим; они могут лишь запрашивать подтверждение подтверждения идентичности через системный API.
Необходимо подчеркнуть важную подробность: в случае, если какой-то человек сможет получить доступ к вашему телефону физически (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество компании осуществляют меры безопасности от “слепого” разблокирования — к примеру, просят разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.
Какие бывают типы определения лиц на изображениях?
На сегодняшний день можно различить три ключевых способа к осуществлению этой задачи:
Программируемое плоское идентификация
Используется только передняя видеокамера без экстра сенсоров дистанции. Такой способ наблюдается чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).
Преимущества: несложность осуществления; умеренная цена; оперативная работа при качественном свете.
Минусы: просто обмануть снимком; нестабильная функционирование ночью; слабая безопасность.
Аппаратное трёхмерное сканирование
Применяет ИК видеокамеру + проектор пикселей + сенсоры глубины (Face ID у Apple; аналогичные технологии у Huawei Mate).
Преимущества: большая достоверность; не получится подделать изображение/видеозапись; устойчивая функционирование в любых условиях освещения.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана (“чёлка”)
Смешанные способы с дополнением ИИ
Задействуют комбинацию программируемых методов + аппаратно-техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие продукты, как вулкан россии и Google Pixel Face Unlock новейших версий, комбинируют фронталку c инфракрасным сенсором движения Soli Radar для защиты от фальсификаций жестами/масками/видеодисплеями чужих устройств.
Образцы применения различных техник
- iPhone линейки X/11/12/13/14 используют только физическое трёхмерное 3D-сканирование
- Xiaomi Mi8 Explorer Edition первый раз предложил эквивалент Face ID среди Android.
- Samsung Galaxy S10 версия/S20 обеспечивают как софтверное 2D распознавание по фото селфи-камерой, так и датчик ириса глаза.
- Huawei Mate20 Pro задействует систему из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент
Трудности защиты и неверные сигналы
Несмотря на поразительный прогресс технологий за последние годы, идеальных систем пока не наблюдается:
- Шанс обмана: Недорогие мобильники просто открываются четкой фотографией пользователя либо роликом с дисплея иного гаджета.
- Идентичные двойняшки: Даже самые безупречные системы могут перепутать между монозиготными близнецами либо родичами с очень аналогичной внешностью.
- Метаморфозы внешности: Резкое снижение веса/набор веса, пластические операции либо травмы в некоторых случаях необходимы для перерегистрации биометрических данных.
- Условия фотографирования: Интенсивная освещённость солнцем или плотная тень могут уменьшить аккуратность распознавания признаков.
Вот несколько подсказок для защищённому использованию:
- Для критически важных операций всегда используйте двухфакторную аутентификацию;
- Не запускайте опцию “Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
- Постоянно обновляйте прошивку программное обеспечение телефона для предотвращения угроз от новых видов атак;
- Включайте функцию “Требовать распахнутых глаз” там, где она есть.
В каких областях ещё используется технология кроме смартфонов?
Несмотря на то, что тема нашей статьи касается именно мобильным устройствам, стоит упомянуть о прочих направлениях внедрения технологии:
- Управление прохода в офисах и резиденциях;
- Платёжные устройства финансовых учреждений (“Face Pay”);
- Виртуальные идентификационные документы современного образца;
- Комплексы видеонаблюдения муниципальных служб;
- Механизация учёта явки учебных заведений/вузов;
- Вход юзеров компьютеров/ноутбуков.
Например: В городском метро уже испытывается система платежа проезда по лицу (“Face Pay”) — хватит пройти через турникет без пластика или телефона! Похожие программы реализуются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.
Каким способом трансформируется техпроцесс в нынешнее время?
Каждый годик проявляются свежие идеи для улучшения уровня функционирования систем лицевого распознавания:
- Увеличивается чёткость сенсоров — чем больше информации фиксируется видеокамерой/глубинными сенсорами, тем меньше риск погрешности;
- Совершенствуются нейросети — передовые структуры типа MobileNetV3 дают возможность скоростно адаптироваться к свежим особенностям внешности владельца прямо на устройстве без отправки данных в облако.
- Совершенствуются способы антиспуфинга — теперь смартфоны могут распознавать реальные движущиеся лица от неподвижных фото/маскировок по мельчайшим микродвижениям.
- Синхронизация со смарт-гаджетами — умные часы могут автоматически блокировать смартфон, если пользователь ушёл далеко.
- Возникают гибридные устройства — в частности комбинирующие голосовую аутентификацию + лицо + отпечаток пальца.
Вот, какие тренды в особенности популярны сейчас:
1) Миниатюризация компонентов
Изготовители пытаются минимизировать габариты выреза (“чёлки”) для сенсоры на дисплее за счёт встраивания компактных ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.
2) Обработывание прямо на девайсе
Для увеличения личной безопасности всё более расчётов происходит на месте без передачи данных во сторонний облачный услугу.
3) Стандартизация стандартов
Google интенсивно пропагандирует стандарт BiometricPrompt API, для того чтобы аналогичные системы, как вулкан россия, и все Android-приложения были совместимы с всеми формами биометрии стандартизированно.
Что решить сегодня?
В случае если вам необходима наивысшая безопасность информации, выбирайте топовые аппараты со встроенным ИК-излучателем либо ToF-сенсором глубины.
- iPhone всех новейших поколений
- Huawei Companion/P серии
- Mix Pro
- Vivo X серии
- Оппо Найти Икс линейки.
Если бюджет скромен – лучше предпочесть традиционным способам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в вулкан россия, задействовать только как второстепенную опцию удобства.
Каким способом улучшить комфорт работы возможности?
Есть некоторые лайфхаков для тех, кто уже пользуется разблокировку по лицу:
- Регулярно меняйте свою фотографию-шаблон, если значительно изменяется внешность.
- Не забывайте протирать объектив передней камеры – пятна могут снизить точность!
- Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам запускает камеру когда вы берёте его в руки.
- При регистрационного процесса старайтесь сохранять лицевую часть ровно перед камеры исключая значительного наклона головы.
- Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отвернулись от дисплея.
Возможности эволюции технологии
В предстоящие времена можно предполагать развития полностью безконтактных способов опознания индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + речь + манера ходьбы + жесты рук!
Также возможно появление свежих способов охраны приватности – к примеру, переменное изменение цифрового образца после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.
Распознавание лиц – единственная из самых увлекательных технологий нашего периода! Она делает взаимодействие со мобильным устройством комфортнее чем до этого, и такие аппы, как vulkan russia, могут значительно оптимизировать ваш юзерский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.
Теперь, если вы осведомлены, как устроена эта система изнутри, – сумеете вдумчиво определять свой будущий устройство!