Как функционирует определение лиц в телефонах

Для чего мы останавливаемся на разблокирование по лицу

В прошлые годы распознавание физиономий стало одной из самых распространённых функций для открытия мобильных телефонов. Лишь пару лет назад основная часть пользователей удовлетворялись PIN-кодами, паролями или сканерами отпечатков пальцев. Но при появлением подобных технологий, как вулкан россия, нам достаточно лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какая вещь обуславливает данную особенность настолько популярной? Для начала, это практично: не нужно помнить сложные пароли или отыскивать правильный палец в темноте. Во-вторых, это быстро: современные системы идентифицируют лицо фактически за доли секунды. В-третью очередь, это чувство футуристичности — будто в кинофильмах про vulkan russia агентов.

Однако за такой видимой простотой таится весь мир трудных техник и инженерных решений. Давайте понять, как конкретно работает фейсканирование в новейших мобильных телефонах, какие существуют способы, насколько они надёжны и что нас ожидает в будущем.

Короткая повествование развития техники

Распознавание лиц как технология имеется уже более 50 лет. Начальные пробы автоматизированного изучения облика были осуществлены еще в 1960-х годы в исследовательских центрах США. Тогда вычислительные машины умели лишь определять контуры головы и вычислять дистанции между очами и ртом на монохромных снимках.

Начальные коммерческие платформы возникли в 1990-х годах, но они были несовершенны: действовали неспешно и нередко ошибались. Только с эволюцией синтетических сетей и таких платформ, как вулкан россии, мощных мобильных чипов определение лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным распознаванием лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали внедрять собственные решения.

Ключевые шаги действия механизма идентификации

Процесс распознавания лица можно условно разделить на несколько ключевых этапов:

Распознавание лица — аппарат выявляет присутствие людского образа в снимке.
Определение характеристик — механизм анализирует особенности лица: форму глаз, обонятельного органа, уст, расположение бровей.
Построение шаблона — создаётся неповторимый виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение с эталоном — сформированный модель сравнивается со записанной при внесении биометрической информацией владельца.
Принятие решения — если совпадение достаточно существенное, смартфон открывается.

Каждый из указанных этапов нуждается в индивидуальных процедур и оптимизаций для оперативной работы непосредственно на девайсе.

Технические составляющие: что находится в их недрах

Обычная селфи камера.

Самый простой метод определения облика задействует только фронтальную камеру мобильного устройства. Данный подход реализован во многих недорогих моделях Android-девайсов.

Преимущества:

Не нуждается в дополнительных сенсоров.
Шустро работает при достаточном освещённости.

Отрицательные стороны:

Легко ввести в заблуждение фотографией или видео.
Неудачно функционирует при плохом свете или нестандартных ракурсах.

Инфракрасная камера и точечный проектор

Более совершенные системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс лежит в основе Face ID от Apple.

Каким образом это действует:

Точечный проекционный прибор показывает на физиономию юзера невидимую сетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 точек).
Инфракрасная камера фиксирует деформацию этой решетки по плоскости лица.
Получается 3D глубинная карта глубинности, которая практически неосуществима для фальсификации обычной фотографией или маской.

Достоинства

Надёжная работа даже в полной темноте.
Высокая сопротивляемость к фальсификациям.
Точность идентификации свыше 99%.

Добавочные датчики

В некоторых устройствах применяются также экстра сенсорные устройства: ToF (Time-of-Flight), которые фиксируют период движения луча до предмета и обратно; Цветные-датчики дальности; специальные лазерные измерители расстояния для создания более аккуратной 3D-модели физиономии.

Эти разработки используются чаще всего во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: синтетический ум на действии

Нынешние механизмы опознания лиц немыслимы без применения ИИ и машинного обучения. Именно вследствие таким инновациям, как вулкан россии, устройство способно распознавать владельца даже при изменениях внешности: новая укладка, борода, оптика или макияж не становятся барьером для деблокировки.

Обнаружение физиономии

При стартовом этапе алгоритм необходимо мгновенно найти ликовое изображение внутри целого снимка с камеры. Для данной цели применяются последовательные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые натренированы распознавать лиц человека среди множества других объектов.

Пример: алгоритм MTCNN в состоянии обнаруживать облик даже при частичном закрытии (например, платком или ладонью).

Идентификация основных моментов

После идентификации лица система, такая как вулкан россии, устанавливает местоположение главных точек: уголки глаз, верхушка носа, края губ и так далее. Обычно используется от 68 до 128 ключевых меток на лице.

Это действие необходимо для выравнивания картинки: если человек удерживает смартфон под наклоном, или наклонил голову, программа корректирует изображение до нормального состояния для последующего изучения.

Формирование биометрического идентификатора шаблона

Далее нейросеть строит уплотненное цифровое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 вещественных чисел.

Этот формат очень затруднительно имитировать: он не удерживает непосредственно изображение юзера, а лишь особенные характеристики его облика, что делает его идеальным для таких систем, как vulkan russia.

Сравнительный анализ и осуществление заключения

Когда человек намеревается разблокировать телефон глазами, механизм осуществляет все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый порог (обычно превышает 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ блокируется.

Привыкание к изменениям внешности

Интересная характеристика современных систем — возможность самостоятельного обучения. Если ты часто доступаете к мобильное устройство с свежей укладкой или оптикой, система постепенно освежает основной шаблон вашего внешности для увеличения точности действия без ухудшения безопасности.

Охрана биометрических данных информации.

Многие пользователи опасаются держать свои биометрические данные на мобильном устройстве из-за угрозы утечки данных или хакерской атаки. Определенные фирмы, такие как vulkan russia, предлагают варианты для увеличения защиты сведений клиентов.

Локальное сбережение: Большинство устройств хранит биометричные шаблоны исключительно внутри защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Они всегда не покидают устройство и не доступны даже производителю.
Шифрование: Все сведения сохраняются только в кодированном виде с использованием современных криптографических алгоритмов AES256.
Изоляция приложений: Программы третьих разработчиков не обладают прямого доступа к биометрическим данным; они могут лишь запрашивать подтверждение верификации личности через системный API.

Стоит упомянуть значимую особенность: в случае, если кто-либо сможет получить физический доступ к вашему телефону (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство изготовители внедряют меры безопасности от неосознанного разблокирования — например, требуют раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют виды определения лиц?

В настоящее время можно определить 3 главных подхода к реализации этой операции:

Программное 2D определение

Применяется только передняя камера без вспомогательных датчиков дистанции. Такой подход встречается обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость воплощения; минимальная цена; скоростная деятельность при качественном освещении.
Минусы: несложно ввести в заблуждение фотографией; ненадежная функционирование ночью; недостаточная охрана.

Аппаратное трёхмерное сканирование

Задействует инфракрасную камеру + проектор пикселей + сенсоры глубины (Face ID от Apple; аналогичные решения у Huawei Mate).
Преимущества: значительная надежность; нельзя исказить изображение/видеозапись; устойчивая работа при любом освещении.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Смешанные подходы с ИИ-дополнением

Применяют комбинацию софтверных методов + аппаратную обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например вулкан россии и Google Pixel Face Unlock последних версий, сочетают фронталку c инфракрасным сенсором движения Soli Radar для защиты от фальсификаций жестами/масками/видеоэкранами чужих устройств.

Иллюстрации применения разнообразных методов

iPhone серии X/11/12/13/14 применяют только техническое трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition первый раз представил подобие Face ID в ряду Android.
Samsung Galaxy S10/S20 имеют как программное двухмерное идентификацию по фото фронталкой, так и датчик радужки глаза.
Huawei Mate20 Pro задействует набор из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Проблемы охраны и ложные срабатывания

Несмотря на впечатляющий прогресс технологий за последние лет, безупречных механизмов пока не существует:

Вероятность мошенничества: Доступные смартфоны легко открываются четкой снимком хозяина или роликом с дисплея иного гаджета.
Идентичные двойняшки: Даже самые совершенные системы могут ошибиться между однояйцевыми близнецами либо родственниками с очень схожей внешностью.
Изменения внешности: Стремительное снижение веса/набор веса, косметические процедуры либо повреждения иногда необходимы для перерегистрации биометрических данных.
Условия съёмки: Сильная подсветка солнечным светом или глубокая тень могут уменьшить аккуратность определения признаков.

Ниже пара рекомендаций по защищённому применению:

Для важных операций всегда используйте дополнительную аутентификацию;
Не включайте функцию “Разблокировка по лицу” на бюджетных устройствах без ИК-сенсоров;
Постоянно обновляйте прошивку программное обеспечение смартфона для предотвращения угроз от актуальных атак;
Включайте настройку “Требовать распахнутых глаз” там, где она есть.

В каких областях также находится применение технологии кроме смартфонов?

Пускай тема этой статьи посвящена конкретно мобильным устройствам, стоит упомянуть о альтернативных областях использования технологии:

Управление прохода в офисах и резиденциях;
Платёжные аппараты банков (“Face Pay”);
Цифровые удостоверения личности современного образца;
Установки видеонаблюдения муниципальных служб;
Автоматизация учёта посещаемости учебных заведений/вузов;
Авторизация пользователей ПК/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — достаточно пройти через барьер без пластика или телефона! Аналогичные программы осуществляются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Как изменяется технический процесс в наше время?

Всякий годочек проявляются современные мысли для улучшения стандарта деятельности систем лицевого распознавания:

Увеличивается разрешение датчиков — чем больше элементов фиксируется камерой/глубинными сенсорами, тем меньше вероятность ошибки;
Совершенствуются нейронные сети — новейшие архитектуры типа MobileNetV3 дают возможность скоростно адаптироваться к свежим характеристикам вида владельца непосредственно на девайсе без отправки данных в облако.
Улучшаются способы антиспуфинга — теперь мобильные устройства способны распознавать реальные анимированные лица от фиксированных фотографий/масок по мельчайшим движениям кожи.
Взаимодействие со умными устройствами — умные часы могут авто закрыть доступ к смартфон, если обладатель отошёл далеко.
Появляются гибридные механизмы — в частности объединяющие аудио опознание + облик + отпечаток пальца.

Здесь, какие тренды очень популярны сейчас:

1) Миниатюризация элементов

Изготовители пытаются сократить величину прорези (“чёлки”) для сенсоры на дисплее за счёт интеграции маленьких ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на устройстве

Для улучшения конфиденциальности всё более обработки данных выполняется локально без передачи данных во сторонний облачный услугу.

3) Упорядочивание норм

Гугл интенсивно продвигает стандарт BiometricPrompt API, для того чтобы подобные системы, вроде вулкан россия, и все Android-приложения были совместимы с любыми видами биометрии унифицированно.

Что подобрать на сегодня?

Когда вам всем необходима предельная защита данных, подбирайте флагманские аппараты со встроенным ИК-проектором либо ToF-сенсором глубины.

iPhone каждого последних поколений
Huawei Companion/P серии
Mi Expert
Vivo X серии
Oppo Обнаружить X серий.

Если бюджет ограничен – лучше выбирать обычным средствам безопасности (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в вулкан россия, использовать только как второстепенную опцию комфорта.

Каким способом увеличить комфорт использования опции?

Есть пара хитростей для тех, кто уже использует функцию распознавания лица:

Регулярно обновляйте свою фото-шаблон, если значительно меняется внешность.
Не упускайте из виду протирать объектив передней камеры – пятна могут понизить четкость!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам активирует камеру когда вы поднимаете его.
При регистрации пытайтесь сохранять голову неподвижно напротив видеоустройства без значительного наклона головы.
Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отвели взгляд от экрана.

Возможности прогресса техники

В ближайшие периоды можно предвкушать появления полностью дистанционных способов опознания индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + голос + походка + жесты рук!

Также вероятно возникновение современных методов защиты конфиденциальности – например, изменяющееся модификация цифрового шаблона после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – единственная из самых интересных технологий нашего времени! Она делает общение со телефоном проще чем до этого, и такие программы, как vulkan russia, могут в разы оптимизировать ваш пользовательский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы понимаете, как работает эта методика в деталях, – сможете вдумчиво выбирать свой очередной гаджет!