Каким образом функционирует определение лиц в мобильных устройствах

Для чего мы останавливаемся на разблокирование по лицевому распознаванию

В недавние времена распознавание лиц стало одной из наиболее востребованных опций для открытия смартфонов. Еще некоторые годков ранее основная масса юзеров довольствовались пин-кодами, паролями или сканерами отпечатков пальцев. Но с появлением таких технологий, как вулкан россия, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какой аспект превращает эту возможность такой востребованной? Прежде всего, это удобно: не нужно запоминать замысловатые пароли или находить верный палец в мраке. Кроме того, это мгновенно: современные системы узнают лицо буквально за мгновение. В-третью очередь, это чувство будущего — словно в кинофильмах про вулкан казино агентов.

Однако за этой на первый взгляд несложностью прячется весь мир трудных методов и инженерных концепций. Попробуем разобраться, как именно действует идентификация по лицу в новейших смартфонах, какие бывают способы, насколько они защищены и что нас предстоит.

Краткая история эволюции техники

Идентификация лиц как технология присутствует уже более пятидесяти годов. Начальные попытки автоматического изучения лица были сделаны еще в 1960-х годы в научных учреждениях США. Тогда компьютеры умели лишь определять контуры черепа и измерять дистанции между очами и ртом на монохромных изображениях.

Начальные торговые платформы стали доступны в 1990-х годах, но они были неидеальны: функционировали медленно и часто давали сбои. Только с эволюцией нейронных сетей и таких площадок, как вулкан россии, высокопроизводительных мобильных микросхем определение лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным распознаванием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали внедрять личные решения.

Главные стадии функционирования механизма распознавания

Процесс идентификации лица можно ориентировочно сегментировать на несколько ключевых этапов:

1. Распознавание лица — устройство определяет присутствие гуманного образа в снимке.
2. Определение особенностей — система изучает контуры физиономии: очертания зрительных органов, носа, губ, позицию бровей.
3. Построение модели — создаётся уникальный цифровой отпечаток (faceprint) на основе определённых признаков.
4. Сравнение со образцом — созданный образец сверяется со сохранённой при учёте биометрической данными владельца.
5. Принятие определения — если соответствие достаточно существенное, смартфон открывается.

Каждый из указанных шагов запрашивает особых алгоритмов и оптимизаций для быстрой работы прямо на устройстве.

Аппаратные составляющие: что находится внутри них

Обычная передняя камера.

Самый простой вариант определения облика задействует лишь переднюю камеру смартфона мобильного устройства. Такой подход реализован во различных бюджетных вариантах Android-девайсов.

Преимущества:

• Не нуждается в нуждается в дополнительных датчиков.
• Быстро работает при достаточном свете.

Отрицательные стороны:

• Легко ввести в заблуждение снимком или роликом.
• Неправильно работает при плохом свете или непривычных ракурсах.

Инфракрасная камера и пунктирный проектор

Более совершенные системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс является основой Face ID от Apple.

Как это работает:

• Точечный проектор проецирует на облик юзера невидимую сетку из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 меток).
• Инфракрасная камера записывает изменение формы данной сетки по плоскости лица.
• Создаётся 3D глубинная карта глубины, что почти что неподвластна для подделки стандартной фотографией или маскировкой.

Выигрыши

• Надёжная работа даже в полной тьме.
• Сильная сопротивляемость к фальсификациям.
• Точность определения свыше 99%.

Дополнительные сенсорные устройства

В определённых девайсах используются также вспомогательные сенсоры: ToF (Time-of-Flight), которые фиксируют период распространения луча до предмета и обратно; Цветные-датчики глубины; специальные оптические измерители расстояния для построения более аккуратной 3D-модели лица.

Эти технологии используются чаще всего во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: искусственный разум в исполнении

Текущие устройства опознания физиономий неосуществимы при отсутствии использования искусственного интеллекта и machine learning. Именно благодаря таким разработкам, как вулкан россии, устройство может распознавать пользователя даже при трансформациях внешнего вида: новая стрижка, щетина, оптика или грим не становятся помехой для деблокировки.

Обнаружение физиономии

В первом шаге программа должна мгновенно найти лицо в пределах всего кадра камеры. Для этого применяются каскадные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые “обучены” распознавать лица людей среди множества других объектов.

Пример: алгоритм MTCNN в состоянии находить лицо даже с частичном перекрытии (например, платком или ладонью).

Выделение основных моментов

После идентификации лица механизм, такая как вулкан россии, определяет расположение ключевых точек: края глаз, верхушка носа, края губ и так далее. Часто применяется от 68 до 128 ключевых маркеров на лицевой области.

Данное необходимо для выравнивания визуала: если юзер держит мобильник под углом, или наклонил головку, программа исправляет изображение до обычного угла для последующего изучения.

Построение биометрического идентификатора образца

Далее нейросеть строит компактное математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след внешности длиной от 128 до 512 чисел с плавающей запятой.

Данный формат очень затруднительно имитировать: он не хранит само фото юзера, а лишь исключительные характеристики его вида, что делает его идеальным для таких площадок, как vulkan russia.

Сравнительный анализ и осуществление решения

Если пользователь хочет разблокировать телефон взглядом, механизм воспроизводит все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый границу (обычно выше 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ блокируется.

Привыкание к метаморфозам внешнего вида

Интересная черта современных систем — способность самообучения. Если вы постоянно доступаете к телефон с новой стрижкой или очками, система постепенно обновляет основной образец вашего лица для повышения точности работы без снижения уровня безопасности.

Безопасность биометрических данных.

Многие пользователи беспокоятся сохранять свои биометрические идентификационные данные на смартфоне из-за вероятности потери данных или взлома устройства. Некоторые фирмы, вроде vulkan russia, предлагают методы для повышения сохранности данных клиентов.

• Локальное сохранение: Основная часть устройств записывает биометричные образцы только внутри защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Они никогда не оставляют аппарат и недоступны включая производителю.

• Шифрование: Все сведения сохраняются только в кодированном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Приложения сторонних девелоперов не имеют непосредственного возможности доступа к биометрическим; они могут лишь требовать факт верификации идентичности через системный API.

Необходимо упомянуть значимую подробность: в случае, если кто-то получит доступ к вашему телефону физически (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество производители осуществляют систему защиты от неосознанного разблокирования — к примеру, заставляют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают категории идентификации лиц?

Сегодня можно выделить выделить три основных способа к реализации этой операции:

Программное двухмерное определение

Применяется только фронтальная видеокамера без экстра датчиков глубины. Подобный метод наблюдается обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: простота воплощения; минимальная затраты; быстрая работа при хорошем освещении.
Минусы: легко ввести в заблуждение фотографией; ненадежная работа ночью; низкая безопасность.

Техническое объёмное сканирование

Задействует инфракрасную видеокамеру + проекционный модуль пикселей + сенсоры дистанции (Face ID у Apple; подобные решения у Huawei Mate).
Преимущества: большая надёжность; невозможно исказить фото/видео; стабильная функционирование при любом освещении.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с дополнением ИИ

Задействуют комбинацию программных методов + техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, например вулкан россии и Google Pixel Face Unlock последних версий, сочетают фронтальную камеру c ИК датчиком движения Soli Radar для предотвращения от фальсификаций жестами/масками/видеоэкранами посторонних устройств.

Образцы применения разных методов

• iPhone линейки X/11/12/13/14 применяют только техническое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition впервые представил эквивалент Face ID в ряду Android.
• Samsung Galaxy S10 модель/S20 обеспечивают как программное обеспечение 2D определение по фото селфи-камерой, так и сенсор радужки глаза.
• Huawei Mate20 Pro задействует комплекс из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Проблемы защиты и ошибочные срабатывания

Несмотря на впечатляющий прогресс техники за прошедшие годы, идеальных системы пока не имеется:

1. Шанс подвоха: Недорогие мобильники легко доступны четкой снимком пользователя или видео с экрана другого устройства.
2. Идентичные двойняшки: Даже самые идеальные механизмы могут спутать между монозиготными близнецами либо родичами с очень схожей внешностью.
3. Метаморфозы внешнего вида: Резкое утрата веса/увеличение массы тела, пластические операции или травмы в некоторых случаях необходимы для повторной регистрации биометрии.
4. Условия съёмки: Яркая засветка солнечным светом либо плотная затенение могут снизить точность распознавания признаков.

Ниже пара советов для безопасному использованию:

• Для значимых операций всегда внедряйте двухэтапную аутентификацию;
• Не включайте возможность “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
• Постоянно обновляйте прошивку смартфона для обеспечения безопасности от новых видов атак;
• Включайте настройку “Требовать распахнутых глаз” в тех местах, где она доступна.

В каких областях дополнительно применяется технология помимо смартфонов?

Хотя основная мысль этой работы посвящена именно мобильным устройствам, следует отметить альтернативных областях использования технологии:

• Мониторинг доступа в деловых центрах и многоквартирных зданиях;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Электронные удостоверения личности последнего образца;
• Установки видеомониторинга муниципальных сервисов;
• Автоматизирование отслеживания явки образовательных учреждений/вузов;
• Вход юзеров компьютеров/ноутбуков.

Например: В городском метро уже испытывается система платежа проезда по лицу (“Face Pay”) — достаточно пройти через барьер без карты или мобильника! Схожие проекты реализуются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Как изменяется технический процесс в наше время?

Каждый годик проявляются свежие мысли для усовершенствования стандарта работы систем лицевого распознавания:

1. Увеличивается разрешение датчиков — чем больше информации фиксируется фотоаппаратом/глубинными сенсорами, тем меньше вероятность неточности;
2. Улучшаются нейросети — современные структуры вида MobileNetV3 обеспечивают возможность оперативно адаптироваться к дополнительным характеристикам внешности пользователя прямо на устройстве без отправки данных в облако.
3. Совершенствуются методы антиспуфинга — теперь смартфоны умеют распознавать настоящие анимированные лица от фиксированных фотографий/масок по мельчайшим микродвижениям.
4. Интеграция со интеллектуальными приборами — смарт-часы могут самостоятельно закрыть доступ к мобильный телефон, если пользователь удалился на значительное расстояние.
5. Возникают комбинированные механизмы — в частности объединяющие голосовую идентификацию + облик + пальцевой отпечаток.

Здесь, какие тренды очень актуальны сейчас:

1) Миниатюризация компонентов

Изготовители пытаются сократить размер отверстия (“чёлки”) под сенсоры на экране за счёт интеграции компактных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработывание прямо на аппарате

Для улучшения конфиденциальности всё более вычислений выполняется локально без отправки информации во сторонний облачный сервис.

3) Унификация стандартов

Гугл интенсивно продвигает стандарт BiometricPrompt API, чтобы такие платформы, вроде вулкан россия, и все Android-аппы могли работать с всеми формами биометрии стандартизированно.

Какое подобрать на сегодня?

Когда вам всем нужна максимальная сохранность информации, выбирайте передовые аппараты с интегрированным ИК-излучателем либо ToF-датчиком глубины.

• iPhone всех существующих новейших поколений
• Huawei Mate/P Series линейки
• Mi Professional
• Vivo X модели
• Оппо Обнаружить X линейки.

Если средства скромен – лучше отдавать предпочтение традиционным методам безопасности (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в вулкан россия, применять только как дополнительную возможность комфорта.

Каким образом повысить комфорт использования возможности?

Есть пара хитростей для людей, кто уже применяет функцию распознавания лица:

1. Регулярно обновляйте свою фотографию-шаблон, если кардинально меняется облик.
2. Не упускайте из виду очищать объектив фронтальной камеры – пятна могут снизить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам включает фотоаппарат если вы поднимаете его.
4. При регистрационного процесса старайтесь удерживать лицо ровно перед видеоустройства не допуская резкого наклона головы.
5. Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отворачиваетесь от экрана.

Перспективы прогресса техники

В ближайшие годы можно предполагать развития полностью дистанционных способов распознавания индивидуума сразу по нескольким биометрическим данным параметрам одновременно: облик + голос + походка + манипуляции руками!

Также вероятно возникновение новых подходов защиты личной информации – например, изменяющееся изменение электронного паттерна после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – одна из очень захватывающих техник нашего периода! Она обеспечивает интеракцию со мобильным устройством комфортнее чем когда-либо прежде, и такие приложения, как vulkan russia, могут значительно повысить ваш пользовательский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы знаете, как функционирует эта методика внутри, – будете в состоянии вдумчиво определять свой очередной устройство!