Как работает распознавание лиц в мобильных устройствах

Для чего мы выбираем разблокировку по лицевому распознаванию

В прошлые времена идентификация лиц превратилось в одной из наиболее востребованных функций для разблокировки смартфонов. Еще несколько годков ранее основная масса пользователей обходились пин-кодами, паролями или сканерами отпечатков пальцев. Но при появлением подобных технологий, например Вулкан Платинум, нам достаточно просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Какая вещь делает эту конкретную возможность такой востребованной? Прежде всего, это комфортно: не нужно помнить замысловатые пароли или отыскивать нужный палец в тьме. Также, это оперативно: современные системы распознают лицо буквально за мгновение. В-третью очередь, это ощущение футуристичности — словно в фильмах про Вулкан казино разведчиков.

Тем не менее за такой кажущейся несложностью прячется полный универсум трудных техник и инженерных концепций. Давайте разобраться, как конкретно функционирует фейсканирование в современных смартфонах, какие применяются технологии, насколько они безопасны и что нас ждёт впереди.

Краткая повествование эволюции инноваций

Идентификация лиц как методика существует уже более пятидесяти лет. Изначальные попытки автоматического исследования облика были осуществлены еще в 1960-х годы в исследовательских центрах США. Тогда вычислительные машины способны были лишь определять силуэты головы и измерять промежутки между очами и устами на черно-белых фотографиях.

Первые торговые установки возникли в 90-х, но они были неидеальны: работали медленно и нередко ошибались. Только с эволюцией искусственных сетей и таких платформ, как Vulkan Platinum, мощных мобильных чипов идентификация лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным распознаванием лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали внедрять личные решения.

Основные стадии функционирования системы определения

Процесс идентификации лица можно примерно сегментировать на несколько ключевых этапов:

1. Идентификация лиц — устройство определяет присутствие гуманного образа в кадре.
2. Извлечение признаков — алгоритм исследует контуры физиономии: форму зрительных органов, обонятельного органа, губ, позицию надбровных дуг.
3. Построение структуры — создаётся особенный цифровой отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с эталоном — сформированный модель сопоставляется со зафиксированной при внесении биометрической сведениями владельца.
5. Принятие определения — если сходство достаточно высокое, смартфон деблокируется.

Любой из этих этапов нуждается в особых методов и улучшений для оперативной работы прямо на устройстве.

Аппаратные элементы: что скрыто внутри них

Обычная селфи камера.

Наиболее простой метод определения физиономии использует только лицевую камеру мобильного устройства. Данный способ внедрён во многочисленных доступных вариантах Android-устройств.

Положительные стороны:

• Не нуждается в требует внешних датчиков.
• Оперативно действует при достаточном освещении.

Слабые стороны:

• Несложно одурачить изображением или видео.
• Плохо работает при низком освещённости или необычных точках зрения.

ИК камера и точечный проекционный аппарат

Более усовершенствованные системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика является основой Face ID от Apple.

Каким способом это работает:

• Точечный устройство проекции отображает на облик использующего невидимую структуру из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 точек).
• Инфракрасная камера фиксирует искривление этой сетки по плоскости физиономии.
• Создаётся трёхмерная глубинная карта глубины, которая практически невозможна для имитации обычной фото или маской.

Выигрыши

• Надёжная функционирование даже в полной темноте.
• Сильная сопротивляемость к фальсификациям.
• Точность распознавания свыше 99%.

Добавочные датчики

В отдельных девайсах применяются также дополнительные сенсоры: ToF (Time-of-Flight), которые определяют период распространения света до предмета и обратно; Цветные-датчики глубины; специальные световые дальномеры для формирования более аккуратной 3D-модели лица.

Эти технологии используются чаще всего во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: синтетический интеллект на действии

Текущие устройства распознавания физиономий неосуществимы без использования ИИ и машинного обучения. Именно из-за таким технологиям, как Vulkan Platinum, гаджет в состоянии распознавать пользователя даже при изменениях облика: новая стрижка, борода, очки или косметика не становятся барьером для открытия.

Распознавание физиономии

При стартовом шаге система должна мгновенно обнаружить лицо среди всего кадра камеры. Для данной цели задействуются последовательные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые подготовлены распознавать лица людей среди множества других объектов.

Пример: процесс MTCNN может обнаруживать лицо даже с неполном перекрытии (например, платком или рукой).

Выделение основных точек

После идентификации лица механизм, такая как Vulkan Platinum, определяет местоположение главных точек: уголки глаз, конец носа, края губ и так далее. Часто задействуется от 68 до 128 главных точек на лицевой поверхности.

Данное требуется для выравнивания визуала: если человек удерживает телефон под наклоном, или повернул головку, программа исправляет картинку до нормального состояния для последующего изучения.

Построение биометрического шаблона

Далее искусственная сеть строит сжатое числовое представление ("эмбеддинг") внешности пользователя — своеобразный цифровой след внешности длиной от 128 до 512 флоатов.

Такой образец очень затруднительно подделать: он не сохраняет непосредственно фото пользователя, а лишь уникальные характеристики его внешности, что делает его оптимальным для таких площадок, как Вулкан Казино Платинум.

Сравнение и принятие выбора

Когда пользователь хочет разлочить телефон взглядом, система воспроизводит все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный границу (обычно выше 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ запрещается.

Приспособление к метаморфозам внешнего вида

Увлекательная черта современных систем — возможность самообучения. Если ты часто открываете смартфон с новой прической или очками, программа постепенно обновляет базовый модель вашего внешности для улучшения точности функционирования без снижения уровня безопасности.

Охрана биометрических данных данных.

Большинство клиенты боятся держать свои био-идентификационные данные на телефоне из-за угрозы утечки информации или взлома устройства. Некоторые компании, вроде Вулкан Казино Платинум, предлагают варианты для увеличения сохранности сведений пользователей.

• Локальное сбережение: Преимущественно аппаратов записывает био-идентификационные модели лишь внутрь защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не оставляют аппарат и закрыты в том числе создателю.

• Шифрование: Все информация сберегаются только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Приложения внешних разработчиков не имеют прямого доступа к биометрическим; они могут лишь требовать факт верификации личности через системный API.

Стоит упомянуть существенную деталь: в случае, если кто-то сможет получить доступ к вашему телефону физически (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество производители осуществляют защиту от автоматического разблокирования — например, просят открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают виды определения лиц?

В настоящее время можно выделить определить три главных метода к осуществлению этой функции:

Программируемое двухмерное идентификация

Применяется только передняя камера без экстра сенсоров глубины. Этот метод используется чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость реализации; низкая цена; скоростная функционирование при хорошем освещении.
Минусы: несложно одурачить снимком; нестабильная деятельность ночью; недостаточная охрана.

Аппаратное 3D сканирование

Применяет инфракрасную видеокамеру + проектор точек + датчики дистанции (Face ID от Apple; аналогичные решения у Huawei Mate).
Плюсы: большая надёжность; нельзя исказить фото/видео; устойчивая работа в любых условиях освещения.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана ("чёлка")

Комбинированные методы с интеграцией ИИ

Используют комбинацию программных методов + техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам ("anti-spoofing"). Например, такие товары, например Vulkan Platinum и Google Pixel Face Unlock современных версий, сочетают фронтальную камеру c инфракрасным датчиком движения Soli Radar для защиты от фальсификаций жестами/масками/видеодисплеями посторонних устройств.

Примеры применения разных способов

• iPhone линейки X/11/12/13/14 задействуют только физическое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition в первый раз внедрил подобие Face ID среди Android.
• Samsung Galaxy S10 модель/S20 имеют как программное обеспечение плоское определение по изображению фронтальной камерой, так и сенсор глазного ириса.
• Huawei Mate20 Pro использует комплекс из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Трудности защиты и неверные срабатывания

Несмотря на замечательный развитие техники за недавние лет, безупречных механизмов пока не наблюдается:

1. Шанс мошенничества: Бюджетные мобильники легко доступны высококачественной фотографией владельца или видеозаписью с дисплея иного гаджета.
2. Идентичные близнецы: Даже самые совершенные системы могут спутать между однояйцевыми близнецами либо родственниками с очень схожей внешностью.
3. Изменения внешности: Стремительное утрата веса/увеличение массы тела, хирургические вмешательства либо травмы иногда необходимы для перерегистрации биометрии.
4. Условия фотографирования: Интенсивная подсветка солнцем либо плотная тень могут снизить аккуратность идентификации признаков.

Вот несколько советов для надёжному эксплуатации:

• Для значимых операций всегда применяйте двухэтапную аутентификацию;
• Не включайте функцию "Разблокировка по лицу" на недорогих устройствах без ИК-сенсоров;
• Систематически обновляйте прошивку телефона для обеспечения безопасности от актуальных атак;
• Включайте настройку "Требовать открытых глаз" в тех местах, где она доступна.

В каких областях ещё находится применение технологии кроме смартфонов?

Несмотря на то, что основная мысль данной работы посвящена именно мобильным устройствам, стоит упомянуть о прочих направлениях внедрения технологии:

• Мониторинг входа в рабочих помещениях и многоквартирных зданиях;
• Платёжные терминалы банков ("Face Pay");
• Цифровые удостоверения личности современного образца;
• Системы видеомониторинга городских служб;
• Автоматизирование регистрации присутствия учебных заведений/институтов;
• Вход пользователей ПК/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по лицу ("Face Pay") — нужно лишь пройти через барьер без карты или телефона! Схожие инициативы реализуются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Как меняется техпроцесс в нынешнее время?

Любой годочек проявляются новые идеи для повышения качества функционирования систем лицевого распознавания:

1. Увеличивается чёткость сенсорных устройств — чем больше деталей фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность ошибки;
2. Совершенствуются нейронные сети — передовые конструкции модели MobileNetV3 дают возможность оперативно адаптироваться к свежим чертам облика пользователя прямо на устройстве без пересылки информации в облачное хранилище.
3. Улучшаются методы антиспуфинга — теперь телефоны умеют различать реальные анимированные лица от фиксированных фото/масок по мельчайшим движениям кожи.
4. Синхронизация со смарт-гаджетами — умные часы могут авто блокировать смартфон, если владелец ушёл далеко.
5. Появляются гибридные механизмы — в частности совмещающие речевую аутентификацию + облик + пальцевой отпечаток.

Здесь, какие направления особенно востребованы в данный момент:

1) Сокращение компонентов

Компании стараются минимизировать габариты выреза ("чёлки") под датчики на дисплее за счёт интеграции маленьких ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Переработка прямо на устройстве

Для повышения личной безопасности всё больше вычислений осуществляется на месте без передачи данных во внешний облачный сервис.

3) Упорядочивание норм

Гугл интенсивно пропагандирует норму BiometricPrompt API, с целью чтобы такие площадки, например как Вулкан Платинум, и любые Android-аппы могли работать с любыми видами биометрии унифицированно.

Какое выбрать на сегодня?

Когда вам всем необходима предельная защита данных, остановите выбор на флагманские устройства с вмонтированным ИК-проектором либо ToF-датчиком глубины.

• iPhone всех новейших поколений
• Huawei Mate/P ряда
• Mi Pro
• Vivo X серии
• Оппо Найти Икс серий.

Если финансы скромен – лучше выбирать обычным средствам защиты (PIN-код/сканер отпечатка), а опцию "разблокировка по лицу", такую как в Вулкан Платинум, задействовать только как дополнительную опцию удобства.

Каким образом увеличить практичность использования возможности?

Есть пара советов для людей, кто уже пользуется функцию распознавания лица:

1. Периодически меняйте свою изображение-шаблон, если сильно меняется внешний вид.
2. Не забывайте чистить линзу передней камеры – загрязнения могут понизить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам включает камеру когда вы поднимаете его.
4. Во время записи пытайтесь держать лицевую часть ровно напротив видеоустройства без сильного наклона головы.
5. Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отвели взгляд от дисплея.

Будущее развития технологии

В предстоящие годы можно предвкушать развития полностью безконтактных способов идентификации персоны сразу по нескольким биометрическим параметрам одновременно: облик + звучание + походка + манипуляции руками!

Также предполагается развитие новых подходов обеспечения конфиденциальности – к примеру, изменяющееся корректировка диджитал шаблона после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых захватывающих техник нашего периода! Она обеспечивает общение со телефоном удобнее чем когда-либо прежде, и такие аппы, как Вулкан Казино Платинум, могут в разы оптимизировать ваш юзерский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы знаете, как функционирует эта система в деталях, – сумеете более осмысленно определять свой следующий гаджет!