Каким образом действует распознавание лицевых образов в мобильных устройствах

Для чего мы останавливаемся на разблокирование по фейсу

В прошлые времена идентификация лиц превратилось в одной из наиболее востребованных опций для открытия мобильных телефонов. Лишь пару лет ранее основная часть юзеров довольствовались пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но при появлением подобных технологий, например Вулкан Платинум, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какая вещь превращает эту конкретную возможность настолько популярной? Для начала, это комфортно: не нужно помнить трудные пароли или искать нужный палец в тьме. Также, это мгновенно: современные алгоритмы идентифицируют лицо фактически за мгновение. В-третьем пункте, это ощущение будущего — будто в кинолентах про вулкан платинум разведчиков.

Однако за этой кажущейся несложностью таится полный вселенная комплексных методов и инженерных разработок. Давайте разобраться, как точно действует распознавание лиц в новейших гаджетах, какие бывают технологии, насколько они надёжны и что нас предстоит.

Короткая хроника эволюции технологии

Распознавание лиц как техника присутствует уже более пятидесяти лет. Первые попытки автоматического изучения лица были сделаны еще в 1960-х годы в лабораториях США. Тогда вычислительные машины способны были лишь определять очертания черепа и измерять промежутки между зрачками и ртом на монохромных фотографиях.

Начальные бизнес установки стали доступны в 90-х, но они были далеки от совершенства: действовали неспешно и часто давали сбои. Только с прогрессом нейронных сетей и таких платформ, как Vulkan Platinum, мощных мобильных микросхем распознавание лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с достоверным трёхмерным сканированием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и прочие начали внедрять свои решения.

Ключевые этапы работы механизма распознавания

Процесс определения лица можно условно поделить на несколько ключевых этапов:

Обнаружение лица — камера определяет присутствие человеческого образа в кадре.
Выделение характеристик — система исследует черты физиономии: конфигурацию глаз, носа, губ, позицию бровей.
Построение структуры — создаётся особенный цифровой отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение с эталоном — полученный модель сопоставляется с зафиксированной при регистрации биометрической данными владельца.
Принятие выбора — если соответствие достаточно значительное, смартфон разблокируется.

Каждый из данных этапов запрашивает специальных алгоритмов и улучшений для скорой работы прямо на устройстве.

Технические компоненты: что прячется в их недрах

Обычная передняя камера.

Простейший простой метод определения физиономии задействует исключительно переднюю камеру мобильного устройства. Такой способ реализован во многих бюджетных версиях Android-девайсов.

Плюсы:

Не нуждается в дополнительных датчиков.
Оперативно работает при достаточном освещённости.

Минусы:

Просто ввести в заблуждение изображением или видео.
Плохо работает при плохом свете или непривычных точках зрения.

ИК фотокамера и пунктирный проектор

Более усовершенствованные системы, такие как Vulkan Platinum, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика составляет базу Face ID от Apple.

Каким образом это работает:

Точечный проектор показывает на физиономию пользователя невидимую сетку из тысяч инфракрасных точек (например, Face ID задействует около 30 000 меток).
ИК устройство записывает искривление этой решетки по плоскости физиономии.
Получается 3D карта глубинности, которая практически неподвластна для имитации типичной снимком или маской.

Достоинства

Надёжная деятельность даже в полной неосвещённости.
Высокая сопротивляемость к подделкам.
Точность определения выше 99%.

Дополнительные сенсоры

В некоторых устройствах применяются также экстра сенсоры: ToF (Time-of-Flight), которые фиксируют время движения света до цели и обратно; Цветные-датчики дальности; специальные лазерные дальномеры для построения более аккуратной 3D-модели физиономии.

Эти разработки встречаются наиболее часто во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: искуственный разум на работе

Текущие системы идентификации лиц немыслимы без применения ИИ и машинного обучения. Именно из-за таким технологиям, как Vulkan Platinum, гаджет может идентифицировать юзера даже при метаморфозах облика: новая стрижка, растительность на лице, очки или макияж не становятся препятствием для разблокировки.

Распознавание лиц

На начальном этапе программа должна быстро обнаружить ликовое изображение среди полного кадра камеры. Для данной цели используются многоуровневые классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые натренированы распознавать человеческие лица среди множества других объектов.

Пример: процесс MTCNN в состоянии распознавать физиономию даже в случае частичном перекрытии (например, шарфом или ладонью).

Идентификация важных точек

После идентификации лица механизм, такая как Vulkan Platinum, вычисляет местоположение основных точек: края глаз, конец носа, края губ и так далее. Часто задействуется от 68 до 128 ключевых меток на лице.

Это действие требуется для стабилизации изображения: если юзер находится с мобильник под углом, или наклонил головку, программа корректирует изображение до стандартного положения для дальнейшего анализа.

Создание биометрического образца

Далее искусственная сеть строит компактное цифровое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ лица длиной от 128 до 512 вещественных чисел.

Данный формат крайне затруднительно имитировать: он не хранит само картинку юзера, а лишь особенные особенности его вида, что делает его совершенным для таких площадок, как Вулкан Казино Платинум.

Сопоставление и вынесение решения

В случае, когда пользователь намеревается разлочить телефон глазами, механизм осуществляет все описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый границу (обычно превышает 99%), телефон, как и платформа Вулкан Казино Платинум, разблокируется; если нет — доступ запрещается.

Привыкание к изменениям внешнего вида

Занимательная характеристика современных системы — возможность самостоятельного обучения. Если вы постоянно доступаете к смартфон с новой прической или очками, алгоритм постепенно модернизирует основной шаблон вашего лица для повышения точности работы без ухудшения безопасности.

Безопасность биометрии информации.

Большинство пользователи опасаются сохранять свои био-идентификационные данные на телефоне из-за вероятности утечки данных или взлома устройства. Иные фирмы, вроде Вулкан Казино Платинум, предлагают методы для улучшения защиты данных клиентов.

Локальное сохранение: Преимущественно девайсов записывает био-идентификационные модели исключительно в пределах безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они никогда не покидают гаджет и не доступны даже изготовителю.
Шифрование: Все информация сохраняются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция приложений: Приложения сторонних девелоперов не имеют непосредственного возможности доступа к биометрическим данным; они могут лишь требовать факт верификации личности через системный API.

Следует подчеркнуть существенную деталь: если какой-то человек сможет получить физический доступ к вашему телефону (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие изготовители внедряют систему защиты от неосознанного разблокирования — например, требуют раскрыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают виды определения лиц?

В настоящее время можно определить выделить три основных метода к реализации этой функции:

Софтверное плоское идентификация

Применяется только лицевая камера без вспомогательных сенсоров дистанции. Этот метод используется обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота воплощения; минимальная цена; оперативная функционирование при достаточном свете.
Минусы: несложно обмануть снимком; ненадежная функционирование ночью; низкая защищенность.

Оборудование для трёхмерное сканирование

Применяет инфракрасную видеокамеру + проекционный модуль точек + датчики глубины (Face ID у Apple; подобные решения у Huawei Mate).
Достоинства: высокая надёжность; не получится исказить фото/видео; постоянная функционирование в любых условиях освещения.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Комбинированные методы с дополнением ИИ

Задействуют комбинацию программируемых методов + аппаратную обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие товары, как Vulkan Platinum и Google Pixel Face Unlock новейших версий, комбинируют фронтальную камеру c инфракрасным сенсором движения Soli Radar для предотвращения от фальсификаций руками/масками/видеодисплеями посторонних устройств.

Образцы использования разных методов

iPhone линейки X/11/12/13/14 задействуют только аппаратное трёхмерное сканирование
Xiaomi Mi8 Explorer Edition впервые предложил подобие Face ID в числе Android.
Samsung Galaxy S10 версия/S20 поддерживают как программное обеспечение плоское распознавание по снимку фронталкой, так и датчик ириса глаза.
Huawei Mate20 Pro использует комплекс из ИК-освещения + Dot Projector + ToF-датчик

Вопросы защиты и ошибочные тревоги

Несмотря на впечатляющий успехи инноваций за недавние лет, совершенных механизмов пока не имеется:

Вероятность обмана: Бюджетные телефоны легко “разблокируются” качественной изображением хозяина или видеозаписью с дисплея иного гаджета.
Идентичные двойняшки: Даже самые безупречные устройства могут спутать между однояйцевыми близнецами либо родственниками с очень аналогичной внешностью.
Метаморфозы облика: Резкое снижение веса/увеличение массы тела, хирургические вмешательства либо травмы иногда требуют повторной регистрации биометрических данных.
Условия фотографирования: Сильная подсветка солнечным светом либо глубокая тень могут понизить верность определения признаков.

Ниже несколько подсказок для надёжному использованию:

Для критически важных операций всегда используйте двухфакторную аутентификацию;
Не включайте функцию “Разблокировка по лицу” на бюджетных моделях без ИК-сенсоров;
Регулярно апгрейдите ПО мобильного устройства для предотвращения угроз от новых видов атак;
Включайте опцию “Требовать раскрытых глаз” там, где она имеется.

В каких областях также находится применение технология за исключением смартфонов?

Хотя тема данной публикации касается конкретно смартфонам и планшетам, необходимо сказать о альтернативных областях использования технологии:

Управление прохода в рабочих помещениях и резиденциях;
Платёжные устройства финансовых учреждений (“Face Pay”);
Виртуальные удостоверения личности современного образца;
Комплексы видеомониторинга городских подразделений;
Автоматизирование регистрации явки учебных заведений/университетов;
Вход участников ПК/ноутбуков.

Например: В городском метро уже тестируется система оплаты проезда по лицу (“Face Pay”) — нужно лишь пройти через барьер без пластика или мобильника! Аналогичные проекты развиваются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким способом меняется техпроцесс в нынешнее время?

Любой годик возникают новые концепции для повышения стандарта деятельности систем идентификации лиц:

Увеличивается детализация сенсорных устройств — чем больше деталей фиксируется видеокамерой/глубинными сенсорами, тем меньше риск погрешности;
Улучшаются нейронные сети — новейшие структуры вида MobileNetV3 обеспечивают возможность скоростно адаптироваться к новым характеристикам вида обладателя непосредственно на девайсе без отправки данных в облако.
Совершенствуются способы антиспуфинга — теперь смартфоны умеют отличать настоящие движущиеся облики от статичных фотографий/маскировок по незаметным движениям кожи.
Синхронизация со смарт-гаджетами — умные часы могут самостоятельно заблокировать мобильный телефон, если пользователь ушёл далеко.
Появляются комбинированные системы — к примеру объединяющие речевую идентификацию + облик + дактилоскопический след.

Итак, какие тенденции особенно актуальны сейчас:

1) Сокращение компонентов

Изготовители пытаются минимизировать величину выреза (“чёлки”) для датчики на экране за счёт интеграции миниатюрных ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на аппарате

Для увеличения конфиденциальности всё больше обработки данных выполняется на месте без передачи информации во дополнительный облачный услугу.

3) Упорядочивание норм

Гугл интенсивно пропагандирует стандарт BiometricPrompt API, для того чтобы такие системы, вроде Вулкан Платинум, и любые Android-приложения были совместимы с различными типами биометрии унифицированно.

Что решить на сегодня?

Если вам нужна предельная безопасность информации, остановите выбор на передовые модели с интегрированным ИК-проектором или же ToF-сенсором глубины.

iPhone каждого актуальных моделей
Huawei Partner/P Series серии
Mi Expert
Vivo X модели
Oppo Найти X линейки.

Если финансы скромен – лучше выбирать обычным методам безопасности (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в Вулкан Платинум, использовать только как опциональную возможность удобства.

Каким образом улучшить комфорт функционирования опции?

Есть некоторые лайфхаков для тех, кто уже применяет разблокировку через лицо:

Периодически обновляйте свою фотографию-шаблон, если сильно меняется облик.
Не пренебрегайте чистить объектив передней камеры – загрязнения могут уменьшить точность!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам включает фотоаппарат если вы берёте его в руки.
Во время регистрационного процесса старайтесь сохранять голову ровно перед объектива исключая значительного наклона головы.
Используйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отвернулись от экрана.

Будущее развития инноваций

В ближайшие периоды можно предвкушать возникновения полностью безконтактных способов распознавания человека сразу по нескольким биометрическим данным параметрам одновременно: облик + речь + манера ходьбы + движения рук!

Также возможно возникновение современных способов защиты личной информации – к примеру, динамическое корректировка электронного образца после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из самых интересных техник нашего времени! Она предоставляет интеракцию со смартфоном комфортнее чем до этого, и такие аппы, как Вулкан Казино Платинум, могут в разы повысить ваш опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы осведомлены, как функционирует эта методика внутри, – сумеете осознаннее определять свой очередной гаджет!