Каким образом действует распознавание лиц в мобильных устройствах

Для чего мы выбираем разблокирование по лицу

В прошлые годы распознавание лиц превратилось в одной из самых популярных опций для деблокировки смартфонов. Всего несколько годов тому назад основная масса использующих довольствовались PIN-кодами, секретными кодами или датчиками отпечатков пальцев. Но при появлением подобных технологий, как вулкан россия, нам вполне просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какой аспект делает эту конкретную особенность настолько популярной? Прежде всего, это удобно: не нужно помнить сложные пароли или отыскивать верный палец в тьме. Во-вторых, это быстро: современные системы идентифицируют лицо буквально за мгновения ока. В-третьем пункте, это впечатление будущего — будто в кинофильмах про вулкан россия разведчиков.

Впрочем за данной видимой простотой прячется полный вселенная комплексных методов и инженерных концепций. Давайте разобраться, как конкретно работает фейсканирование в актуальных мобильных телефонах, какие существуют способы, насколько они безопасны и что нас предстоит.

Сжатая повествование эволюции техники

Распознавание лиц как техника существует уже более 50 годов. Начальные попытки автоматического анализа лиц были осуществлены еще в 1960-х годах в научных учреждениях США. Тогда компьютеры способны были лишь обозначать силуэты головы и определять промежутки между зрачками и губами на ахроматических фотографиях.

Изначальные коммерческие платформы стали доступны в девяностых годах, но они были неидеальны: работали медленно и часто ошибались. Только с развитием нейронных сетей и таких платформ, как вулкан россии, высокопроизводительных мобильных чипов определение лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным сканированием лица. За этим последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали интегрировать собственные решения.

Главные стадии действия устройства распознавания

Процесс распознавания лица можно условно разделить на несколько основных этапов:

Распознавание лиц — аппарат распознает существование человеческого образа в изображении.
Выделение особенностей — механизм изучает черты облика: конфигурацию зрительных органов, носа, уст, расположение бровей.
Построение шаблона — создаётся уникальный виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение с стандартом — сформированный модель сравнивается с зафиксированной при учёте биометрической сведениями владельца.
Принятие определения — если соответствие достаточно существенное, смартфон открывается.

Всякий из этих этапов требует индивидуальных процедур и улучшений для быстрой работы непосредственно на девайсе.

Аппаратные составляющие: что прячется в их недрах

Стандартная передняя камера.

Самый простой метод идентификации физиономии использует лишь лицевую камеру мобильного устройства. Подобный способ внедрён во многих доступных версиях Android-девайсов.

Сильные стороны:

Не нуждается в нуждается в внешних сенсоров.
Оперативно действует при качественном свете.

Минусы:

Просто ввести в заблуждение изображением или видеозаписью.
Плохо работает при плохом освещении или нестандартных ракурсах.

Инфракрасная фотокамера и точечный проекционный аппарат

Более усовершенствованные системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика является основой Face ID от Apple.

Каким образом это работает:

Точечный проекционный прибор проецирует на облик использующего невидимую сетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 меток).
ИК устройство фиксирует искривление этой сетки по плоскости лица.
Создаётся трёхмерная карта глубинности, которая почти что невозможна для имитации типичной фотографией или маской.

Преимущества

Надёжная деятельность даже в полной темноте.
Большая сопротивляемость к имитациям.
Точность идентификации свыше 99%.

Дополнительные сенсоры

В отдельных аппаратах задействуются также экстра сенсоры: ToF (Time-of-Flight), которые определяют время движения света до предмета и обратно; Цветные-датчики глубины; специальные лазерные лидары для формирования более точной 3D-модели физиономии.

Эти разработки встречаются в основном во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: искуственный интеллект на исполнении

Современные механизмы опознания физиономий немыслимы в отсутствие применения искусственного интеллекта и machine learning. Именно вследствие таким разработкам, как вулкан россии, аппарат в состоянии узнавать владельца даже при трансформациях внешности: новая стрижка, щетина, линзы или косметика не становятся препятствием для деблокировки.

Обнаружение лица

При начальном этапе система необходимо оперативно обнаружить лицо внутри всего изображения камеры. Для данной цели задействуются последовательные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые “обучены” распознавать лица людей среди множества других объектов.

Пример: метод MTCNN может распознавать облик даже с частичном перекрытии (например, шарфом или рукой).

Идентификация важных точек

После идентификации лица устройство, такая как вулкан россии, определяет местоположение главных точек: кончики глаз, конец носа, края губ и так далее. Часто применяется от 68 до 128 основных меток на лицевой области.

Данное необходимо для нормализации визуала: если юзер удерживает мобильник под наклоненным, или повернул голову, программа “выпрямляет” картинку до обычного угла для последующего изучения.

Построение биометрии модели

Далее нейросеть строит компактное математическое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след лица длиной от 128 до 512 чисел с плавающей запятой.

Данный шаблон крайне сложно имитировать: он не удерживает само картинку юзера, а лишь исключительные особенности его облика, что делает его идеальным для таких систем, как vulkan russia.

Сопоставление и вынесение решения

Если пользователь хочет разлочить телефон взглядом, система повторяет все описанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный границу (обычно больше 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ запрещается.

Адаптация к изменениям внешности

Увлекательная черта нынешних системы — возможность самообучения. Если вы часто открываете смартфон с новой стрижкой или оптикой, программа постепенно освежает базовый модель вашего лица для повышения точности работы без снижения уровня безопасности.

Охрана биометрии информации.

Множество клиенты опасаются держать свои биометрические данные на смартфоне из-за риска потери данных или взлома гаджета. Иные фирмы, такие как vulkan russia, предлагают методы для повышения защиты сведений клиентов.

Локальное сбережение: Преимущественно девайсов хранит биометрические образцы лишь в пределах защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они никогда не выходят из аппарат и не доступны даже изготовителю.
Шифрование: Все информация сберегаются только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.
Изоляция программ: Программы внешних разработчиков не имеют непосредственного возможности доступа к биометрическим; они могут лишь запрашивать факт подтверждения идентичности через системный API.

Стоит отметить важную особенность: если какой-то человек получит физический доступ к вашему телефону (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество компании реализуют защиту от неосознанного разблокирования — например, требуют разомкнуть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются виды определения лиц?

Сегодня можно определить три главных подхода к выполнению этой операции:

Программное плоское определение

Применяется только фронтальная видеокамера без вспомогательных датчиков дистанции. Этот способ встречается обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость осуществления; низкая цена; скоростная деятельность при хорошем свете.
Минусы: несложно ввести в заблуждение снимком; нестабильная работа ночью; низкая защищенность.

Техническое трёхмерное сканирование

Задействует ИК видеокамеру + проекционный модуль точек + датчики глубины (Face ID у Apple; аналогичные технологии у Huawei Mate).
Достоинства: высокая надёжность; невозможно обмануть фото/видео; стабильная работа в любых условиях освещения.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Смешанные методы с дополнением ИИ

Применяют комбинацию софтверных методов + аппаратную обработку + постобработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например вулкан россии и Google Pixel Face Unlock современных версий, объединяют фронтальную камеру c ИК сенсором движения Soli Radar для защиты от фальсификаций жестами/масками/видеодисплеями посторонних устройств.

Образцы эксплуатации различных способов

iPhone серии X/11/12/13/14 используют только аппаратное трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition первый раз внедрил эквивалент Face ID в числе Android.
Samsung Galaxy S10/S20 имеют как программное обеспечение 2D определение по фото фронтальной камерой, так и датчик ириса глаза.
Huawei Mate20 Pro использует комплекс из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Вопросы защиты и неверные сигналы

Несмотря на впечатляющий прогресс технологий за прошедшие лет, совершенных механизмов пока не наблюдается:

Возможность подвоха: Бюджетные мобильники без труда доступны качественной изображением пользователя или же роликом с экрана другого устройства.
Идентичные близнецы: Даже самые совершенные системы могут спутать между монозиготными близнецами либо семьями с очень аналогичной внешностью.
Трансформации внешнего вида: Внезапное снижение веса/набор веса, хирургические вмешательства или травмы в некоторых случаях требуют повторной регистрации биометрических данных.
Условия записи: Яркая освещённость солнцем или же плотная темнота могут снизить точность определения признаков.

Здесь некоторые подсказок для безопасному применению:

Для важных операций всегда используйте двухфакторную аутентификацию;
Не активируйте возможность “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
Регулярно обновляйте прошивку программное обеспечение смартфона для защиты от новых видов атак;
Включайте функцию “Требовать открытых глаз” там, где она доступна.

В каких областях ещё используется технология помимо мобильных телефонов?

Пускай предмет этой публикации касается конкретно мобильным устройствам, следует отметить других сферах применения технологии:

Мониторинг входа в рабочих помещениях и многоквартирных зданиях;
Платёжные аппараты финансовых учреждений (“Face Pay”);
Виртуальные паспорта современного типа;
Установки видеомониторинга городских сервисов;
Механизация отслеживания посещаемости образовательных учреждений/университетов;
Вход пользователей ПК/ноутбуков.

Например: В столичном метро уже испытывается система платежа проезда по лицу (“Face Pay”) — хватит пройти через барьер без пластика или мобильника! Аналогичные проекты реализуются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как изменяется технический процесс сегодня?

Любой годочек проявляются новые мысли для повышения стандарта деятельности систем распознавания лиц:

Увеличивается разрешение сенсоров — чем больше элементов фиксируется фотоаппаратом/датчиками глубины, тем меньше риск ошибки;
Развиваются нейронные сети — современные архитектуры типа MobileNetV3 обеспечивают возможность оперативно осваивать дополнительным чертам облика пользователя напрямую на гаджете без отправки данных в облако.
Улучшаются методы антиспуфинга — теперь смартфоны способны распознавать реальные живые лица от неподвижных фотографий/маскировок по незаметным движениям кожи.
Синхронизация со смарт-гаджетами — интеллектуальные часы могут самостоятельно заблокировать смартфон, если обладатель ушёл далеко.
Появляются комбинированные механизмы — например комбинирующие речевую идентификацию + облик + дактилоскопический след.

Здесь, те направления в особенности востребованы на сегодняшний день:

1) Уменьшение деталей

Компании стараются минимизировать величину прорези (“чёлки”) под сенсоры на экране за счёт внедрения компактных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на устройстве

Для повышения приватности всё больше обработки данных выполняется внутри устройства без отправки информации во внешний облачный сервис.

3) Стандартизация стандартов

Гугл энергично пропагандирует эталон BiometricPrompt API, с целью чтобы такие площадки, как вулкан россия, и каждые Android-приложения были совместимы с различными типами биометрии унифицированно.

Какое решить сегодня?

Если вам всем важна максимальная безопасность данных, подбирайте флагманские устройства с вмонтированным ИК-проектором или ToF-датчиком глубины.

iPhone всех существующих последних поколений
Huawei Companion/P Series линейки
Mi Pro
Vivo X модели
Oppo Найти Х серий.

Если средства невелик – лучше отдавать предпочтение традиционным средствам защиты (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в вулкан россия, использовать только как второстепенную возможность удобства.

Каким образом улучшить комфорт использования возможности?

Есть пара хитростей для пользователей, кто уже использует разблокировку через лицо:

Часто обновляйте свою фото-шаблон, если сильно изменяется внешний вид.
Не забывайте чистить линзу фронтальной камеры – разводы могут снизить четкость!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам запускает фотоаппарат если вы берёте его в руки.
В процессе регистрации постарайтесь удерживать лицевую часть прямо напротив камеры не допуская значительного наклона головы.
Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отвели взгляд от экрана.

Перспективы развития технологии

В предстоящие периоды можно предвкушать развития полностью дистанционных способов идентификации индивидуума сразу по нескольким биометрическим данным параметрам одновременно: лицо + голос + шаги + движения рук!

Также возможно развитие современных подходов обеспечения личной информации – к примеру, динамическое изменение электронного паттерна после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых интересных инноваций нашего периода! Она предоставляет взаимодействие со мобильным устройством удобнее чем когда-либо прежде, и такие приложения, как vulkan russia, могут значительно улучшить ваш опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы осведомлены, как устроена эта методика изнутри, – сумеете осознаннее определять свой следующий устройство!