Каким образом работает идентификация лиц в телефонах

Для чего мы предпочитаем разблокировку по фейсу

В прошлые годы определение физиономий превратилось в одной из самых распространённых возможностей для деблокировки мобильных телефонов. Всего пару годков тому назад основная масса пользователей удовлетворялись PIN-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением подобных технологий, как вулкан россия, нам вполне просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какой аспект обуславливает эту конкретную особенность очень нужной? Прежде всего, это удобно: не нужно запоминать трудные пароли или отыскивать верный палец в темноте. Во-вторых, это оперативно: современные системы узнают лицо буквально за доли секунды. В-третьих, это ощущение будущего — как будто в кинолентах про вулкан россия разведчиков.

Тем не менее за данной кажущейся простотой прячется целый вселенная сложных технологий и инженерных концепций. Позвольте нам разобраться, как точно функционирует распознавание лиц в актуальных мобильных телефонах, какие бывают технологии, насколько они защищены и что нас предстоит.

Короткая хроника прогресса инноваций

Распознавание лиц как техника имеется уже более 50 лет. Изначальные пробы машинного исследования лиц были осуществлены еще в 1960-х годы в исследовательских центрах США. Тогда компьютеры умели лишь обозначать контуры лица и определять промежутки между очами и устами на монохромных снимках.

Изначальные торговые платформы появились в 90-х, но они были неидеальны: действовали неспешно и нередко ошибались. Только с эволюцией искусственных сетей и таких площадок, как вулкан россии, высокопроизводительных мобильных микросхем распознавание лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным распознаванием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали интегрировать свои разработки.

Главные этапы работы устройства определения

Процесс определения лица можно ориентировочно разделить на несколько важных этапов:

Идентификация лиц — устройство выявляет наличие гуманного лица в снимке.
Определение признаков — система исследует черты облика: конфигурацию глаз, носа, уст, позицию надбровных дуг.
Построение шаблона — создаётся уникальный цифровой отпечаток (faceprint) на основе определённых признаков.
Сравнение с эталоном — созданный образец сравнивается со зафиксированной при регистрации биометрической данными владельца.
Принятие выбора — если соответствие достаточно высокое, смартфон открывается.

Любой из указанных стадий нуждается в особых методов и оптимизаций для быстрой работы прямо на устройстве.

Технические элементы: что находится внутри них

Стандартная фронтальная камера.

Наиболее простой способ определения лица использует исключительно лицевую камеру смартфона. Такой способ внедрён во различных недорогих моделях Android-девайсов.

Плюсы:

Не потребляет дополнительные сенсоров.
Быстро функционирует при качественном освещённости.

Слабые стороны:

Легко одурачить фотографией или видео.
Плохо работает при слабом освещённости или необычных точках зрения.

ИК камера и точечный проектор

Более усовершенствованные системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология лежит в основе Face ID от Apple.

Каким способом это функционирует:

Точечный проектор отображает на физиономию использующего невидимую решетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 меток).
ИК камера записывает искривление данной сетки по поверхности лица.
Формируется трехмерная карта глубины глубины, которая почти что неподвластна для имитации типичной фотографией или маской.

Достоинства

Надёжная функционирование даже в полной тьме.
Большая сопротивляемость к фальсификациям.
Точность идентификации более 99%.

Дополнительные сенсоры

В некоторых устройствах задействуются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые измеряют период распространения света до предмета и обратно; Трехцветные-датчики дальности; специальные лазерные дальномеры для создания более аккуратной 3D-модели физиономии.

Эти инновации используются чаще всего во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: искуственный разум в исполнении

Нынешние механизмы распознавания физиономий невозможны в отсутствие применения искусственного интеллекта и machine learning. Именно благодаря таким технологиям, как вулкан россии, аппарат может идентифицировать юзера даже при трансформациях облика: новая причёска, щетина, очки или косметика не становятся барьером для открытия.

Детектирование физиономии

На стартовом шаге программа обязана мгновенно найти образ лица в пределах целого изображения с камеры. Для этой задачи используются многоуровневые классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые "обучены" находить человеческие лица среди множества других объектов.

Пример: процесс MTCNN может распознавать лицо даже с неполном перекрытии (например, шалью или ладонью).

Идентификация ключевых точек

После обнаружения лица механизм, такая как вулкан россии, устанавливает местоположение главных точек: уголки глаз, кончик носа, границы губ и так далее. Как правило используется от 68 до 128 ключевых точек на лице.

Это нужно для выравнивания картинки: если человек держит смартфон под углом, или склонил голову, программа "выпрямляет" картинку до нормального состояния для последующего изучения.

Построение биометрического шаблона

Далее нейросеть строит уплотненное математическое представление ("эмбеддинг") внешности пользователя — своеобразный цифровой след лица длиной от 128 до 512 флоатов.

Такой образец весьма сложно сфальсифицировать: он не хранит само фото пользователя, а лишь особенные характеристики его облика, что делает его совершенным для таких систем, как vulkan russia.

Сравнение и осуществление решения

Если пользователь намеревается открыть телефон глазами, программа повторяет все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный порог (обычно больше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ блокируется.

Адаптация к изменениям облика

Увлекательная особенность современных системы — способность самостоятельного обучения. Если ты постоянно открываете мобильное устройство с свежей укладкой или очками, алгоритм постепенно обновляет базовый шаблон вашего внешности для увеличения точности действия без ухудшения безопасности.

Безопасность биометрии данных.

Большинство клиенты беспокоятся сохранять свои био-идентификационные данные на смартфоне из-за угрозы утечки данных или взлома гаджета. Иные компании, такие как vulkan russia, предоставляют методы для увеличения защиты данных юзеров.

Локальное сбережение: Большинство девайсов сохраняет биометрические образцы исключительно в пределах защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Они всегда не выходят из гаджет и недоступны даже создателю.
Шифрование: Все сведения хранятся только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.
Изоляция приложений: Приложения сторонних девелоперов не имеют прямого доступа к биометрическим; они могут лишь запрашивать факт подтверждения личности через системный API.

Необходимо отметить существенную особенность: в случае, если кто-то достанет доступ к вашему телефону физически (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство производители реализуют меры безопасности от автоматического разблокирования — например, просят раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют категории определения лиц на изображениях?

На сегодняшний день можно определить различить 3 главных способа к выполнению этой операции:

Программируемое 2D идентификация

Используется только лицевая камера без дополнительных сенсоров дистанции. Подобный подход встречается наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность воплощения; умеренная стоимость; оперативная деятельность при качественном свете.
Минусы: легко ввести в заблуждение снимком; ненадежная деятельность ночью; недостаточная защищенность.

Аппаратное 3D оцифровка

Задействует инфракрасную камеру + проекционный модуль пикселей + датчики глубины (Face ID у Apple; аналогичные технологии у Huawei Mate).
Плюсы: значительная надежность; нельзя подделать фото/видео; устойчивая работа при любом освещении.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана ("чёлка")

Смешанные методы с интеграцией ИИ

Используют комбинацию программных методов + аппаратно-техническую обработку + постобработку нейросетями для увеличения устойчивости к атакам ("anti-spoofing"). Например, такие продукты, например вулкан россии и Google Pixel Face Unlock последних версий, объединяют фронталку c ИК датчиком движения Soli Radar для защиты от подделок руками/масками/видеоэкранами посторонних устройств.

Иллюстрации применения разнообразных способов

iPhone модели X/11/12/13/14 используют только аппаратное трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition первый раз внедрил подобие Face ID в ряду Android.
Samsung Galaxy S10 версия/S20 поддерживают как софтверное плоское распознавание по изображению фронтальной камерой, так и датчик радужки глаза.
Huawei Mate20 Pro задействует систему из ИК-подсветки + Dot Projector + ToF-сенсор

Вопросы безопасности и ложные сигналы

Несмотря на поразительный успехи технологий за недавние лет, идеальных системы пока не имеется:

Шанс обмана: Недорогие телефоны легко "разблокируются" четкой снимком хозяина или же видеозаписью с экрана другого устройства.
Идентичные близняшки: Даже самые идеальные системы могут спутать между однояйцевыми близнецами либо родичами с очень схожей внешностью.
Метаморфозы облика: Резкое похудение/увеличение массы тела, косметические процедуры или повреждения порой необходимы для обновления данных биометрических данных.
Условия съёмки: Яркая подсветка солнечным светом либо плотная тень могут уменьшить верность идентификации признаков.

Здесь пара советов для безопасному использованию:

Для критически важных операций всегда внедряйте дополнительную аутентификацию;
Не запускайте опцию "Разблокировка по лицу" на недорогих моделях без ИК-сенсоров;
Регулярно обновляйте прошивку программное обеспечение смартфона для обеспечения безопасности от современных угроз;
Включайте опцию "Требовать открытых глаз" везде, где она имеется.

В каких областях также применяется технологии за исключением смартфонов?

Хотя предмет данной статьи касается в частности смартфонам и планшетам, необходимо сказать о прочих направлениях внедрения технологии:

Мониторинг входа в офисах и резиденциях;
Платёжные терминалы финансовых учреждений ("Face Pay");
Цифровые удостоверения личности современного поколения;
Комплексы видеомониторинга муниципальных сервисов;
Механизация отслеживания присутствия образовательных учреждений/институтов;
Вход участников персональных компьютеров/ноутбуков.

Например: В московском метро уже проверяется система платежа проезда по фейсу ("Face Pay") — хватит пройти через барьер без пластика или телефона! Схожие инициативы реализуются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким способом трансформируется технология в наше время?

Любой годочек проявляются свежие мысли для повышения уровня функционирования систем идентификации лиц:

Увеличивается чёткость сенсоров — чем больше элементов фиксируется фотоаппаратом/датчиками глубины, тем меньше вероятность ошибки;
Совершенствуются нейронные сети — новейшие структуры типа MobileNetV3 позволяют быстро адаптироваться к дополнительным чертам вида обладателя напрямую на гаджете без пересылки информации в облачное хранилище.
Развиваются методы антиспуфинга — теперь мобильные устройства могут различать настоящие живые лица от статичных снимков/маскировок по незаметным микродвижениям.
Синхронизация со смарт-гаджетами — умные часы могут автоматически закрыть доступ к смартфон, если владелец удалился на значительное расстояние.
Проявляются смешанные системы — например совмещающие аудио аутентификацию + облик + отпечаток пальца.

Вот, какие тренды очень востребованы сейчас:

1) Миниатюризация элементов

Изготовители стараются сократить размер прорези ("чёлки") под сенсоры на дисплее за счёт интеграции компактных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработка прямо на девайсе

Для увеличения конфиденциальности всё больше расчётов происходит внутри устройства без пересылки данных во сторонний облачный услугу.

3) Унификация регламентов

Google энергично пропагандирует норму BiometricPrompt API, с целью чтобы такие платформы, как вулкан россия, и каждые Android-аппы могли взаимодействовать с всеми формами биометрии стандартизированно.

Что подобрать сегодня?

В случае если вам всем нужна максимальная сохранность информации, выбирайте флагманские устройства с интегрированным ИК-проектором или ToF-сенсором глубины.

iPhone всех последних моделей
Huawei Mate/Series P ряда
Xiaomi Expert
Vivo X модели
Oppo Обнаружить Икс серий.

Если бюджет ограничен – лучше отдавать предпочтение традиционным методам безопасности (PIN-код/сканер пальца), а опцию "разблокировка по лицу", такую как в вулкан россия, применять только как дополнительную опцию комфорта.

Как увеличить практичность функционирования возможности?

Есть пара лайфхаков для тех, кто уже использует разблокировку через лицо:

Периодически обновляйте свою изображение-шаблон, если сильно изменяется облик.
Не пренебрегайте протирать линзу фронтальной камеры – пятна могут снизить четкость!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам запускает фотоаппарат если вы поднимаете его.
Во время регистрации постарайтесь держать лицевую часть прямо напротив объектива без значительного наклона головы.
Используйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отвели взгляд от дисплея.

Будущее эволюции техники

В скоро наступающие времена можно предполагать появления полностью бесконтактных способов распознавания персоны сразу по нескольким биометрическим параметрам одновременно: облик + звучание + шаги + жесты рук!

Также предполагается развитие новых методов защиты конфиденциальности – к примеру, динамическое модификация цифрового шаблона после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых увлекательных техник нашего эпохи! Она делает общение со мобильным устройством удобнее чем когда-либо прежде, и такие приложения, как vulkan russia, могут в разы улучшить ваш юзерский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы знаете, как работает эта технология изнутри, – будете в состоянии более осмысленно подбирать свой следующий девайс!