Каким образом функционирует распознавание лиц в телефонах

Почему мы предпочитаем разлочивание по фейсу

В недавние годы идентификация физиономий является одной из самых популярных опций для деблокировки мобильных телефонов. Всего пару годков тому назад основная масса использующих довольствовались PIN-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением подобных технологий, например вулкан россия, нам вполне просто взглянуть на экран — и устройство тут же узнает своего владельца.

Что превращает эту конкретную функцию такой востребованной? Для начала, это практично: не нужно удерживать в памяти сложные пароли или искать верный палец в мраке. Во-вторых, это мгновенно: современные алгоритмы узнают лицо практически за мгновение. В-третьем пункте, это чувство футуризма — будто в кинолентах про vulkan russia разведчиков.

Однако за данной кажущейся легкостью таится весь универсум сложных методов и инженерных решений. Давайте исследовать, как точно функционирует распознавание лиц в актуальных гаджетах, какие применяются способы, насколько они надёжны и что нас предстоит.

Краткая хроника эволюции техники

Идентификация лиц как технология существует уже более 50 годов. Первые эксперименты автоматического исследования лиц были осуществлены еще в 1960-х годы в исследовательских центрах США. Тогда компьютеры умели лишь обозначать очертания черепа и измерять дистанции между зрачками и устами на монохромных изображениях.

Начальные коммерческие системы появились в 90-х, но они были неидеальны: действовали неспешно и нередко ошибались. Только с развитием нейронных сетей и таких систем, как вулкан россии, высокопроизводительных мобильных микросхем определение лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным распознаванием лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и прочие начали интегрировать свои разработки.

Основные этапы действия системы распознавания

Процесс распознавания лица можно условно разделить на несколько ключевых этапов:

1. Идентификация лица — камера распознает наличие человеческого лица в изображении.
2. Выделение признаков — система анализирует особенности физиономии: очертания зрительных органов, обонятельного органа, уст, позицию надбровных дуг.
3. Построение модели — создаётся уникальный виртуальный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с эталоном — созданный модель сравнивается с зафиксированной при регистрации биометрической данными владельца.
5. Принятие определения — если соответствие достаточно существенное, смартфон открывается.

Любой из указанных стадий запрашивает индивидуальных процедур и усовершенствований для оперативной работы непосредственно на девайсе.

Железные составляющие: что прячется внутри них

Стандартная фронтальная камера.

Простейший несложный вариант идентификации физиономии задействует только фронтальную камеру смартфона мобильного устройства. Такой метод внедрён во различных недорогих моделях Android-устройств.

Преимущества:

• Необходимо потребляет дополнительных датчиков.
• Быстро функционирует при хорошем освещении.

Слабые стороны:

• Легко обмануть фотографией или роликом.
• Плохо функционирует при низком свете или непривычных ракурсах.

ИК фотокамера и точечный проекционный аппарат

Более совершенные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология составляет базу Face ID от Apple.

Каким способом это функционирует:

• Точечный проекционный прибор отображает на лицо использующего невидимую решетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 пятен).
• ИК устройство фиксирует деформацию данной сетки по плоскости физиономии.
• Формируется трёхмерная глубинная карта глубины, которая практически неподвластна для имитации типичной фото или маской.

Преимущества

• Надёжная деятельность даже в полной тьме.
• Сильная сопротивляемость к имитациям.
• Точность идентификации свыше 99%.

Дополнительные сенсоры

В определённых девайсах применяются также дополнительные сенсоры: ToF (Time-of-Flight), которые фиксируют период прохождения света до объекта и обратно; Трехцветные-датчики дальности; специальные световые измерители расстояния для построения более аккуратной 3D-модели лица.

Эти инновации встречаются наиболее часто во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: искусственный ум в действии

Нынешние системы идентификации лиц немыслимы при отсутствии использования ИИ и machine learning. Именно благодаря таким инновациям, как вулкан россии, устройство способно распознавать владельца даже при изменениях внешнего вида: новая причёска, борода, линзы или макияж не становятся препятствием для разблокировки.

Детектирование лиц

При первом стадии система должна мгновенно обнаружить образ лица среди всего кадра с камеры. Для этой задачи задействуются каскадные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые подготовлены находить лица людей среди множества других объектов.

Пример: метод MTCNN в состоянии находить лицо даже при частичном перекрытии (например, платком или ладонью).

Выделение ключевых точек

После распознавания лица механизм, такая как вулкан россии, устанавливает расположение ключевых точек: края глаз, конец носа, края губ и так далее. Как правило используется от 68 до 128 главных маркеров на лицевой поверхности.

Это нужно для нормализации изображения: если человек удерживает смартфон под наклоном, или повернул голову, программа корректирует картинку до обычного угла для последующего изучения.

Формирование биометрии шаблона

Далее нейросеть строит уплотненное математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след внешности длиной от 128 до 512 вещественных чисел.

Данный образец очень затруднительно сфальсифицировать: он не хранит непосредственно фото юзера, а лишь исключительные характеристики его внешности, что делает его совершенным для таких платформ, как vulkan russia.

Сравнительный анализ и принятие заключения

Если пользователь намеревается разблокировать мобильник взором, программа воспроизводит все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный порог (обычно превышает 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ запрещается.

Приспособление к метаморфозам внешности

Увлекательная характеристика актуальных системы — возможность самообучения. Если ты часто доступаете к телефон с новой укладкой или очками, алгоритм постепенно обновляет эталонный шаблон вашего внешности для повышения точности работы без ухудшения безопасности.

Защита биометрических данных.

Большинство пользователи боятся хранить свои биометрические идентификационные данные на телефоне из-за риска утечки информации или хакерской атаки. Определенные компании, такие как vulkan russia, предлагают методы для улучшения защиты сведений юзеров.

• Локальное хранение: Основная часть аппаратов записывает биометричные модели исключительно в пределах защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Они всегда не оставляют устройство и закрыты включая производителю.

• Шифрование: Все сведения сберегаются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Приложения третьих девелоперов не обладают прямого доступа к биометрическим; они могут лишь требовать подтверждение подтверждения идентичности через системный API.

Необходимо упомянуть важную подробность: если какой-то человек получит доступ к вашему телефону физически (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие производители осуществляют защиту от неосознанного разблокирования — например, просят раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают категории определения лиц?

В настоящее время можно выделить определить 3 ключевых подхода к выполнению этой задачи:

Программируемое плоское распознавание

Эксплуатируется только лицевая камера без вспомогательных детекторов глубины. Такой способ встречается чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота осуществления; умеренная стоимость; оперативная работа при достаточном освещении.
Минусы: несложно одурачить снимком; нестабильная работа ночью; слабая защищенность.

Аппаратное трёхмерное сканирование

Использует ИК видеокамеру + проекционный модуль точек + сенсоры глубины (Face ID от Apple; аналогичные решения у Huawei Mate).
Преимущества: значительная надежность; невозможно исказить фото/видео; постоянная деятельность при любом освещении.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Смешанные подходы с интеграцией ИИ

Применяют комбинацию программных методов + техническую обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие продукты, например вулкан россии и Google Pixel Face Unlock последних версий, сочетают фронтальную камеру c инфракрасным датчиком мобильности Soli Radar для предотвращения от фальсификаций жестами/масками/видеоэкранами чужих устройств.

Примеры применения различных техник

• iPhone серии X/11/12/13/14 используют только физическое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition впервые представил эквивалент Face ID в числе Android.
• Samsung Galaxy S10 модель/S20 обеспечивают как софтверное 2D определение по изображению фронтальной камерой, так и сканер ириса глаза.
• Huawei Mate20 Pro использует набор из ИК-освещения + Dot Projector + ToF-датчик

Проблемы защиты и ошибочные сигналы

Несмотря на замечательный развитие инноваций за прошедшие лет, совершенных механизмов пока не существует:

1. Возможность мошенничества: Доступные смартфоны просто доступны четкой фотографией владельца или же видео с экрана другого устройства.
2. Идентичные близняшки: Даже самые совершенные механизмы могут спутать между монозиготными близнецами либо родичами с очень схожей внешностью.
3. Метаморфозы внешнего вида: Внезапное снижение веса/увеличение массы тела, косметические процедуры или травмы иногда требуют повторной регистрации биометрических данных.
4. Условия фотографирования: Сильная освещённость солнцем либо интенсивная темнота могут снизить верность идентификации признаков.

Здесь несколько рекомендаций по защищённому эксплуатации:

• Для значимых операций всегда применяйте двухфакторную аутентификацию;
• Не активируйте опцию “Разблокировка по лицу” на бюджетных устройствах без ИК-сенсоров;
• Регулярно апгрейдите программное обеспечение мобильного устройства для обеспечения безопасности от новых видов атак;
• Включайте настройку “Требовать раскрытых глаз” в тех местах, где она доступна.

В каких местах также применяется технология за исключением смартфонов?

Пускай основная мысль нашей статьи касается конкретно портативным гаджетам, необходимо сказать о прочих направлениях внедрения технологии:

• Управление входа в деловых центрах и жилых домах;
• Платёжные устройства финансовых учреждений (“Face Pay”);
• Электронные идентификационные документы нового образца;
• Комплексы видеоконтроля городских сервисов;
• Автоматизация отслеживания присутствия школ/университетов;
• Авторизация пользователей компьютеров/ноутбуков.

Например: В городском метро уже проверяется система оплаты проезда по лицу (“Face Pay”) — хватит пройти через турникет без пластика или телефона! Аналогичные программы развиваются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как трансформируется техпроцесс в наше время?

Каждый годочек возникают новые мысли для усовершенствования качества деятельности систем распознавания лиц:

1. Увеличивается детализация сенсорных устройств — чем больше информации фиксируется видеокамерой/глубинными сенсорами, тем меньше риск неточности;
2. Совершенствуются нейросети — современные конструкции вида MobileNetV3 обеспечивают возможность быстро обучаться новым характеристикам вида пользователя прямо на устройстве без отправки данных в облако.
3. Развиваются способы антиспуфинга — теперь телефоны способны различать реальные анимированные облики от фиксированных фотографий/масок по микроскопическим движениям кожи.
4. Синхронизация со интеллектуальными приборами — смарт-часы могут самостоятельно заблокировать телефон, если владелец отошёл далеко.
5. Возникают смешанные устройства — например совмещающие речевую идентификацию + лицо + дактилоскопический след.

Здесь, те тенденции очень востребованы сейчас:

1) Сокращение деталей

Изготовители пытаются сократить величину выреза (“чёлки”) для сенсоры на дисплее за счёт интеграции компактных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на аппарате

Для увеличения приватности всё больше расчётов происходит локально без передачи информации во дополнительный облачный сервис.

3) Упорядочивание стандартов

Гугл энергично продвигает стандарт BiometricPrompt API, для того чтобы такие платформы, например как вулкан россия, и каждые Android-приложения могли взаимодействовать с всеми формами биометрии унифицированно.

Какое выбрать сегодня?

Если тебе необходима предельная защита данных, остановите выбор на топовые устройства с вмонтированным ИК-проектором или ToF-сенсором глубины.

• iPhone всех актуальных версий
• Huawei Mate/P Series ряда
• Mi Pro
• Vivo X линейки
• Oppo Найти Х серии.

Если финансы ограничен – лучше предпочесть традиционным способам безопасности (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в вулкан россия, применять только как дополнительную опцию удобства.

Как увеличить комфорт использования возможности?

Есть пара советов для людей, кто уже использует разблокировку по лицу:

1. Периодически обновляйте свою фотографию-шаблон, если значительно изменяется облик.
2. Не пренебрегайте протирать линзу передней камеры – разводы могут уменьшить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам активирует камеру как только вы берёте его в руки.
4. При регистрационного процесса старайтесь сохранять лицевую часть ровно напротив видеоустройства не допуская сильного наклона головы.
5. Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отвели взгляд от экрана.

Перспективы прогресса техники

В ближайшие времена можно предполагать возникновения полностью бесконтактных способов опознания индивидуума сразу по нескольким биометрическим параметрам одновременно: облик + звучание + шаги + движения рук!

Также вероятно возникновение новых методов охраны приватности – скажем, изменяющееся изменение диджитал образца после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее интересных инноваций нашего времени! Она делает интеракцию со телефоном комфортнее чем раньше, и такие программы, как vulkan russia, могут в разы улучшить ваш пользовательский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы осведомлены, как работает эта система изнутри, – сумеете вдумчиво выбирать свой очередной устройство!