Каким способом действует распознавание лиц в мобильных устройствах

Для чего мы останавливаемся на разлочивание по фейсу

В последние времена идентификация лиц стало одной из самых распространённых опций для деблокировки мобильных телефонов. Всего пару годков назад большинство юзеров обходились PIN-кодами, секретными кодами или датчиками отпечатков пальцев. Но при появлением таких технологий, например вулкан россия, нам достаточно просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какой аспект превращает данную возможность такой востребованной? Во-первых, это практично: не нужно запоминать сложные пароли или искать нужный палец в темноте. Во-вторых, это быстро: современные алгоритмы идентифицируют лицо фактически за мгновение. В-третью очередь, это чувство футуристичности — словно в фильмах про вулкан автомат разведчиков.

Впрочем за такой видимой простотой скрывается целый мир трудных техник и инженерных решений. Давайте разобраться, как конкретно работает распознавание лиц в актуальных мобильных телефонах, какие бывают методы, насколько они защищены и что нас ожидает в будущем.

Сжатая повествование развития инноваций

Идентификация лиц как техника имеется уже более пятидесяти годов. Первые попытки автоматического изучения лица были сделаны еще в 1960-х годах в лабораториях США. Тогда вычислительные машины умели лишь обозначать силуэты черепа и определять дистанции между глазами и устами на черно-белых снимках.

Первые коммерческие системы появились в 90-х, но они были неидеальны: действовали неспешно и нередко ошибались. Только с прогрессом синтетических сетей и таких платформ, как вулкан россии, сильных мобильных микросхем идентификация лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным идентификацией лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и прочие стали интегрировать свои разработки.

Ключевые этапы действия системы определения

Процесс определения лица можно условно разделить на несколько ключевых этапов:

1. Распознавание лиц — устройство определяет наличие человеческого лица в снимке.
2. Выделение особенностей — алгоритм изучает черты лица: форму глаз, обонятельного органа, губ, позицию бровей.
3. Построение модели — создаётся неповторимый цифровой отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с эталоном — полученный модель сопоставляется с сохранённой при учёте биометрической информацией владельца.
5. Принятие решения — если совпадение достаточно высокое, смартфон деблокируется.

Всякий из этих стадий требует индивидуальных алгоритмов и оптимизаций для скорой работы непосредственно на девайсе.

Технические составляющие: что находится внутри

Обычная фронтальная камера.

Самый легкий способ определения лица задействует лишь фронтальную камеру смартфона смартфона. Данный метод осуществлён во многочисленных бюджетных версиях Android-девайсов.

Преимущества:

• Не нуждается в потребляет дополнительные датчиков.
• Быстро работает при качественном освещённости.

Минусы:

• Просто ввести в заблуждение фотографией или роликом.
• Плохо функционирует при низком освещённости или нестандартных углах обзора.

Инфракрасная фотокамера и точечный проектор

Более совершенные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика является основой Face ID от Apple.

Каким способом это работает:

• Точечный проектор проецирует на лицо юзера невидимую сетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 меток).
• ИК камера регистрирует изменение формы данной сетки по поверхности физиономии.
• Создаётся трехмерная карта глубины глубины, что почти что неподвластна для имитации обычной снимком или маской.

Плюсы

• Надёжная деятельность даже в полной неосвещённости.
• Большая сопротивляемость к подделкам.
• Точность определения выше 99%.

Дополнительные сенсорные устройства

В отдельных устройствах применяются также вспомогательные сенсоры: ToF (Time-of-Flight), которые определяют время прохождения луча до предмета и обратно; Трехцветные-датчики дальности; специальные лазерные лидары для создания более аккуратной 3D-модели физиономии.

Эти технологии используются чаще всего во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: искусственный интеллект в действии

Современные системы идентификации лиц немыслимы в отсутствие использования artificial intelligence и машинного обучения. Именно благодаря таким инновациям, как вулкан россии, гаджет в состоянии узнавать юзера даже при трансформациях внешности: новая причёска, растительность на лице, оптика или грим не становятся препятствием для разблокировки.

Распознавание физиономии

В первом стадии система необходимо оперативно найти ликовое изображение среди полного изображения с камеры. Для этой задачи используются последовательные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые “обучены” находить человеческие лица среди множества других объектов.

Пример: метод MTCNN способен обнаруживать лицо даже при частичном закрытии (например, платком или ладонью).

Идентификация важных аспектов

После распознавания лица устройство, такая как вулкан россии, устанавливает местоположение главных точек: кончики глаз, кончик носа, края губ и так далее. Часто задействуется от 68 до 128 основных маркеров на лицевой области.

Данное необходимо для стабилизации изображения: если пользователь удерживает телефон под наклоном, или склонил голову, программа корректирует картинку до стандартного положения для последующего изучения.

Построение биометрического шаблона

Далее нейронная сеть строит сжатое математическое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 вещественных чисел.

Данный формат крайне затруднительно сфальсифицировать: он не удерживает непосредственно картинку юзера, а лишь исключительные особенности его внешности, что делает его совершенным для таких систем, как vulkan russia.

Сравнительный анализ и осуществление заключения

Когда человек намеревается разблокировать телефон взором, механизм повторяет все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный границу (обычно выше 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ запрещается.

Адаптация к изменениям облика

Интересная особенность современных систем — способность самостоятельного обучения. Если ты постоянно открываете телефон с обновленной укладкой или оптикой, система постепенно обновляет базовый шаблон вашего облика для повышения точности работы без снижения уровня безопасности.

Безопасность биометрических данных информации.

Многие клиенты боятся держать свои биометрические идентификационные данные на смартфоне из-за угрозы утечки информации или хакерской атаки. Некоторые фирмы, такие как vulkan russia, предоставляют решения для повышения защиты сведений клиентов.

• Локальное сохранение: Большинство устройств записывает биометричные модели только в пределах защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не выходят из гаджет и недоступны даже изготовителю.

• Шифрование: Все сведения сберегаются только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция приложений: Приложения сторонних разработчиков не имеют непосредственного возможности доступа к биометрическим данным; они могут лишь требовать факт верификации личности через системный API.

Следует отметить важную деталь: если кто-либо сможет получить доступ к вашему телефону физически (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство изготовители осуществляют меры безопасности от автоматического разблокирования — например, просят открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют виды определения лиц?

Сегодня можно определить различить три главных подхода к осуществлению этой функции:

Программируемое плоское идентификация

Эксплуатируется только лицевая видеокамера без экстра детекторов дистанции. Такой подход встречается наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность реализации; умеренная затраты; скоростная деятельность при достаточном свете.
Минусы: просто одурачить снимком; ненадежная работа ночью; низкая безопасность.

Техническое объёмное оцифровка

Задействует инфракрасную камеру + проектор пикселей + датчики глубины (Face ID у Apple; подобные решения у Huawei Mate).
Достоинства: высокая надежность; нельзя обмануть изображение/видеозапись; устойчивая функционирование при любом освещении.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные способы с интеграцией ИИ

Применяют комбинацию программируемых методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, например вулкан россии и Google Pixel Face Unlock современных версий, сочетают фронталку c ИК датчиком мобильности Soli Radar для предотвращения от фальсификаций руками/масками/видеоэкранами чужих устройств.

Иллюстрации использования разнообразных методов

• iPhone серии X/11/12/13/14 применяют только техническое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition в первый раз предложил подобие Face ID среди Android.
• Samsung Galaxy S10/S20 обеспечивают как программное обеспечение двухмерное идентификацию по изображению фронталкой, так и датчик глазного ириса.
• Huawei Mate20 Pro задействует набор из ИК-подсветки + Dot Projector + ToF-датчик

Проблемы защиты и ошибочные срабатывания

Несмотря на поразительный прогресс инноваций за прошедшие годы, совершенных систем пока не имеется:

1. Возможность обмана: Недорогие мобильники без труда “разблокируются” качественной снимком владельца или видеозаписью с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые идеальные механизмы могут спутать между монозиготными близнецами либо семьями с очень схожей внешностью.
3. Метаморфозы облика: Стремительное похудение/увеличение массы тела, хирургические вмешательства или повреждения в некоторых случаях необходимы для повторной регистрации биометрических данных.
4. Условия съёмки: Интенсивная засветка солнцем или плотная тень могут понизить аккуратность распознавания признаков.

Здесь некоторые подсказок по защищённому применению:

• Для значимых операций всегда используйте двухэтапную аутентификацию;
• Не запускайте функцию “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
• Регулярно обновляйте программное обеспечение телефона для обеспечения безопасности от современных угроз;
• Включайте настройку “Требовать раскрытых глаз” везде, где она имеется.

В каких областях также находится применение технология за исключением мобильных телефонов?

Пускай тема данной публикации посвящена конкретно мобильным устройствам, следует отметить альтернативных областях использования технологии:

• Мониторинг прохода в рабочих помещениях и резиденциях;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Электронные идентификационные документы современного поколения;
• Комплексы видеомониторинга муниципальных подразделений;
• Автоматизирование регистрации явки школ/институтов;
• Авторизация пользователей персональных компьютеров/ноутбуков.

Например: В городском метро уже тестируется система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без карты или мобильника! Схожие проекты осуществляются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Как меняется технический процесс в наше время?

Любой годик проявляются современные мысли для усовершенствования стандарта работы систем лицевого распознавания:

1. Увеличивается детализация датчиков — чем больше деталей фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность неточности;
2. Совершенствуются нейронные сети — передовые структуры модели MobileNetV3 дают возможность оперативно адаптироваться к новым чертам вида владельца непосредственно на девайсе без отправки данных в облако.
3. Развиваются технологии антиспуфинга — теперь телефоны могут различать настоящие движущиеся лица от статичных фотографий/маскировок по незаметным микродвижениям.
4. Взаимодействие со умными устройствами — интеллектуальные часы могут авто заблокировать смартфон, если обладатель удалился на значительное расстояние.
5. Проявляются смешанные системы — к примеру совмещающие аудио аутентификацию + облик + дактилоскопический след.

Вот, которые тренды очень популярны на сегодняшний день:

1) Миниатюризация компонентов

Изготовители пытаются уменьшить габариты выреза (“чёлки”) для сенсоры на дисплее за счёт внедрения маленьких ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Переработка прямо на устройстве

Для улучшения конфиденциальности всё более расчётов осуществляется внутри устройства без отправки информации во дополнительный облачный сервис.

3) Стандартизация норм

Гугл активно пропагандирует норму BiometricPrompt API, для того чтобы подобные системы, например как вулкан россия, и каждые Android-приложения были совместимы с различными типами биометрии единообразно.

Какое выбрать сегодня?

Когда вам важна предельная безопасность данных, выбирайте передовые устройства с интегрированным ИК-излучателем или ToF-датчиком глубины.

• iPhone всех существующих новейших версий
• Huawei Partner/P Series ряда
• Xiaomi Professional
• Vivo X модели
• Oppo Обнаружить Х серии.

Если средства ограничен – лучше отдавать предпочтение традиционным средствам безопасности (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в вулкан россия, задействовать только как второстепенную возможность удобства.

Как улучшить комфорт использования функции?

Есть некоторые советов для тех, кто уже использует разблокировку по лицу:

1. Периодически обновляйте свою фото-шаблон, если значительно изменяется внешность.
2. Не пренебрегайте протирать объектив передней камеры – загрязнения могут понизить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам запускает фотоаппарат когда вы поднимаете его.
4. В процессе записи постарайтесь удерживать лицевую часть неподвижно напротив объектива без сильного наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отворачиваетесь от экрана.

Перспективы развития инноваций

В предстоящие периоды можно предполагать развития полностью бесконтактных способов опознания индивидуума сразу по нескольким биометрическим данным параметрам одновременно: физиономия + речь + манера ходьбы + манипуляции руками!

Также возможно появление современных подходов охраны конфиденциальности – например, динамическое модификация цифрового образца после каждой удачной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из самых интересных технологий нашего периода! Она обеспечивает интеракцию со смартфоном удобнее чем когда-либо прежде, и такие программы, как vulkan russia, могут в разы оптимизировать ваш юзерский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы понимаете, как функционирует эта методика внутри, – сможете осознаннее подбирать свой будущий устройство!