Как действует идентификация лицевых образов в мобильных устройствах

Почему мы выбираем разблокирование по лицу

В прошлые годы распознавание лиц превратилось в одной из самых популярных функций для деблокировки мобильных телефонов. Всего несколько годков тому назад большинство пользователей обходились PIN-кодами, секретными кодами или сканерами отпечатков пальцев. Но при появлением подобных технологий, например вулкан россия, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Что делает эту особенность настолько популярной? Для начала, это практично: не нужно удерживать в памяти трудные пароли или отыскивать верный палец в тьме. Также, это оперативно: современные алгоритмы распознают лицо фактически за доли секунды. В-третьих, это ощущение футуристичности — как будто в фильмах про vulkan russia шпионов.

Впрочем за такой видимой простотой таится целый мир комплексных технологий и инженерных решений. Давайте исследовать, как именно работает фейсканирование в новейших смартфонах, какие бывают технологии, насколько они защищены и что нас ждёт впереди.

Краткая хроника эволюции технологии

Идентификация лиц как техника имеется уже более пятидесяти лет. Изначальные попытки автоматизированного анализа лица были предприняты еще в 1960-х годах в лабораториях США. Тогда ЭВМ способны были лишь обозначать силуэты головы и определять расстояния между глазами и губами на черно-белых снимках.

Изначальные торговые системы возникли в 90-х, но они были несовершенны: действовали неспешно и часто ошибались. Только с развитием искусственных сетей и таких систем, как вулкан россии, высокопроизводительных мобильных чипов идентификация лиц стало по-настоящему массовым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным идентификацией лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и другие начали интегрировать собственные разработки.

Главные стадии работы системы определения

Процесс определения лица можно ориентировочно разделить на несколько ключевых этапов:

1. Обнаружение лиц — аппарат распознает присутствие гуманного образа в снимке.
2. Выделение особенностей — механизм изучает особенности лица: очертания глаз, носа, губ, позицию надбровных дуг.
3. Построение структуры — создаётся неповторимый цифровой отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с эталоном — созданный образец сверяется со сохранённой при внесении биометрической данными владельца.
5. Принятие определения — если совпадение достаточно значительное, смартфон открывается.

Любой из этих этапов требует специальных методов и усовершенствований для скорой работы непосредственно на девайсе.

Аппаратные составляющие: что находится внутри них

Типичная передняя камера.

Простейший легкий способ распознавания физиономии применяет только лицевую камеру смартфона смартфона. Такой способ внедрён во многочисленных бюджетных версиях Android-девайсов.

Сильные стороны:

• Не нуждается в потребляет дополнительные датчиков.
• Быстро работает при качественном освещении.

Отрицательные стороны:

• Просто одурачить снимком или видео.
• Неудачно функционирует при низком освещённости или необычных ракурсах.

Инфракрасная фотокамера и пунктирный проектор

Более продвинутые системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс лежит в основе Face ID от Apple.

Как это действует:

• Точечный проектор показывает на физиономию пользователя невидимую решетку из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 меток).
• Инфракрасная устройство фиксирует изменение формы этой сетки по плоскости лица.
• Создаётся 3D глубинная карта глубинности, которая практически невозможна для имитации стандартной фотографией или маскировкой.

Преимущества

• Надёжная функционирование даже в полной тьме.
• Высокая защита к фальсификациям.
• Точность определения выше 99%.

Добавочные сенсоры

В отдельных устройствах задействуются также экстра сенсорные устройства: ToF (Time-of-Flight), которые фиксируют время прохождения света до объекта и обратно; Трехцветные-датчики глубины; специальные оптические дальномеры для формирования более детализированной 3D-модели физиономии.

Эти технологии используются наиболее часто во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: синтетический интеллект на действии

Современные системы опознания лиц немыслимы в отсутствие применения ИИ и machine learning. Именно благодаря таким технологиям, как вулкан россии, устройство в состоянии распознавать владельца даже при метаморфозах облика: новая укладка, растительность на лице, линзы или грим не становятся барьером для открытия.

Обнаружение физиономии

На начальном шаге система обязана быстро распознать ликовое изображение внутри целого снимка камеры. Для этого задействуются каскадные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые подготовлены находить человеческие лица среди множества других объектов.

Пример: метод MTCNN может обнаруживать облик даже в случае частичном перекрытии (например, шалью или ладонью).

Определение важных аспектов

После идентификации лица устройство, такая как вулкан россии, вычисляет местоположение главных точек: края глаз, конец носа, границы губ и так далее. Как правило задействуется от 68 до 128 основных меток на лицевой области.

Данное нужно для стабилизации картинки: если человек держит мобильник под наклоненным, или повернул головку, программа исправляет картинку до обычного угла для последующего изучения.

Создание биометрического шаблона

Далее нейронная сеть строит сжатое математическое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 вещественных чисел.

Такой шаблон весьма затруднительно имитировать: он не хранит непосредственно фото пользователя, а лишь уникальные черты его облика, что делает его оптимальным для таких платформ, как vulkan russia.

Сравнение и принятие выбора

Если человек хочет разлочить телефон взглядом, механизм осуществляет все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный порог (обычно выше 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ блокируется.

Адаптация к трансформациям облика

Увлекательная черта актуальных систем — способность самостоятельного обучения. Если вы постоянно доступаете к смартфон с обновленной стрижкой или очками, программа постепенно обновляет основной модель вашего лица для повышения точности работы без снижения уровня безопасности.

Безопасность биометрических данных данных.

Множество пользователи опасаются сохранять свои биометрические данные на смартфоне из-за риска утечки информации или взлома гаджета. Определенные организации, например vulkan russia, предоставляют решения для увеличения защиты сведений юзеров.

• Локальное хранение: Преимущественно аппаратов хранит био-идентификационные шаблоны лишь в пределах безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не выходят из аппарат и не доступны включая создателю.

• Шифрование: Все данные сохраняются только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Программы внешних девелоперов не обладают прямого доступа к биометрическим; они могут лишь запрашивать факт подтверждения идентичности через системный API.

Необходимо подчеркнуть существенную деталь: если кто-либо получит физический доступ к вашему телефону (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество компании реализуют систему защиты от неосознанного разблокирования — к примеру, требуют раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют типы идентификации лиц на изображениях?

Сегодня можно определить определить 3 главных подхода к реализации этой операции:

Программное двухмерное определение

Используется только передняя видеокамера без дополнительных сенсоров дистанции. Этот подход встречается обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота воплощения; низкая стоимость; быстрая деятельность при качественном освещении.
Минусы: просто обмануть фотографией; нестабильная работа ночью; низкая защищенность.

Оборудование для трёхмерное сканирование

Использует ИК камеру + проекционный модуль пикселей + сенсоры глубины (Face ID от Apple; подобные решения у Huawei Mate).
Достоинства: высокая достоверность; не получится обмануть фото/видео; устойчивая деятельность в любых условиях освещения.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные способы с интеграцией ИИ

Используют комбинацию софтверных методов + аппаратную обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, как вулкан россии и Google Pixel Face Unlock последних версий, сочетают фронтальную камеру c ИК сенсором движения Soli Radar для предотвращения от подделок жестами/масками/видеоэкранами посторонних устройств.

Иллюстрации использования разнообразных способов

• iPhone серии X/11/12/13/14 используют только физическое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз внедрил аналог Face ID в ряду Android.
• Samsung Galaxy S10 версия/S20 обеспечивают как программное обеспечение двухмерное определение по снимку селфи-камерой, так и сенсор глазного ириса.
• Huawei Mate20 Pro использует систему из ИК-инфракрасного света + Dot Projector + ToF-датчик

Проблемы защиты и ложные сигналы

Несмотря на поразительный успехи инноваций за последние годы, безупречных механизмов пока не наблюдается:

1. Шанс обмана: Бюджетные телефоны просто “разблокируются” качественной фотографией хозяина или роликом с экрана другого устройства.
2. Идентичные близнецы: Даже самые совершенные механизмы могут ошибиться между однояйцевыми близнецами либо родственниками с очень схожей внешностью.
3. Метаморфозы внешнего вида: Внезапное похудение/увеличение массы тела, косметические процедуры либо травмы в некоторых случаях необходимы для обновления данных биометрии.
4. Условия фотографирования: Интенсивная подсветка солнцем или интенсивная затенение могут уменьшить точность распознавания признаков.

Здесь пара подсказок для защищённому использованию:

• Для важных операций всегда внедряйте двухэтапную аутентификацию;
• Не активируйте опцию “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
• Постоянно обновляйте прошивку ПО мобильного устройства для предотвращения угроз от актуальных атак;
• Включайте опцию “Требовать открытых глаз” везде, где она имеется.

В каких местах ещё находится применение технологии за исключением мобильных телефонов?

Пускай предмет нашей статьи посвящена именно смартфонам и планшетам, стоит упомянуть о прочих направлениях внедрения технологии:

• Контроль входа в деловых центрах и многоквартирных зданиях;
• Платёжные аппараты банков (“Face Pay”);
• Электронные удостоверения личности нового типа;
• Комплексы видеоконтроля городских сервисов;
• Автоматизирование регистрации посещаемости образовательных учреждений/университетов;
• Аутентификация пользователей ПК/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по фейсу (“Face Pay”) — достаточно пройти через турникет без карты или мобильника! Похожие проекты развиваются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Как изменяется техпроцесс в наше время?

Каждый год проявляются новые концепции для улучшения уровня функционирования систем идентификации лиц:

1. Увеличивается разрешение датчиков — чем больше информации фиксируется видеокамерой/датчиками глубины, тем меньше вероятность ошибки;
2. Улучшаются нейронные сети — передовые архитектуры типа MobileNetV3 позволяют оперативно осваивать дополнительным особенностям облика обладателя прямо на устройстве без отправки данных в облако.
3. Улучшаются методы антиспуфинга — теперь телефоны способны отличать настоящие живые лица от неподвижных фотографий/маскировок по незаметным движениям кожи.
4. Синхронизация со умными устройствами — смарт-часы могут авто закрыть доступ к смартфон, если пользователь удалился на значительное расстояние.
5. Проявляются гибридные системы — к примеру объединяющие речевую аутентификацию + лицо + отпечаток пальца.

Итак, какие тенденции очень популярны в данный момент:

1) Уменьшение элементов

Изготовители пытаются минимизировать габариты прорези (“чёлки”) под датчики на экране за счёт внедрения миниатюрных ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на девайсе

Для повышения приватности всё больше вычислений выполняется внутри устройства без пересылки информации во дополнительный облачный услугу.

3) Стандартизация регламентов

Google энергично пропагандирует норму BiometricPrompt API, с целью чтобы аналогичные системы, вроде вулкан россия, и все Android-приложения могли взаимодействовать с всеми формами биометрии единообразно.

Что решить на сегодня?

В случае если тебе необходима предельная безопасность информации, остановите выбор на флагманские аппараты с вмонтированным ИК-излучателем либо ToF-сенсором глубины.

• iPhone всех существующих актуальных моделей
• Huawei Mate/P линейки
• Mi Pro
• Vivo X линейки
• Oppo Найти Х серий.

Если бюджет невелик – лучше отдавать предпочтение классическим средствам защиты (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в вулкан россия, задействовать только как опциональную опцию удобства.

Каким способом повысить комфорт работы функции?

Есть несколько хитростей для пользователей, кто уже пользуется разблокировку через лицо:

1. Периодически меняйте свою фотографию-шаблон, если значительно изменяется облик.
2. Не забывайте протирать объектив фронтальной камеры – разводы могут уменьшить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам активирует фотоаппарат как только вы берёте его в руки.
4. Во время записи старайтесь удерживать лицо неподвижно впереди камеры без резкого наклона головы.
5. Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отвели взгляд от экрана.

Перспективы развития технологии

В скоро наступающие времена можно ожидать развития полностью дистанционных способов распознавания персоны сразу по нескольким биометрическим параметрам одновременно: физиономия + речь + манера ходьбы + жесты рук!

Также предполагается возникновение современных методов обеспечения конфиденциальности – скажем, динамическое изменение цифрового образца после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень захватывающих инноваций нашего времени! Она предоставляет взаимодействие со мобильным устройством комфортнее чем до этого, и такие программы, как vulkan russia, могут в разы повысить ваш опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы осведомлены, как устроена эта методика внутри, – будете в состоянии вдумчиво подбирать свой будущий устройство!