Как работает идентификация лицевых образов в смартфонах

Для чего мы выбираем разлочивание по лицу

В недавние годы определение лиц стало одной из самых популярных опций для деблокировки умных телефонов. Лишь некоторые лет назад большинство юзеров обходились пин-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением таких технологий, например Вулкан 24, нам достаточно лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Что делает данную функцию такой востребованной? Во-первых, это комфортно: не нужно помнить сложные пароли или искать правильный палец в тьме. Кроме того, это оперативно: современные системы распознают лицо буквально за доли секунды. В-третью очередь, это ощущение футуристичности — как будто в кинолентах про казино вулкан шпионов.

Однако за такой кажущейся простотой прячется целый универсум комплексных техник и инженерных решений. Попробуем разобраться, как именно функционирует распознавание лиц в новейших гаджетах, какие бывают технологии, насколько они надёжны и что нас ждёт впереди.

Сжатая хроника развития инноваций

Распознавание лиц как техника присутствует уже более пятидесяти лет. Изначальные попытки автоматизированного анализа лиц были предприняты еще в 1960-х годах в научных учреждениях США. Тогда вычислительные машины умели лишь определять контуры черепа и определять дистанции между зрачками и ртом на монохромных изображениях.

Начальные коммерческие платформы стали доступны в 90-х, но они были неидеальны: функционировали медленно и часто давали сбои. Только с эволюцией синтетических сетей и таких площадок, как Вулкан 24 Казино, высокопроизводительных мобильных процессоров идентификация лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным распознаванием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали интегрировать собственные разработки.

Ключевые этапы функционирования устройства определения

Процесс определения лица можно ориентировочно сегментировать на несколько ключевых этапов:

1. Обнаружение лица — аппарат определяет наличие гуманного образа в кадре.
2. Определение характеристик — система изучает черты облика: форму зрительных органов, носа, губ, положение надбровных дуг.
3. Построение модели — создаётся особенный виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со образцом — созданный образец сопоставляется с записанной при регистрации биометрической данными владельца.
5. Принятие выбора — если сходство достаточно существенное, смартфон открывается.

Каждый из данных этапов нуждается в индивидуальных процедур и усовершенствований для скорой работы прямо на устройстве.

Аппаратные элементы: что прячется в их недрах

Типичная селфи камера.

Наиболее легкий метод идентификации физиономии использует лишь фронтальную видеокамеру смартфона. Данный подход реализован во различных недорогих вариантах Android-устройств.

Преимущества:

• Не нуждается в потребляет дополнительные датчиков.
• Оперативно действует при достаточном свете.

Недостатки:

• Легко обмануть изображением или видео.
• Плохо действует при слабом свете или нестандартных углах обзора.

Инфракрасная камера и пунктирный проекционный аппарат

Более продвинутые системы, такие как Вулкан 24 Казино, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика является основой Face ID от Apple.

Каким способом это действует:

• Точечный устройство проекции показывает на физиономию пользователя невидимую решетку из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 меток).
• ИК устройство записывает изменение формы данной решетки по поверхности физиономии.
• Формируется трехмерная карта глубины, что почти неподвластна для имитации обычной снимком или маскировкой.

Преимущества

• Надёжная деятельность даже в полной тьме.
• Сильная устойчивость к подделкам.
• Точность идентификации выше 99%.

Дополнительные сенсорные устройства

В некоторых устройствах задействуются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые измеряют период распространения луча до предмета и обратно; RGB-датчики глубины; специальные лазерные лидары для формирования более детализированной 3D-модели физиономии.

Эти технологии используются чаще всего во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные алгоритмы: искусственный интеллект в работе

Нынешние системы опознания физиономий неосуществимы в отсутствие применения artificial intelligence и machine learning. Именно вследствие таким технологиям, как Вулкан 24 Казино, аппарат способно идентифицировать пользователя даже при трансформациях внешности: новая причёска, борода, очки или косметика не становятся барьером для разблокировки.

Детектирование лиц

На первом стадии алгоритм обязана мгновенно найти лицо внутри всего изображения камеры. Для этой задачи задействуются последовательные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые натренированы находить лица людей среди множества других объектов.

Пример: процесс MTCNN способен находить облик даже в случае частичном перекрытии (например, шалью или рукой).

Определение основных моментов

После идентификации лица механизм, такая как Вулкан 24 Казино, определяет положение главных точек: края глаз, верхушка носа, края губ и так далее. Как правило используется от 68 до 128 ключевых маркеров на лицевой поверхности.

Это необходимо для выравнивания картинки: если пользователь держит телефон под наклоном, или склонил голову, программа “выпрямляет” изображение до нормального состояния для дальнейшего анализа.

Создание биометрического идентификатора модели

Далее искусственная сеть строит уплотненное числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ лица длиной от 128 до 512 вещественных чисел.

Этот шаблон очень сложно подделать: он не сохраняет само изображение пользователя, а лишь исключительные характеристики его облика, что делает его идеальным для таких систем, как Vulkan24.

Сопоставление и осуществление решения

Когда пользователь желает разлочить телефон глазами, программа повторяет все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный уровень (обычно выше 99%), телефон, как и платформа Vulkan24, открывается; если нет — доступ не предоставляется.

Привыкание к изменениям облика

Интересная черта современных систем — способность самообучения. Если ты постоянно разблокируете телефон с новой стрижкой или очками, программа постепенно обновляет основной модель вашего внешности для повышения точности работы без ухудшения безопасности.

Охрана биометрических информации.

Многие юзеры боятся держать свои био-идентификационные данные на телефоне из-за угрозы утечки данных или взлома устройства. Определенные компании, вроде Vulkan24, предлагают методы для повышения сохранности информации юзеров.

• Локальное хранение: Основная часть аппаратов записывает биометрические шаблоны лишь внутри безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Они всегда не выходят из устройство и недоступны в том числе производителю.

• Шифрование: Все сведения хранятся только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция приложений: Программы третьих девелоперов не обладают непосредственного доступа к биометрическим; они могут лишь запрашивать подтверждение подтверждения идентичности через системный API.

Следует упомянуть важную подробность: если кто-то сможет получить физический доступ к вашему телефону (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество компании осуществляют меры безопасности от автоматического разблокирования — к примеру, просят открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие бывают типы идентификации лиц на изображениях?

На сегодняшний день можно выделить определить 3 главных метода к выполнению этой задачи:

Программное плоское распознавание

Применяется только передняя видеокамера без дополнительных сенсоров глубины. Подобный способ используется обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота осуществления; минимальная цена; оперативная функционирование при хорошем освещении.
Минусы: несложно ввести в заблуждение фотографией; ненадежная работа ночью; недостаточная охрана.

Аппаратное 3D оцифровка

Задействует ИК камеру + проектор пикселей + сенсоры глубины (Face ID у Apple; подобные технологии у Huawei Mate).
Достоинства: большая надёжность; не получится подделать изображение/видеозапись; постоянная функционирование при любом освещении.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Гибридные подходы с интеграцией ИИ

Используют комбинацию программируемых методов + аппаратно-техническую обработку + постобработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие товары, например Вулкан 24 Казино и Google Pixel Face Unlock последних поколений, объединяют фронтальную камеру c инфракрасным сенсором мобильности Soli Radar для защиты от фальсификаций руками/масками/видеоэкранами посторонних устройств.

Образцы использования разных способов

• iPhone модели X/11/12/13/14 используют только техническое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition первый раз представил аналог Face ID в числе Android.
• Samsung Galaxy S10/S20 обеспечивают как софтверное 2D идентификацию по фото фронталкой, так и датчик глазного ириса.
• Huawei Mate20 Pro использует систему из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Проблемы безопасности и ошибочные сигналы

Несмотря на впечатляющий развитие инноваций за последние лет, совершенных системы пока не наблюдается:

1. Возможность мошенничества: Недорогие мобильники легко “разблокируются” четкой изображением хозяина или же роликом с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые безупречные механизмы могут спутать между монозиготными близнецами либо родственниками с очень аналогичной внешностью.
3. Изменения внешнего вида: Внезапное снижение веса/набор веса, косметические процедуры либо травмы в некоторых случаях необходимы для повторной регистрации биометрии.
4. Условия съёмки: Сильная подсветка солнечным светом или же плотная затенение могут снизить точность идентификации признаков.

Вот некоторые советов для защищённому применению:

• Для критически важных операций всегда используйте дополнительную аутентификацию;
• Не активируйте опцию “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
• Регулярно апгрейдите ПО смартфона для предотвращения угроз от актуальных атак;
• Включайте настройку “Требовать раскрытых глаз” везде, где она есть.

В каких областях также используется технологии кроме смартфонов?

Пускай тема этой публикации сосредоточена на конкретно портативным гаджетам, необходимо сказать о прочих направлениях внедрения технологии:

• Мониторинг доступа в рабочих помещениях и резиденциях;
• Платёжные устройства финансовых учреждений (“Face Pay”);
• Цифровые идентификационные документы современного образца;
• Системы видеонаблюдения городских сервисов;
• Автоматизирование отслеживания присутствия учебных заведений/университетов;
• Аутентификация пользователей персональных компьютеров/ноутбуков.

Например: В столичном метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — нужно лишь пройти через барьер без пластика или мобильника! Аналогичные программы реализуются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким образом изменяется техпроцесс в нынешнее время?

Каждый год проявляются свежие мысли для усовершенствования качества деятельности систем лицевого распознавания:

1. Увеличивается разрешение сенсорных устройств — чем больше информации фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность неточности;
2. Улучшаются нейронные сети — современные архитектуры типа MobileNetV3 обеспечивают возможность быстро обучаться свежим особенностям вида владельца прямо на устройстве без пересылки информации в облачное хранилище.
3. Совершенствуются методы антиспуфинга — теперь мобильные устройства способны распознавать подлинные анимированные облики от статичных фото/маскировок по микроскопическим микродвижениям.
4. Синхронизация со интеллектуальными приборами — интеллектуальные часы могут самостоятельно заблокировать телефон, если обладатель удалился на значительное расстояние.
5. Проявляются комбинированные устройства — к примеру объединяющие речевую опознание + облик + пальцевой отпечаток.

Итак, какие тенденции особенно востребованы в данный момент:

1) Сокращение компонентов

Изготовители намереваются уменьшить размер прорези (“чёлки”) под датчики на дисплее за счёт внедрения маленьких ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Переработка прямо на девайсе

Для повышения личной безопасности всё более обработки данных осуществляется локально без передачи данных во дополнительный облачный услугу.

3) Унификация стандартов

Гугл активно продвигает эталон BiometricPrompt API, для того чтобы аналогичные площадки, как Вулкан 24, и все Android-приложения могли работать с всеми формами биометрии стандартизированно.

Что решить сегодня?

В случае если вам всем нужна наивысшая безопасность данных, подбирайте передовые модели со встроенным ИК-излучателем или ToF-сенсором глубины.

• iPhone каждого новейших версий
• Huawei Companion/Series P серии
• Mi Expert
• Vivo X линейки
• Оппо Найти Икс линейки.

Если финансы невелик – лучше предпочесть традиционным методам защиты (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в Вулкан 24, задействовать только как опциональную возможность удобства.

Каким образом улучшить удобство функционирования возможности?

Есть пара хитростей для тех, кто уже использует разблокировку через лицо:

1. Часто обновляйте свою изображение-шаблон, если кардинально изменяется внешность.
2. Не забывайте очищать объектив фронтальной камеры – загрязнения могут уменьшить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам активирует фотоаппарат как только вы берёте его в руки.
4. При регистрационного процесса пытайтесь удерживать голову неподвижно перед видеоустройства без значительного наклона головы.
5. Используйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отвели взгляд от экрана.

Будущее эволюции инноваций

В ближайшие годы можно предполагать возникновения полностью безконтактных способов идентификации персоны сразу по нескольким биометрическим данным параметрам одновременно: физиономия + звучание + походка + манипуляции руками!

Также вероятно возникновение свежих способов охраны приватности – скажем, изменяющееся модификация цифрового шаблона после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из самых интересных техник нашего периода! Она обеспечивает общение со мобильным устройством проще чем раньше, и такие программы, как Vulkan24, могут значительно оптимизировать ваш опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы осведомлены, как устроена эта технология в деталях, – будете в состоянии более осмысленно определять свой будущий девайс!