Как работает определение лицевых образов в телефонах

Зачем мы останавливаемся на разблокирование по лицевому распознаванию

В последние годы распознавание физиономий является одной из наиболее востребованных возможностей для открытия мобильных телефонов. Еще некоторые лет тому назад основная часть юзеров довольствовались пин-кодами, паролями или сканерами отпечатков пальцев. Но с появлением таких технологий, например cabura, нам достаточно просто взглянуть на экран — и устройство тут же узнает своего владельца.

Что делает эту функцию настолько популярной? Прежде всего, это удобно: не нужно удерживать в памяти трудные пароли или искать нужный палец в мраке. Также, это быстро: современные системы идентифицируют лицо фактически за мгновение. В-третью очередь, это впечатление футуризма — будто в кинофильмах про кабура разведчиков.

Однако за данной на первый взгляд несложностью скрывается полный универсум комплексных технологий и инженерных решений. Попробуем понять, как точно функционирует фейсканирование в новейших мобильных телефонах, какие применяются технологии, насколько они надёжны и что нас ожидает в будущем.

Короткая повествование прогресса технологии

Распознавание лиц как технология имеется уже более пятидесяти годов. Начальные пробы машинного анализа лиц были предприняты еще в 1960-х годах в научных учреждениях США. Тогда ЭВМ могли лишь выделять очертания лица и вычислять расстояния между очами и губами на черно-белых фотографиях.

Первые торговые платформы стали доступны в 1990-х годах, но они были неидеальны: функционировали медленно и нередко ошибались. Только с эволюцией нейронных сетей и таких платформ, как кабура, сильных мобильных микросхем определение лиц стало по-настоящему массовым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным сканированием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие начали интегрировать личные решения.

Основные этапы функционирования системы определения

Процесс определения лица можно условно поделить на несколько важных этапов:

1. Распознавание лиц — аппарат выявляет присутствие человеческого образа в снимке.
2. Извлечение особенностей — механизм анализирует контуры лица: очертания глаз, носа, губ, расположение бровей.
3. Построение структуры — создаётся особенный цифровой отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с стандартом — созданный образец сопоставляется со зафиксированной при внесении биометрической информацией владельца.
5. Принятие выбора — если совпадение достаточно существенное, смартфон открывается.

Каждый из данных стадий нуждается в индивидуальных алгоритмов и оптимизаций для оперативной работы прямо на устройстве.

Железные элементы: что прячется в их недрах

Обычная фронтальная камера.

Самый легкий способ определения облика применяет только переднюю камеру смартфона смартфона. Такой метод реализован во различных недорогих моделях Android-устройств.

Сильные стороны:

• Необходимо требует внешних датчиков.
• Шустро работает при качественном освещённости.

Слабые стороны:

• Несложно обмануть изображением или видеозаписью.
• Неправильно функционирует при слабом свете или необычных точках зрения.

Инфракрасная фотокамера и точечный проекционный аппарат

Более совершенные системы, такие как кабура, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс лежит в основе Face ID от Apple.

Каким способом это действует:

• Точечный проектор показывает на физиономию пользователя невидимую сетку из тысяч инфракрасных пятен (например, Face ID использует около 30 000 точек).
• ИК камера регистрирует деформацию этой решетки по поверхности физиономии.
• Создаётся 3D глубинная карта глубины, которая почти что невозможна для подделки обычной фото или маской.

Выигрыши

• Надёжная функционирование даже в полной тьме.
• Большая сопротивляемость к подделкам.
• Точность определения выше 99%.

Добавочные сенсорные устройства

В некоторых устройствах применяются также дополнительные датчики: ToF (Time-of-Flight), которые определяют период распространения света до объекта и обратно; RGB-датчики глубины; специальные световые дальномеры для создания более точной 3D-модели физиономии.

Эти инновации применяются в основном во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: искуственный интеллект на работе

Текущие системы распознавания физиономий невозможны при отсутствии эксплуатации artificial intelligence и machine learning. Именно вследствие таким технологиям, как кабура, устройство способно идентифицировать владельца даже при трансформациях внешнего вида: новая стрижка, щетина, оптика или косметика не становятся барьером для деблокировки.

Обнаружение лиц

При начальном стадии система обязана мгновенно распознать образ лица в пределах полного снимка с камеры. Для этой задачи применяются последовательные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые “обучены” распознавать человеческие лица среди множества других объектов.

Пример: метод MTCNN в состоянии распознавать физиономию даже при частичном перекрытии (например, платком или рукой).

Идентификация важных аспектов

После распознавания лица механизм, такая как кабура, определяет местоположение основных точек: уголки глаз, конец носа, границы губ и так далее. Как правило задействуется от 68 до 128 основных маркеров на лицевой области.

Это действие необходимо для стабилизации изображения: если пользователь держит телефон под наклоном, или склонил голову, программа корректирует картинку до обычного угла для дальнейшего анализа.

Формирование биометрии модели

Далее нейросеть строит компактное математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ лица длиной от 128 до 512 флоатов.

Такой образец очень трудно сфальсифицировать: он не удерживает непосредственно фото пользователя, а лишь уникальные характеристики его внешности, что делает его совершенным для таких платформ, как кабура казино.

Сравнение и вынесение выбора

Если человек желает разблокировать мобильник взглядом, система осуществляет все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый порог (обычно больше 99%), телефон, как и платформа кабура казино, разблокируется; если нет — доступ не предоставляется.

Привыкание к трансформациям облика

Увлекательная характеристика актуальных систем — возможность самообучения. Если ты постоянно открываете телефон с новой стрижкой или оптикой, алгоритм постепенно модернизирует базовый шаблон вашего лица для увеличения точности действия без ухудшения безопасности.

Охрана биометрических информации.

Большинство пользователи боятся хранить свои био-идентификационные данные на телефоне из-за угрозы утечки информации или взлома устройства. Определенные организации, вроде кабура казино, предоставляют решения для улучшения защиты данных пользователей.

• Локальное сбережение: Преимущественно устройств сохраняет биометричные модели лишь внутри защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они никогда не покидают аппарат и закрыты в том числе изготовителю.

• Шифрование: Все информация хранятся только в кодированном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция приложений: Приложения третьих разработчиков не обладают непосредственного доступа к биометрическим данным; они могут лишь требовать факт подтверждения личности через системный API.

Следует подчеркнуть существенную деталь: если кто-либо получит доступ к вашему телефону физически (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство компании внедряют защиту от “слепого” разблокирования — например, требуют разомкнуть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают типы идентификации лиц?

Сегодня можно различить 3 главных метода к реализации этой операции:

Софтверное плоское идентификация

Используется только фронтальная видеокамера без вспомогательных сенсоров глубины. Такой способ используется обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность осуществления; низкая затраты; скоростная функционирование при хорошем свете.
Минусы: просто ввести в заблуждение фотографией; неустойчивая работа ночью; недостаточная охрана.

Техническое трёхмерное сканирование

Задействует ИК камеру + проекционный модуль пикселей + сенсоры глубины (Face ID от Apple; подобные технологии у Huawei Mate).
Достоинства: большая достоверность; не получится исказить фото/видео; постоянная работа при любом освещении.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные способы с дополнением ИИ

Применяют комбинацию программных методов + техническую обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие товары, как кабура и Google Pixel Face Unlock современных поколений, сочетают фронтальную камеру c инфракрасным датчиком движения Soli Radar для защиты от подделок жестами/масками/видеоэкранами чужих устройств.

Образцы эксплуатации различных способов

• iPhone линейки X/11/12/13/14 используют только техническое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition в первый раз внедрил аналог Face ID в числе Android.
• Samsung Galaxy S10/S20 обеспечивают как программное двухмерное распознавание по изображению фронтальной камерой, так и датчик ириса глаза.
• Huawei Mate20 Pro задействует набор из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Вопросы безопасности и ошибочные срабатывания

Несмотря на впечатляющий успехи техники за недавние лет, совершенных системы пока не наблюдается:

1. Шанс мошенничества: Недорогие смартфоны просто “разблокируются” качественной снимком хозяина или же роликом с экрана другого устройства.
2. Идентичные близнецы: Даже самые идеальные системы могут перепутать между монозиготными близнецами либо родичами с очень похожей внешностью.
3. Трансформации внешнего вида: Стремительное похудение/набор веса, косметические процедуры или повреждения порой требуют перерегистрации биометрических данных.
4. Условия фотографирования: Сильная подсветка солнечным светом либо плотная тень могут понизить аккуратность распознавания признаков.

Здесь некоторые советов по надёжному использованию:

• Для критически важных операций всегда внедряйте двухфакторную аутентификацию;
• Не запускайте функцию “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
• Систематически апгрейдите ПО телефона для обеспечения безопасности от новых видов атак;
• Включайте опцию “Требовать раскрытых глаз” везде, где она имеется.

В каких областях также находится применение технологии за исключением мобильных телефонов?

Несмотря на то, что основная мысль данной публикации посвящена в частности мобильным устройствам, следует отметить других сферах применения технологии:

• Мониторинг входа в деловых центрах и резиденциях;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Виртуальные удостоверения личности современного образца;
• Комплексы видеонаблюдения городских подразделений;
• Автоматизация учёта явки школ/институтов;
• Вход участников персональных компьютеров/ноутбуков.

Например: В столичном метро уже проверяется система оплаты проезда по фейсу (“Face Pay”) — хватит пройти через барьер без карты или мобильника! Схожие инициативы осуществляются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким способом трансформируется техпроцесс в наше время?

Каждый годочек проявляются свежие концепции для улучшения стандарта работы систем распознавания лиц:

1. Увеличивается детализация датчиков — чем больше элементов фиксируется камерой/датчиками глубины, тем меньше шанс погрешности;
2. Улучшаются нейронные сети — современные архитектуры вида MobileNetV3 дают возможность оперативно адаптироваться к свежим особенностям внешности владельца напрямую на гаджете без пересылки информации в облачное хранилище.
3. Улучшаются методы антиспуфинга — теперь телефоны способны отличать подлинные живые лица от статичных фото/масок по микроскопическим движениям кожи.
4. Синхронизация со интеллектуальными приборами — умные часы могут самостоятельно заблокировать мобильный телефон, если обладатель ушёл далеко.
5. Возникают гибридные устройства — в частности комбинирующие аудио аутентификацию + физиономию + дактилоскопический след.

Вот, те тенденции в особенности популярны на сегодняшний день:

1) Миниатюризация компонентов

Изготовители намереваются сократить габариты выреза (“чёлки”) для датчики на экране за счёт интеграции миниатюрных ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Переработка прямо на девайсе

Для увеличения приватности всё больше расчётов выполняется внутри устройства без пересылки данных во дополнительный облачный сервис.

3) Упорядочивание регламентов

Google активно пропагандирует норму BiometricPrompt API, для того чтобы подобные системы, как cabura, и любые Android-программы могли работать с всеми формами биометрии стандартизированно.

Что подобрать сегодня?

Когда тебе важна наивысшая безопасность информации, подбирайте флагманские аппараты с вмонтированным ИК-излучателем или же ToF-сенсором глубины.

• iPhone всех последних версий
• Huawei Companion/Series P ряда
• Xiaomi Professional
• Vivo X линейки
• Oppo Find Х серии.

Если средства невелик – лучше предпочесть классическим способам защиты (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в cabura, задействовать только как второстепенную возможность комфорта.

Каким способом улучшить практичность использования функции?

Есть пара хитростей для людей, кто уже пользуется разблокировку по лицу:

1. Периодически обновляйте свою фотографию-шаблон, если значительно меняется облик.
2. Не пренебрегайте протирать объектив передней камеры – загрязнения могут уменьшить четкость!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам запускает фотоаппарат как только вы поднимаете его.
4. Во время регистрационного процесса старайтесь держать лицевую часть ровно впереди камеры не допуская резкого наклона головы.
5. Используйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отворачиваетесь от дисплея.

Будущее прогресса техники

В предстоящие периоды можно предвкушать возникновения полностью безконтактных способов распознавания человека сразу по нескольким биометрическим данным параметрам одновременно: облик + голос + шаги + движения рук!

Также вероятно появление свежих способов охраны личной информации – например, переменное корректировка электронного шаблона после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее интересных инноваций нашего периода! Она обеспечивает интеракцию со смартфоном комфортнее чем когда-либо прежде, и такие программы, как кабура казино, могут в разы оптимизировать ваш опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы осведомлены, как устроена эта методика внутри, – будете в состоянии осознаннее определять свой следующий гаджет!