Каким образом работает идентификация лицевых образов в телефонах

Зачем мы предпочитаем разблокировку по лицу

В прошлые годы идентификация лиц является одной из самых распространённых возможностей для разблокировки умных телефонов. Лишь некоторые лет тому назад большинство юзеров довольствовались пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением таких технологий, например Вулкан 24, нам вполне лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Какая вещь превращает данную функцию такой востребованной? Во-первых, это комфортно: не нужно удерживать в памяти сложные пароли или отыскивать правильный палец в мраке. Кроме того, это оперативно: современные программы узнают лицо практически за мгновения ока. В-третьих, это чувство футуристичности — будто в кинофильмах про vulkan24 шпионов.

Впрочем за такой кажущейся несложностью скрывается весь универсум комплексных техник и инженерных концепций. Попробуем понять, как точно работает распознавание лиц в актуальных гаджетах, какие существуют методы, насколько они безопасны и что нас предстоит.

Краткая хроника развития техники

Идентификация лиц как технология имеется уже более 50 лет. Первые пробы автоматизированного исследования облика были предприняты еще в 1960-х годы в лабораториях США. Тогда компьютеры способны были лишь определять очертания лица и вычислять дистанции между зрачками и устами на черно-белых снимках.

Начальные торговые установки возникли в 1990-х годах, но они были несовершенны: работали медленно и часто давали сбои. Только с прогрессом нейронных сетей и таких систем, как Вулкан 24 Казино, высокопроизводительных мобильных процессоров определение лиц стало по-настоящему массовым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным сканированием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и другие начали интегрировать личные решения.

Главные стадии действия механизма идентификации

Процесс идентификации лица можно примерно сегментировать на несколько важных этапов:

Идентификация лица — устройство распознает присутствие людского образа в кадре.
Извлечение признаков — алгоритм изучает контуры физиономии: конфигурацию глаз, носа, губ, положение надбровных дуг.
Построение шаблона — создаётся уникальный виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение с образцом — полученный шаблон сверяется с записанной при учёте биометрической данными владельца.
Принятие определения — если совпадение достаточно существенное, смартфон деблокируется.

Всякий из данных шагов нуждается в особых процедур и оптимизаций для оперативной работы прямо на устройстве.

Аппаратные составляющие: что прячется внутри

Обычная фронтальная камера.

Наиболее простой вариант определения физиономии применяет исключительно переднюю видеокамеру мобильного устройства. Такой подход реализован во различных бюджетных версиях Android-девайсов.

Преимущества:

Не требует дополнительные сенсоров.
Быстро работает при хорошем свете.

Минусы:

Легко одурачить изображением или видео.
Плохо функционирует при низком освещении или необычных точках зрения.

ИК камера и пунктирный проекционный аппарат

Более усовершенствованные системы, такие как Вулкан 24 Казино, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс лежит в основе Face ID от Apple.

Каким образом это функционирует:

Точечный устройство проекции показывает на лицо юзера невидимую решетку из тысяч инфракрасных меток (например, Face ID задействует около 30 000 меток).
ИК устройство регистрирует деформацию этой решетки по плоскости лица.
Получается трехмерная карта глубинности, что практически неподвластна для имитации обычной фото или маской.

Преимущества

Надёжная функционирование даже в полной неосвещённости.
Высокая сопротивляемость к имитациям.
Точность идентификации выше 99%.

Добавочные датчики

В отдельных аппаратах используются также дополнительные сенсоры: ToF (Time-of-Flight), которые измеряют период прохождения света до цели и обратно; RGB-датчики глубины; специальные оптические дальномеры для создания более детализированной 3D-модели физиономии.

Эти инновации используются чаще всего во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные методы: искуственный интеллект на исполнении

Современные механизмы идентификации лиц неосуществимы без эксплуатации artificial intelligence и machine learning. Именно вследствие таким инновациям, как Вулкан 24 Казино, аппарат в состоянии узнавать юзера даже при изменениях внешности: новая причёска, щетина, линзы или макияж не становятся барьером для деблокировки.

Обнаружение физиономии

В стартовом стадии программа должна мгновенно обнаружить образ лица в пределах целого изображения камеры. Для данной цели задействуются многоуровневые классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые подготовлены находить лиц человека среди множества других объектов.

Пример: алгоритм MTCNN в состоянии находить лицо даже с частичном перекрытии (например, платком или ладонью).

Выделение важных точек

После обнаружения лица механизм, такая как Вулкан 24 Казино, определяет местоположение главных точек: края глаз, кончик носа, контуры губ и так далее. Обычно применяется от 68 до 128 ключевых маркеров на лицевой области.

Это требуется для стабилизации картинки: если человек держит смартфон под наклоном, или повернул голову, программа исправляет картинку до стандартного положения для последующего изучения.

Формирование биометрии модели

Далее искусственная сеть строит компактное числовое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 флоатов.

Этот шаблон очень сложно подделать: он не хранит само изображение пользователя, а лишь исключительные особенности его внешности, что делает его идеальным для таких площадок, как Vulkan24.

Сравнение и осуществление выбора

Когда юзер намеревается разблокировать телефон взором, механизм осуществляет все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый уровень (обычно больше 99%), телефон, как и платформа Vulkan24, открывается; если нет — доступ блокируется.

Привыкание к метаморфозам внешности

Занимательная характеристика актуальных систем — возможность самообучения. Если ты постоянно открываете телефон с свежей прической или оптикой, система постепенно модернизирует эталонный модель вашего внешности для увеличения точности действия без снижения уровня безопасности.

Безопасность биометрии данных.

Большинство юзеры опасаются хранить свои биометрические данные на смартфоне из-за вероятности утечки информации или взлома устройства. Определенные компании, например Vulkan24, предлагают методы для повышения защиты информации пользователей.

Локальное хранение: Большинство девайсов хранит биометричные шаблоны только внутрь защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не оставляют гаджет и недоступны даже производителю.
Шифрование: Все информация сберегаются только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.
Изоляция программ: Приложения сторонних девелоперов не имеют непосредственного возможности доступа к биометрическим данным; они могут лишь требовать факт подтверждения идентичности через системный API.

Необходимо подчеркнуть значимую особенность: если кто-то сможет получить физический доступ к вашему телефону (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство производители осуществляют защиту от неосознанного разблокирования — например, просят разомкнуть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют типы распознавания лиц?

В настоящее время можно различить три основных подхода к выполнению этой операции:

Софтверное плоское распознавание

Используется только лицевая видеокамера без дополнительных сенсоров глубины. Такой подход используется чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность осуществления; умеренная стоимость; оперативная функционирование при качественном освещении.
Минусы: легко обмануть фотографией; неустойчивая работа ночью; недостаточная защищенность.

Оборудование для трёхмерное оцифровка

Использует инфракрасную камеру + проектор пикселей + датчики дистанции (Face ID от Apple; аналогичные технологии у Huawei Mate).
Преимущества: большая надёжность; не получится подделать фото/видео; стабильная работа в любых условиях освещения.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с ИИ-дополнением

Используют комбинацию софтверных методов + техническую обработку + постобработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие товары, как Вулкан 24 Казино и Google Pixel Face Unlock последних поколений, объединяют фронтальную камеру c инфракрасным сенсором движения Soli Radar для защиты от фальсификаций руками/масками/видеоэкранами чужих устройств.

Иллюстрации применения различных техник

iPhone линейки X/11/12/13/14 задействуют только физическое трёхмерное сканирование
Xiaomi Mi8 Explorer Edition впервые представил аналог Face ID в числе Android.
Samsung Galaxy S10 модель/S20 обеспечивают как софтверное плоское распознавание по изображению фронтальной камерой, так и датчик радужки глаза.
Huawei Mate20 Pro задействует набор из ИК-инфракрасного света + Dot Projector + ToF-датчик

Трудности защиты и ошибочные сигналы

Несмотря на замечательный прогресс технологий за последние лет, совершенных механизмов пока не наблюдается:

Возможность мошенничества: Доступные смартфоны легко доступны высококачественной снимком пользователя либо роликом с экрана другого устройства.
Идентичные близнецы: Даже самые идеальные устройства могут ошибиться между однояйцевыми близнецами либо родичами с очень схожей внешностью.
Метаморфозы внешности: Стремительное снижение веса/увеличение массы тела, косметические процедуры или травмы порой необходимы для перерегистрации биометрии.
Условия записи: Яркая засветка солнцем или интенсивная затенение могут снизить верность определения признаков.

Вот несколько рекомендаций для надёжному эксплуатации:

Для значимых операций всегда применяйте двухфакторную аутентификацию;
Не активируйте функцию “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
Постоянно обновляйте прошивку ПО мобильного устройства для предотвращения угроз от современных угроз;
Включайте функцию “Требовать открытых глаз” везде, где она есть.

Где также находится применение технологии за исключением смартфонов?

Пускай предмет данной публикации касается в частности мобильным устройствам, необходимо сказать о альтернативных областях использования технологии:

Мониторинг входа в деловых центрах и жилых домах;
Платёжные устройства финансовых учреждений (“Face Pay”);
Электронные идентификационные документы последнего типа;
Установки видеонаблюдения муниципальных подразделений;
Автоматизирование отслеживания посещаемости школ/институтов;
Аутентификация юзеров ПК/ноутбуков.

Например: В столичном метро уже тестируется система оплаты проезда по фейсу (“Face Pay”) — нужно лишь пройти через турникет без карты или телефона! Аналогичные проекты развиваются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Как меняется технический процесс сегодня?

Каждый годочек проявляются современные мысли для повышения стандарта функционирования систем идентификации лиц:

Увеличивается детализация датчиков — чем больше элементов фиксируется камерой/глубинными сенсорами, тем меньше риск неточности;
Совершенствуются нейросети — современные архитектуры модели MobileNetV3 обеспечивают возможность оперативно адаптироваться к дополнительным характеристикам внешности пользователя прямо на устройстве без отправки данных в облако.
Совершенствуются технологии антиспуфинга — теперь мобильные устройства способны отличать настоящие движущиеся лица от статичных фото/масок по незаметным микродвижениям.
Интеграция со умными устройствами — смарт-часы могут авто блокировать мобильный телефон, если пользователь ушёл далеко.
Возникают гибридные системы — к примеру совмещающие речевую идентификацию + лицо + пальцевой отпечаток.

Здесь, которые направления очень актуальны на сегодняшний день:

1) Миниатюризация компонентов

Производители намереваются сократить габариты отверстия (“чёлки”) для сенсоры на дисплее за счёт внедрения маленьких ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на девайсе

Для улучшения конфиденциальности всё более расчётов выполняется внутри устройства без пересылки информации во сторонний облачный услугу.

3) Стандартизация норм

Гугл энергично продвигает эталон BiometricPrompt API, для того чтобы аналогичные платформы, как Вулкан 24, и все Android-приложения могли работать с любыми видами биометрии унифицированно.

Какое решить сегодня?

Когда вам всем нужна предельная сохранность информации, остановите выбор на топовые аппараты со встроенным ИК-проектором или ToF-сенсором глубины.

iPhone всех последних версий
Huawei Mate/Series P серии
Mix Pro
Vivo X модели
Oppo Обнаружить Икс серии.

Если финансы скромен – лучше отдавать предпочтение классическим методам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в Вулкан 24, использовать только как дополнительную опцию комфорта.

Как улучшить комфорт работы опции?

Есть некоторые советов для людей, кто уже использует разблокировку через лицо:

Часто обновляйте свою изображение-шаблон, если кардинально меняется облик.
Не забывайте протирать линзу фронтальной камеры – пятна могут понизить точность!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам активирует фотоаппарат когда вы поднимаете его.
В процессе записи постарайтесь сохранять голову прямо впереди камеры не допуская сильного наклона головы.
Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отворачиваетесь от экрана.

Возможности эволюции инноваций

В предстоящие времена можно ожидать появления полностью дистанционных способов распознавания индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + речь + шаги + движения рук!

Также предполагается появление современных способов защиты приватности – скажем, динамическое модификация цифрового шаблона после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее захватывающих техник нашего периода! Она предоставляет взаимодействие со мобильным устройством комфортнее чем раньше, и такие программы, как Vulkan24, могут значительно улучшить ваш опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы понимаете, как функционирует эта технология в деталях, – сможете более осмысленно определять свой следующий девайс!