Каким образом работает идентификация лиц в мобильных устройствах

Почему мы выбираем разлочивание по лицевому распознаванию

В недавние времена идентификация физиономий является одной из наиболее востребованных функций для разблокировки умных телефонов. Еще пару годов ранее большинство использующих удовлетворялись PIN-кодами, секретными кодами или датчиками отпечатков пальцев. Но при появлением таких технологий, как cabura, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Что превращает данную функцию такой востребованной? Во-первых, это удобно: не нужно запоминать трудные пароли или отыскивать верный палец в тьме. Кроме того, это мгновенно: современные системы узнают лицо буквально за доли секунды. В-третьих, это впечатление будущего — будто в кинофильмах про cabura агентов.

Однако за этой кажущейся легкостью таится весь вселенная сложных технологий и инженерных решений. Давайте разобраться, как конкретно функционирует фейсканирование в новейших смартфонах, какие применяются способы, насколько они безопасны и что нас ожидает в будущем.

Краткая хроника эволюции техники

Распознавание лиц как технология существует уже более пятидесяти лет. Начальные пробы автоматизированного изучения лиц были сделаны еще в 1960-х годы в исследовательских центрах США. Тогда вычислительные машины могли лишь обозначать очертания головы и вычислять расстояния между зрачками и ртом на монохромных изображениях.

Первые торговые системы возникли в 1990-х годах, но они были неидеальны: действовали неспешно и часто давали сбои. Только с прогрессом синтетических сетей и таких систем, как кабура, высокопроизводительных мобильных процессоров распознавание лиц стало по-настоящему массовым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным сканированием лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и прочие начали интегрировать свои разработки.

Главные шаги функционирования системы идентификации

Процесс распознавания лица можно примерно поделить на несколько ключевых этапов:

Идентификация лица — устройство определяет присутствие людского образа в снимке.
Извлечение особенностей — система анализирует контуры лица: очертания глаз, обонятельного органа, уст, позицию бровей.
Построение структуры — создаётся уникальный электронный отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение со образцом — сформированный образец сверяется со сохранённой при регистрации биометрической данными владельца.
Принятие выбора — если соответствие достаточно высокое, смартфон деблокируется.

Всякий из указанных стадий запрашивает индивидуальных процедур и улучшений для быстрой работы прямо на устройстве.

Технические элементы: что скрыто внутри них

Типичная селфи камера.

Самый простой легкий вариант определения лица использует только фронтальную камеру смартфона. Подобный подход осуществлён во различных недорогих моделях Android-устройств.

Положительные стороны:

Необходимо нуждается в дополнительных датчиков.
Быстро работает при достаточном свете.

Отрицательные стороны:

Несложно ввести в заблуждение изображением или видео.
Плохо работает при слабом освещённости или необычных точках зрения.

ИК камера и пунктирный проектор

Более продвинутые системы, такие как кабура, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс составляет базу Face ID от Apple.

Каким способом это функционирует:

Точечный устройство проекции проецирует на физиономию использующего невидимую структуру из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 меток).
ИК устройство регистрирует искривление данной сетки по поверхности физиономии.
Формируется трёхмерная карта глубины глубины, которая почти неподвластна для фальсификации стандартной фотографией или маской.

Плюсы

Надёжная деятельность даже в полной тьме.
Высокая устойчивость к фальсификациям.
Точность распознавания свыше 99%.

Добавочные сенсорные устройства

В отдельных девайсах используются также вспомогательные датчики: ToF (Time-of-Flight), которые определяют время распространения луча до предмета и обратно; RGB-датчики глубины; специальные лазерные лидары для построения более точной 3D-модели физиономии.

Эти технологии используются в основном во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: синтетический интеллект в работе

Нынешние системы идентификации физиономий неосуществимы без эксплуатации искусственного интеллекта и machine learning. Именно из-за таким технологиям, как кабура, гаджет способно узнавать пользователя даже при метаморфозах облика: новая стрижка, борода, очки или грим не становятся препятствием для открытия.

Распознавание лица

При стартовом стадии система обязана быстро найти лицо внутри всего снимка с камеры. Для этой задачи используются последовательные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые подготовлены распознавать человеческие лица среди множества других объектов.

Пример: процесс MTCNN способен распознавать облик даже с неполном перекрытии (например, платком или ладонью).

Определение ключевых моментов

После распознавания лица механизм, такая как кабура, вычисляет расположение основных точек: уголки глаз, верхушка носа, контуры губ и так далее. Часто применяется от 68 до 128 основных меток на лицевой области.

Это действие нужно для нормализации визуала: если человек удерживает телефон под углом, или наклонил головку, программа исправляет изображение до стандартного положения для дальнейшего анализа.

Формирование биометрии шаблона

Далее нейронная сеть строит компактное математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 флоатов.

Этот формат крайне затруднительно сфальсифицировать: он не хранит непосредственно изображение юзера, а лишь исключительные черты его внешности, что делает его идеальным для таких площадок, как кабура казино.

Сравнительный анализ и принятие решения

Когда пользователь хочет разблокировать смартфон взглядом, система воспроизводит все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный порог (обычно выше 99%), телефон, как и платформа кабура казино, открывается; если нет — доступ не предоставляется.

Приспособление к метаморфозам внешности

Увлекательная особенность современных системы — возможность самообучения. Если ты регулярно открываете телефон с свежей укладкой или оптикой, программа постепенно модернизирует базовый образец вашего облика для улучшения точности функционирования без снижения уровня безопасности.

Безопасность биометрических данных.

Множество юзеры опасаются держать свои биометрические данные на мобильном устройстве из-за вероятности утечки информации или взлома устройства. Иные компании, например кабура казино, предлагают решения для улучшения безопасности информации пользователей.

Локальное хранение: Большинство девайсов хранит биометрические шаблоны лишь внутри защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не выходят из гаджет и не доступны даже производителю.
Шифрование: Все информация сохраняются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция программ: Приложения внешних разработчиков не обладают непосредственного доступа к биометрическим; они могут лишь запрашивать подтверждение верификации идентичности через системный API.

Необходимо упомянуть существенную подробность: если кто-то получит физический доступ к вашему телефону (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие компании внедряют защиту от неосознанного разблокирования — к примеру, требуют раскрыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются типы определения лиц?

Сегодня можно выделить различить 3 главных метода к реализации этой функции:

Программное 2D распознавание

Используется только передняя камера без экстра датчиков глубины. Такой метод встречается наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота реализации; низкая цена; скоростная функционирование при хорошем свете.
Минусы: легко одурачить снимком; нестабильная деятельность ночью; слабая защищенность.

Техническое 3D оцифровка

Использует ИК видеокамеру + проектор пикселей + датчики глубины (Face ID от Apple; аналогичные технологии у Huawei Mate).
Преимущества: высокая надёжность; нельзя исказить изображение/видеозапись; постоянная работа в любых условиях освещения.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные методы с интеграцией ИИ

Используют комбинацию программных методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, как кабура и Google Pixel Face Unlock последних поколений, объединяют фронталку c инфракрасным сенсором движения Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями чужих устройств.

Иллюстрации использования различных методов

iPhone линейки X/11/12/13/14 применяют только физическое трёхмерное сканирование
Xiaomi Mi8 Explorer Edition первый раз представил аналог Face ID в ряду Android.
Samsung Galaxy S10 модель/S20 обеспечивают как программное двухмерное распознавание по снимку селфи-камерой, так и сенсор радужки глаза.
Huawei Mate20 Pro использует систему из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Вопросы безопасности и неверные сигналы

Несмотря на замечательный успехи техники за последние лет, безупречных систем пока не существует:

Шанс мошенничества: Доступные смартфоны просто доступны высококачественной фотографией хозяина или роликом с дисплея иного гаджета.
Идентичные двойняшки: Даже самые совершенные системы могут спутать между монозиготными близнецами либо родичами с очень схожей внешностью.
Метаморфозы внешности: Внезапное утрата веса/набор веса, косметические процедуры или травмы в некоторых случаях необходимы для перерегистрации биометрии.
Условия съёмки: Интенсивная засветка солнечным светом или глубокая затенение могут уменьшить верность определения признаков.

Здесь пара подсказок по защищённому применению:

Для важных операций всегда используйте двухфакторную аутентификацию;
Не запускайте возможность “Разблокировка по лицу” на бюджетных устройствах без ИК-сенсоров;
Регулярно апгрейдите программное обеспечение телефона для обеспечения безопасности от современных угроз;
Включайте настройку “Требовать раскрытых глаз” там, где она есть.

В каких областях ещё используется технологии кроме мобильных телефонов?

Хотя основная мысль этой публикации посвящена в частности портативным гаджетам, стоит упомянуть о альтернативных областях использования технологии:

Мониторинг входа в деловых центрах и резиденциях;
Платёжные аппараты финансовых учреждений (“Face Pay”);
Электронные идентификационные документы последнего типа;
Комплексы видеомониторинга муниципальных подразделений;
Механизация учёта явки учебных заведений/институтов;
Вход участников персональных компьютеров/ноутбуков.

Например: В городском метро уже проверяется система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через турникет без карты или мобильника! Похожие программы реализуются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким способом трансформируется технический процесс сегодня?

Всякий годик возникают свежие идеи для усовершенствования уровня работы систем лицевого распознавания:

Увеличивается чёткость сенсорных устройств — чем больше элементов фиксируется фотоаппаратом/датчиками глубины, тем меньше шанс погрешности;
Улучшаются нейронные сети — новейшие структуры типа MobileNetV3 обеспечивают возможность скоростно осваивать дополнительным особенностям облика владельца непосредственно на девайсе без пересылки информации в облачное хранилище.
Развиваются технологии антиспуфинга — теперь телефоны могут отличать настоящие анимированные облики от неподвижных фотографий/маскировок по мельчайшим микродвижениям.
Интеграция со интеллектуальными приборами — умные часы могут автоматически заблокировать смартфон, если обладатель отошёл далеко.
Возникают гибридные системы — например комбинирующие речевую опознание + физиономию + дактилоскопический след.

Вот, те направления в особенности актуальны сейчас:

1) Сокращение элементов

Производители стараются сократить габариты отверстия (“чёлки”) под датчики на дисплее за счёт встраивания маленьких ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Обработывание прямо на аппарате

Для повышения конфиденциальности всё больше расчётов происходит на месте без передачи информации во внешний облачный услугу.

3) Стандартизация норм

Google энергично пропагандирует норму BiometricPrompt API, чтобы аналогичные платформы, вроде cabura, и любые Android-программы могли взаимодействовать с любыми видами биометрии стандартизированно.

Какое решить сегодня?

В случае если тебе нужна наивысшая сохранность данных, выбирайте передовые модели со встроенным ИК-проектором или же ToF-датчиком глубины.

iPhone каждого новейших версий
Huawei Mate/P ряда
Mi Professional
Vivo X линейки
Oppo Обнаружить Икс серии.

Если средства ограничен – лучше отдавать предпочтение традиционным методам безопасности (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в cabura, использовать только как второстепенную возможность удобства.

Каким образом повысить практичность использования функции?

Есть несколько хитростей для тех, кто уже пользуется функцию распознавания лица:

Регулярно меняйте свою фото-шаблон, если кардинально трансформируется внешний вид.
Не забывайте очищать объектив передней камеры – загрязнения могут снизить четкость!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам запускает фотоаппарат как только вы берёте его в руки.
В процессе регистрационного процесса постарайтесь сохранять голову прямо впереди объектива не допуская резкого наклона головы.
Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отворачиваетесь от экрана.

Возможности эволюции техники

В предстоящие годы можно предвкушать развития полностью дистанционных способов идентификации персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + речь + походка + манипуляции руками!

Также возможно появление свежих способов обеспечения приватности – к примеру, динамическое изменение диджитал образца после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из самых захватывающих техник нашего эпохи! Она предоставляет общение со смартфоном проще чем раньше, и такие программы, как кабура казино, могут существенно оптимизировать ваш пользовательский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы знаете, как устроена эта система в деталях, – будете в состоянии вдумчиво выбирать свой будущий устройство!