Каким образом работает определение лиц в смартфонах

Зачем мы предпочитаем разблокировку по лицу

В последние времена определение лиц является одной из наиболее востребованных опций для открытия умных телефонов. Всего пару годов назад основная часть юзеров обходились PIN-кодами, паролями или датчиками отпечатков пальцев. Но с появлением таких технологий, например Вулкан Платинум, нам достаточно просто взглянуть на экран — и устройство тут же узнает своего владельца.

Какая вещь превращает данную функцию такой востребованной? Для начала, это удобно: не нужно удерживать в памяти замысловатые пароли или искать нужный палец в тьме. Во-вторых, это мгновенно: современные системы узнают лицо практически за мгновения ока. В-третью очередь, это впечатление будущего — словно в кинофильмах про vulkan platinum разведчиков.

Однако за данной кажущейся простотой прячется полный вселенная сложных методов и инженерных разработок. Давайте разобраться, как точно работает распознавание лиц в современных гаджетах, какие бывают технологии, насколько они защищены и что нас предстоит.

Сжатая повествование эволюции техники

Идентификация лиц как методика существует уже более 50 годов. Первые пробы машинного изучения лица были предприняты еще в 1960-х годах в лабораториях США. Тогда ЭВМ умели лишь выделять контуры лица и определять расстояния между глазами и губами на черно-белых фотографиях.

Изначальные бизнес системы возникли в девяностых годах, но они были неидеальны: работали медленно и часто давали сбои. Только с эволюцией синтетических сетей и таких площадок, как Vulkan Platinum, сильных мобильных процессоров идентификация лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным сканированием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие начали интегрировать личные решения.

Ключевые стадии действия механизма определения

Процесс определения лица можно примерно поделить на несколько ключевых этапов:

1. Обнаружение лица — устройство распознает наличие людского лица в изображении.
2. Выделение характеристик — механизм исследует контуры физиономии: очертания зрительных органов, носа, губ, расположение бровей.
3. Построение шаблона — создаётся неповторимый виртуальный отпечаток (faceprint) на основе определённых признаков.
4. Сравнение с стандартом — созданный образец сверяется с записанной при регистрации биометрической информацией владельца.
5. Принятие решения — если соответствие достаточно значительное, смартфон деблокируется.

Любой из этих шагов запрашивает особых методов и улучшений для оперативной работы непосредственно на девайсе.

Железные составляющие: что прячется внутри

Стандартная фронтальная камера.

Самый простой способ идентификации лица применяет исключительно переднюю камеру смартфона мобильного устройства. Такой способ реализован во многих бюджетных версиях Android-девайсов.

Преимущества:

• Не требует дополнительных сенсоров.
• Быстро функционирует при качественном освещённости.

Минусы:

• Просто одурачить фотографией или видеозаписью.
• Плохо функционирует при низком свете или нестандартных ракурсах.

ИК камера и точечный проектор

Более продвинутые системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология лежит в основе Face ID от Apple.

Каким способом это действует:

• Точечный проекционный прибор проецирует на физиономию использующего невидимую сетку из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 пятен).
• Инфракрасная камера записывает изменение формы данной решетки по плоскости лица.
• Создаётся 3D глубинная карта глубинности, что практически неподвластна для подделки типичной фото или маскировкой.

Плюсы

• Надёжная деятельность даже в полной тьме.
• Большая защита к фальсификациям.
• Точность идентификации свыше 99%.

Добавочные датчики

В некоторых аппаратах используются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые измеряют время движения света до объекта и обратно; Трехцветные-датчики дальности; специальные лазерные лидары для создания более детализированной 3D-модели лица.

Эти технологии применяются чаще всего во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные алгоритмы: синтетический интеллект в действии

Современные системы идентификации лиц неосуществимы при отсутствии эксплуатации искусственного интеллекта и машинного обучения. Именно благодаря таким технологиям, как Vulkan Platinum, устройство в состоянии узнавать юзера даже при изменениях внешности: новая причёска, растительность на лице, оптика или косметика не становятся помехой для разблокировки.

Распознавание лица

В начальном стадии алгоритм должна мгновенно обнаружить образ лица в пределах полного снимка камеры. Для этой задачи используются многоуровневые классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые подготовлены идентифицировать человеческие лица среди множества других объектов.

Пример: процесс MTCNN может находить облик даже с частичном перекрытии (например, шарфом или ладонью).

Определение ключевых моментов

После идентификации лица механизм, такая как Vulkan Platinum, определяет расположение ключевых точек: уголки глаз, кончик носа, края губ и так далее. Обычно задействуется от 68 до 128 ключевых меток на лицевой поверхности.

Это необходимо для выравнивания картинки: если пользователь находится с телефон под углом, или повернул головку, программа “выпрямляет” картинку до нормального состояния для дальнейшего анализа.

Формирование биометрии шаблона

Далее искусственная сеть строит компактное числовое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 вещественных чисел.

Этот шаблон крайне затруднительно имитировать: он не сохраняет само картинку юзера, а лишь уникальные особенности его вида, что делает его идеальным для таких площадок, как Вулкан Казино Платинум.

Сопоставление и осуществление заключения

Когда человек желает разблокировать мобильник взглядом, программа воспроизводит все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает заданный уровень (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, разблокируется; если нет — доступ не предоставляется.

Адаптация к трансформациям внешности

Интересная характеристика нынешних системы — способность самообучения. Если вы регулярно открываете смартфон с свежей стрижкой или оптикой, алгоритм постепенно модернизирует базовый модель вашего лица для увеличения точности действия без ухудшения безопасности.

Защита биометрии данных.

Многие юзеры опасаются сохранять свои био-идентификационные данные на мобильном устройстве из-за вероятности потери данных или хакерской атаки. Некоторые компании, вроде Вулкан Казино Платинум, предлагают варианты для увеличения защиты сведений клиентов.

• Локальное сохранение: Большинство аппаратов записывает био-идентификационные модели только внутрь защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они никогда не выходят из устройство и не доступны в том числе изготовителю.

• Шифрование: Все сведения хранятся только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Приложения третьих разработчиков не имеют прямого возможности доступа к биометрическим данным; они могут лишь запрашивать факт верификации личности через системный API.

Стоит упомянуть значимую особенность: в случае, если кто-либо достанет физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество изготовители осуществляют меры безопасности от неосознанного разблокирования — например, просят раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются типы распознавания лиц?

В настоящее время можно различить 3 главных подхода к выполнению этой функции:

Программное 2D определение

Применяется только фронтальная камера без дополнительных сенсоров дистанции. Подобный подход наблюдается обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость реализации; минимальная стоимость; скоростная работа при хорошем освещении.
Минусы: легко ввести в заблуждение снимком; ненадежная функционирование ночью; низкая безопасность.

Аппаратное трёхмерное оцифровка

Использует ИК видеокамеру + проекционный модуль пикселей + датчики дистанции (Face ID от Apple; подобные технологии у Huawei Mate).
Преимущества: большая достоверность; не получится обмануть изображение/видеозапись; устойчивая деятельность в любых условиях освещения.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с интеграцией ИИ

Задействуют комбинацию софтверных методов + техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные товары, например Vulkan Platinum и Google Pixel Face Unlock новейших версий, сочетают фронталку c ИК сенсором движения Soli Radar для защиты от подделок руками/масками/видеодисплеями чужих устройств.

Образцы использования разнообразных техник

• iPhone серии X/11/12/13/14 применяют только аппаратное трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition впервые представил подобие Face ID в ряду Android.
• Samsung Galaxy S10 модель/S20 имеют как софтверное 2D распознавание по изображению фронталкой, так и сканер радужки глаза.
• Huawei Mate20 Pro задействует систему из ИК-подсветки + Dot Projector + ToF-сенсор

Проблемы охраны и ошибочные сигналы

Несмотря на поразительный успехи техники за последние годы, совершенных систем пока не имеется:

1. Возможность мошенничества: Доступные мобильники просто “разблокируются” четкой снимком хозяина или роликом с экрана другого устройства.
2. Идентичные близняшки: Даже самые идеальные системы могут перепутать между монозиготными близнецами либо семьями с очень схожей внешностью.
3. Метаморфозы облика: Внезапное утрата веса/набор веса, косметические процедуры или повреждения в некоторых случаях требуют обновления данных биометрии.
4. Условия записи: Яркая освещённость солнечным светом либо плотная затенение могут снизить верность распознавания признаков.

Ниже пара подсказок для защищённому применению:

• Для важных операций всегда применяйте двухфакторную аутентификацию;
• Не включайте функцию “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
• Постоянно обновляйте ПО мобильного устройства для защиты от современных угроз;
• Включайте опцию “Требовать открытых глаз” в тех местах, где она имеется.

В каких местах ещё используется технологии помимо мобильных телефонов?

Пускай предмет этой работы сосредоточена на конкретно смартфонам и планшетам, стоит упомянуть о альтернативных областях использования технологии:

• Контроль прохода в деловых центрах и жилых домах;
• Платёжные терминалы банков (“Face Pay”);
• Цифровые паспорта современного поколения;
• Установки видеоконтроля городских подразделений;
• Механизация регистрации посещаемости школ/институтов;
• Авторизация пользователей ПК/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — хватит пройти через барьер без пластика или мобильника! Схожие программы осуществляются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как изменяется техпроцесс в нынешнее время?

Любой годик возникают новые концепции для усовершенствования уровня работы систем распознавания лиц:

1. Увеличивается чёткость сенсоров — чем больше информации фиксируется фотоаппаратом/датчиками глубины, тем меньше шанс неточности;
2. Улучшаются искусственные интеллекты — новейшие конструкции вида MobileNetV3 дают возможность быстро адаптироваться к свежим чертам внешности владельца непосредственно на девайсе без отправки данных в облако.
3. Улучшаются технологии антиспуфинга — теперь смартфоны умеют распознавать настоящие живые облики от неподвижных фото/маскировок по микроскопическим микродвижениям.
4. Синхронизация со умными устройствами — интеллектуальные часы могут авто закрыть доступ к мобильный телефон, если пользователь отошёл далеко.
5. Проявляются смешанные системы — к примеру комбинирующие аудио опознание + облик + отпечаток пальца.

Итак, какие тренды очень популярны на сегодняшний день:

1) Миниатюризация деталей

Производители намереваются уменьшить размер выреза (“чёлки”) для датчики на экране за счёт внедрения маленьких ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Переработка прямо на девайсе

Для улучшения приватности всё более обработки данных выполняется на месте без отправки информации во внешний облачный услугу.

3) Упорядочивание стандартов

Google активно продвигает эталон BiometricPrompt API, с целью чтобы аналогичные площадки, как Вулкан Платинум, и все Android-приложения были совместимы с всеми формами биометрии унифицированно.

Что подобрать на сегодня?

Когда вам нужна максимальная защита данных, остановите выбор на передовые аппараты со встроенным ИК-проектором или ToF-сенсором глубины.

• iPhone каждого актуальных моделей
• Huawei Partner/P Series ряда
• Mi Pro
• Vivo X серии
• Оппо Обнаружить X серий.

Если финансы ограничен – лучше предпочесть классическим средствам защиты (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в Вулкан Платинум, применять только как опциональную возможность удобства.

Как улучшить практичность использования функции?

Есть некоторые хитростей для людей, кто уже применяет разблокировку через лицо:

1. Регулярно обновляйте свою изображение-шаблон, если сильно трансформируется облик.
2. Не упускайте из виду протирать линзу фронтальной камеры – разводы могут понизить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам включает камеру как только вы берёте его в руки.
4. В процессе регистрационного процесса старайтесь держать лицо ровно впереди камеры без резкого наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отвернулись от экрана.

Возможности прогресса инноваций

В ближайшие периоды можно предвкушать развития полностью бесконтактных способов распознавания персоны сразу по нескольким биометрическим параметрам одновременно: физиономия + голос + походка + манипуляции руками!

Также предполагается появление свежих способов охраны конфиденциальности – скажем, переменное изменение электронного шаблона после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых захватывающих технологий нашего эпохи! Она обеспечивает общение со мобильным устройством проще чем когда-либо прежде, и такие приложения, как Вулкан Казино Платинум, могут существенно повысить ваш опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы понимаете, как работает эта система внутри, – будете в состоянии осознаннее выбирать свой очередной устройство!