Каким способом функционирует определение лицевых образов в смартфонах

Для чего мы останавливаемся на разблокировку по фейсу

В недавние времена идентификация физиономий стало одной из наиболее востребованных функций для разблокировки смартфонов. Всего несколько годов тому назад основная часть пользователей довольствовались PIN-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением таких технологий, например вулкан россия, нам достаточно лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Что обуславливает эту возможность настолько популярной? Во-первых, это комфортно: не нужно помнить сложные пароли или искать правильный палец в мраке. Кроме того, это быстро: современные алгоритмы распознают лицо практически за мгновения ока. В-третью очередь, это чувство футуризма — будто в кинолентах про вулкан казино разведчиков.

Тем не менее за данной видимой простотой прячется полный универсум сложных методов и инженерных концепций. Позвольте нам разобраться, как конкретно функционирует фейсканирование в новейших гаджетах, какие бывают методы, насколько они надёжны и что нас ждёт впереди.

Короткая повествование эволюции техники

Идентификация лиц как методика имеется уже более пятидесяти лет. Первые пробы машинного изучения лица были сделаны еще в 1960-х годах в исследовательских центрах США. Тогда вычислительные машины могли лишь выделять очертания черепа и измерять расстояния между зрачками и устами на черно-белых снимках.

Первые коммерческие платформы стали доступны в 1990-х годах, но они были далеки от совершенства: функционировали медленно и часто давали сбои. Только с прогрессом искусственных сетей и таких систем, как вулкан россии, высокопроизводительных мобильных микросхем распознавание лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным распознаванием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие стали внедрять личные решения.

Ключевые стадии действия устройства определения

Процесс определения лица можно ориентировочно сегментировать на несколько основных этапов:

1. Идентификация лица — камера определяет существование людского образа в изображении.
2. Извлечение признаков — механизм исследует контуры облика: конфигурацию глаз, носа, губ, положение надбровных дуг.
3. Построение модели — создаётся неповторимый виртуальный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со стандартом — сформированный модель сравнивается со зафиксированной при внесении биометрической данными владельца.
5. Принятие определения — если совпадение достаточно значительное, смартфон открывается.

Любой из этих стадий запрашивает специальных алгоритмов и улучшений для скорой работы непосредственно на девайсе.

Аппаратные элементы: что скрыто внутри

Обычная фронтальная камера.

Простейший простой способ идентификации лица использует только лицевую камеру смартфона смартфона. Такой подход реализован во многочисленных бюджетных версиях Android-девайсов.

Сильные стороны:

• Необходимо нуждается в дополнительные датчиков.
• Шустро работает при качественном свете.

Недостатки:

• Просто одурачить фотографией или видеозаписью.
• Неправильно действует при плохом свете или нестандартных ракурсах.

Инфракрасная фотокамера и точечный проектор

Более усовершенствованные системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс лежит в основе Face ID от Apple.

Каким способом это функционирует:

• Точечный проектор проецирует на лицо юзера невидимую сетку из тысяч инфракрасных меток (например, Face ID задействует около 30 000 точек).
• Инфракрасная камера фиксирует изменение формы этой решетки по поверхности физиономии.
• Получается 3D глубинная карта глубинности, которая практически неподвластна для имитации типичной снимком или маской.

Преимущества

• Надёжная деятельность даже в полной тьме.
• Высокая сопротивляемость к подделкам.
• Точность определения более 99%.

Дополнительные сенсоры

В определённых девайсах используются также дополнительные сенсоры: ToF (Time-of-Flight), которые фиксируют время прохождения луча до цели и обратно; RGB-датчики дальности; специальные лазерные дальномеры для построения более аккуратной 3D-модели физиономии.

Эти разработки применяются в основном во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: искусственный интеллект на действии

Текущие системы опознания лиц неосуществимы в отсутствие использования artificial intelligence и машинного обучения. Именно вследствие таким технологиям, как вулкан россии, аппарат может идентифицировать владельца даже при изменениях внешнего вида: новая стрижка, борода, очки или косметика не становятся барьером для открытия.

Обнаружение физиономии

В первом этапе система должна оперативно найти ликовое изображение среди полного кадра с камеры. Для этого используются многоуровневые классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые “обучены” распознавать человеческие лица среди множества других объектов.

Пример: метод MTCNN в состоянии находить облик даже при частичном закрытии (например, платком или рукой).

Выделение ключевых точек

После обнаружения лица механизм, такая как вулкан россии, вычисляет положение основных точек: кончики глаз, конец носа, границы губ и так далее. Как правило задействуется от 68 до 128 ключевых маркеров на лицевой поверхности.

Это требуется для нормализации изображения: если человек удерживает смартфон под наклоном, или склонил головку, программа корректирует изображение до обычного угла для дальнейшего анализа.

Создание биометрии шаблона

Далее нейронная сеть строит сжатое числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 вещественных чисел.

Этот формат очень затруднительно сфальсифицировать: он не хранит само картинку юзера, а лишь особенные характеристики его вида, что делает его оптимальным для таких платформ, как vulkan russia.

Сравнительный анализ и принятие выбора

Когда пользователь хочет разблокировать телефон глазами, система воспроизводит все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный порог (обычно выше 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ не предоставляется.

Привыкание к изменениям облика

Увлекательная характеристика нынешних систем — возможность самообучения. Если ты часто разблокируете телефон с новой прической или очками, система постепенно освежает базовый модель вашего внешности для увеличения точности действия без снижения уровня безопасности.

Защита биометрии данных.

Большинство пользователи боятся держать свои био-идентификационные данные на смартфоне из-за вероятности утечки информации или взлома устройства. Определенные фирмы, такие как vulkan russia, предлагают варианты для повышения защиты сведений юзеров.

• Локальное сбережение: Преимущественно девайсов записывает биометричные образцы только в пределах защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не оставляют устройство и не доступны включая создателю.

• Шифрование: Все сведения хранятся только в кодированном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Приложения внешних разработчиков не имеют прямого доступа к биометрическим; они могут лишь требовать подтверждение подтверждения личности через системный API.

Необходимо подчеркнуть значимую подробность: если какой-то человек получит доступ к вашему телефону физически (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество компании реализуют систему защиты от “слепого” разблокирования — в частности, заставляют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются категории определения лиц?

В настоящее время можно различить 3 главных метода к выполнению этой функции:

Программируемое двухмерное определение

Эксплуатируется только фронтальная видеокамера без вспомогательных датчиков дистанции. Подобный метод наблюдается обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость осуществления; низкая стоимость; оперативная деятельность при качественном освещении.
Минусы: несложно ввести в заблуждение снимком; нестабильная деятельность ночью; слабая защищенность.

Техническое 3D оцифровка

Использует ИК видеокамеру + проекционный модуль точек + датчики глубины (Face ID у Apple; подобные решения у Huawei Mate).
Плюсы: большая надёжность; не получится подделать изображение/видеозапись; стабильная функционирование в любых условиях освещения.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные способы с интеграцией ИИ

Задействуют комбинацию софтверных методов + техническую обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, например вулкан россии и Google Pixel Face Unlock новейших поколений, объединяют фронталку c ИК сенсором движения Soli Radar для защиты от фальсификаций жестами/масками/видеодисплеями посторонних устройств.

Иллюстрации эксплуатации разных методов

• iPhone линейки X/11/12/13/14 используют только физическое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition первый раз внедрил подобие Face ID в ряду Android.
• Samsung Galaxy S10 версия/S20 поддерживают как софтверное плоское распознавание по изображению фронтальной камерой, так и сканер радужки глаза.
• Huawei Mate20 Pro задействует систему из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Трудности защиты и неверные срабатывания

Несмотря на замечательный прогресс технологий за последние лет, идеальных систем пока не имеется:

1. Возможность обмана: Бюджетные мобильники легко доступны качественной фотографией пользователя или же видеозаписью с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые безупречные системы могут спутать между монозиготными близнецами либо родичами с очень похожей внешностью.
3. Изменения облика: Внезапное снижение веса/набор веса, пластические операции либо повреждения иногда требуют повторной регистрации биометрических данных.
4. Условия записи: Яркая освещённость солнцем или же глубокая затенение могут снизить точность распознавания признаков.

Ниже пара советов по безопасному применению:

• Для критически важных операций всегда применяйте двухэтапную аутентификацию;
• Не запускайте опцию “Разблокировка по лицу” на недорогих моделях без ИК-сенсоров;
• Постоянно апгрейдите прошивку мобильного устройства для обеспечения безопасности от современных угроз;
• Включайте функцию “Требовать открытых глаз” там, где она имеется.

Где ещё используется технология за исключением смартфонов?

Пускай предмет нашей публикации сосредоточена на конкретно смартфонам и планшетам, необходимо сказать о прочих направлениях внедрения технологии:

• Мониторинг входа в офисах и многоквартирных зданиях;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Виртуальные удостоверения личности современного типа;
• Комплексы видеомониторинга городских подразделений;
• Автоматизация учёта явки школ/институтов;
• Вход участников ПК/ноутбуков.

Например: В столичном метро уже тестируется система оплаты проезда по фейсу (“Face Pay”) — хватит пройти через турникет без пластика или телефона! Схожие программы реализуются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Как изменяется техпроцесс в нынешнее время?

Любой годик проявляются свежие идеи для улучшения уровня деятельности систем лицевого распознавания:

1. Увеличивается разрешение датчиков — чем больше элементов фиксируется фотоаппаратом/датчиками глубины, тем меньше шанс погрешности;
2. Совершенствуются искусственные интеллекты — новейшие структуры вида MobileNetV3 позволяют оперативно адаптироваться к свежим характеристикам вида владельца непосредственно на девайсе без отправки данных в облако.
3. Развиваются методы антиспуфинга — теперь мобильные устройства могут различать реальные живые облики от неподвижных фотографий/масок по мельчайшим движениям кожи.
4. Интеграция со интеллектуальными приборами — интеллектуальные часы могут автоматически заблокировать телефон, если обладатель удалился на значительное расстояние.
5. Возникают гибридные системы — например совмещающие речевую аутентификацию + лицо + дактилоскопический след.

Вот, те тренды в особенности актуальны на сегодняшний день:

1) Миниатюризация деталей

Компании намереваются минимизировать габариты отверстия (“чёлки”) под датчики на экране за счёт внедрения миниатюрных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработывание прямо на аппарате

Для увеличения конфиденциальности всё больше обработки данных происходит внутри устройства без отправки данных во внешний облачный сервис.

3) Упорядочивание регламентов

Google энергично продвигает эталон BiometricPrompt API, чтобы такие системы, например как вулкан россия, и все Android-программы могли взаимодействовать с любыми видами биометрии стандартизированно.

Какое выбрать сегодня?

Когда тебе важна наивысшая защита информации, выбирайте топовые модели с интегрированным ИК-излучателем или ToF-датчиком глубины.

• iPhone всех существующих актуальных моделей
• Huawei Mate/P серии
• Xiaomi Professional
• Vivo X линейки
• Оппо Find X серии.

Если финансы невелик – лучше предпочесть традиционным средствам безопасности (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в вулкан россия, использовать только как дополнительную возможность комфорта.

Как повысить комфорт функционирования возможности?

Есть несколько советов для людей, кто уже применяет функцию распознавания лица:

1. Регулярно обновляйте свою изображение-шаблон, если сильно трансформируется облик.
2. Не пренебрегайте протирать объектив фронтальной камеры – загрязнения могут уменьшить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате мобильник сам активирует камеру как только вы берёте его в руки.
4. В процессе регистрационного процесса постарайтесь сохранять лицевую часть неподвижно напротив видеоустройства без резкого наклона головы.
5. Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвели взгляд от экрана.

Возможности развития технологии

В предстоящие времена можно предвкушать развития полностью дистанционных способов опознания человека сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + звучание + шаги + манипуляции руками!

Также вероятно развитие свежих способов защиты конфиденциальности – например, переменное модификация цифрового паттерна после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – одна из наиболее интересных инноваций нашего периода! Она предоставляет взаимодействие со телефоном проще чем раньше, и такие приложения, как vulkan russia, могут существенно оптимизировать ваш опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы знаете, как функционирует эта методика изнутри, – будете в состоянии более осмысленно определять свой будущий гаджет!