Как действует идентификация лиц в смартфонах

Зачем мы предпочитаем разлочивание по лицевому распознаванию

В прошлые времена определение лиц стало одной из наиболее востребованных опций для деблокировки смартфонов. Всего пару годков тому назад основная часть пользователей довольствовались PIN-кодами, паролями или сканерами отпечатков пальцев. Но при появлением таких технологий, как вулкан россия, нам достаточно лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Что превращает данную особенность очень нужной? Во-первых, это удобно: не нужно удерживать в памяти трудные пароли или находить правильный палец в тьме. Во-вторых, это мгновенно: современные программы узнают лицо практически за доли секунды. В-третьих, это чувство футуристичности — будто в кинолентах про vulkan russia разведчиков.

Впрочем за этой на первый взгляд несложностью скрывается весь универсум трудных техник и инженерных разработок. Давайте исследовать, как именно функционирует фейсканирование в современных смартфонах, какие существуют технологии, насколько они защищены и что нас предстоит.

Короткая история эволюции техники

Идентификация лиц как технология имеется уже более пятидесяти годов. Первые эксперименты автоматизированного изучения лица были предприняты еще в 1960-х годы в научных учреждениях США. Тогда компьютеры умели лишь определять очертания головы и определять расстояния между глазами и ртом на черно-белых изображениях.

Начальные торговые системы стали доступны в 1990-х годах, но они были несовершенны: действовали неспешно и часто давали сбои. Только с прогрессом синтетических сетей и таких систем, как вулкан россии, мощных мобильных микросхем определение лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным распознаванием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие стали интегрировать личные решения.

Ключевые этапы работы системы идентификации

Процесс распознавания лица можно примерно поделить на несколько основных этапов:

1. Идентификация лиц — камера выявляет существование гуманного лица в кадре.
2. Выделение признаков — система анализирует особенности физиономии: конфигурацию глаз, обонятельного органа, губ, положение надбровных дуг.
3. Построение шаблона — создаётся особенный виртуальный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со эталоном — созданный образец сверяется с зафиксированной при внесении биометрической данными владельца.
5. Принятие определения — если совпадение достаточно значительное, смартфон деблокируется.

Любой из указанных этапов запрашивает индивидуальных процедур и оптимизаций для быстрой работы прямо на устройстве.

Технические составляющие: что прячется внутри них

Типичная фронтальная камера.

Простейший простой метод определения лица использует только переднюю камеру смартфона смартфона. Данный способ осуществлён во многих доступных версиях Android-устройств.

Сильные стороны:

• Не требует внешних сенсоров.
• Оперативно функционирует при качественном освещённости.

Отрицательные стороны:

• Просто ввести в заблуждение изображением или видео.
• Плохо действует при низком освещении или нестандартных углах обзора.

Инфракрасная камера и пунктирный проектор

Более продвинутые системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология лежит в основе Face ID от Apple.

Каким образом это функционирует:

• Точечный проектор проецирует на облик использующего невидимую сетку из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 пятен).
• Инфракрасная устройство регистрирует изменение формы этой сетки по поверхности физиономии.
• Формируется трёхмерная карта глубинности, что почти что неподвластна для фальсификации типичной снимком или маской.

Преимущества

• Надёжная работа даже в полной темноте.
• Высокая защита к имитациям.
• Точность идентификации выше 99%.

Дополнительные датчики

В некоторых устройствах задействуются также вспомогательные сенсоры: ToF (Time-of-Flight), которые измеряют период распространения света до предмета и обратно; Трехцветные-датчики глубины; специальные оптические дальномеры для создания более аккуратной 3D-модели лица.

Эти разработки используются наиболее часто во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: искусственный интеллект в работе

Нынешние механизмы идентификации физиономий немыслимы без использования ИИ и machine learning. Именно благодаря таким разработкам, как вулкан россии, гаджет в состоянии распознавать владельца даже при метаморфозах внешнего вида: новая стрижка, растительность на лице, очки или косметика не становятся помехой для деблокировки.

Детектирование лица

При стартовом стадии система должна оперативно найти ликовое изображение внутри полного снимка камеры. Для данной цели применяются каскадные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые натренированы идентифицировать лиц человека среди множества других объектов.

Пример: метод MTCNN может находить физиономию даже при неполном перекрытии (например, шалью или ладонью).

Идентификация основных моментов

После идентификации лица система, такая как вулкан россии, определяет местоположение основных точек: кончики глаз, верхушка носа, контуры губ и так далее. Обычно применяется от 68 до 128 ключевых маркеров на лице.

Данное нужно для стабилизации визуала: если пользователь держит смартфон под углом, или склонил голову, программа « выпрямляет » картинку до обычного угла для дальнейшего анализа.

Формирование биометрии модели

Далее нейронная сеть строит сжатое числовое представление (« эмбеддинг ») лица пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 вещественных чисел.

Данный шаблон крайне сложно имитировать: он не удерживает непосредственно фото пользователя, а лишь особенные черты его вида, что делает его идеальным для таких платформ, как vulkan russia.

Сравнительный анализ и осуществление решения

В случае, когда человек желает разблокировать мобильник глазами, система осуществляет все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый порог (обычно больше 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ запрещается.

Адаптация к трансформациям внешнего вида

Увлекательная особенность современных системы — способность самостоятельного обучения. Если вы постоянно открываете телефон с обновленной прической или очками, алгоритм постепенно освежает основной образец вашего облика для увеличения точности действия без ухудшения безопасности.

Безопасность биометрических информации.

Множество клиенты боятся хранить свои биометрические данные на телефоне из-за вероятности утечки информации или взлома устройства. Иные фирмы, например vulkan russia, предлагают решения для повышения безопасности данных пользователей.

• Локальное сохранение: Преимущественно устройств хранит био-идентификационные шаблоны лишь внутри безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Они никогда не выходят из устройство и недоступны в том числе изготовителю.

• Шифрование: Все информация хранятся только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция приложений: Приложения внешних девелоперов не имеют непосредственного доступа к биометрическим; они могут лишь требовать факт подтверждения личности через системный API.

Следует упомянуть значимую особенность: если кто-либо получит физический доступ к вашему телефону (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество изготовители осуществляют систему защиты от автоматического разблокирования — в частности, заставляют открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются категории распознавания лиц?

Сегодня можно определить выделить три основных подхода к выполнению этой операции:

Софтверное плоское идентификация

Используется только лицевая камера без вспомогательных детекторов дистанции. Этот подход используется обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность реализации; умеренная стоимость; оперативная функционирование при достаточном свете.
Минусы: несложно ввести в заблуждение снимком; неустойчивая работа ночью; слабая охрана.

Аппаратное 3D оцифровка

Применяет ИК камеру + проекционный модуль пикселей + сенсоры дистанции (Face ID у Apple; подобные технологии у Huawei Mate).
Достоинства: значительная надёжность; нельзя исказить фото/видео; стабильная функционирование в любых условиях освещения.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (« чёлка »)

Комбинированные методы с интеграцией ИИ

Используют комбинацию программируемых методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (« anti-spoofing »). Например, такие изделия, как вулкан россии и Google Pixel Face Unlock современных версий, комбинируют фронтальную камеру c инфракрасным датчиком мобильности Soli Radar для защиты от фальсификаций руками/масками/видеоэкранами посторонних устройств.

Примеры применения разнообразных способов

• iPhone модели X/11/12/13/14 используют только аппаратное трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз внедрил эквивалент Face ID среди Android.
• Samsung Galaxy S10/S20 имеют как программное 2D определение по фото селфи-камерой, так и датчик ириса глаза.
• Huawei Mate20 Pro задействует систему из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Трудности безопасности и ложные сигналы

Несмотря на замечательный развитие инноваций за последние лет, совершенных системы пока не существует:

1. Шанс подвоха: Недорогие телефоны без труда открываются качественной снимком хозяина или же видео с дисплея иного гаджета.
2. Идентичные близнецы: Даже самые идеальные системы могут перепутать между однояйцевыми близнецами либо семьями с очень аналогичной внешностью.
3. Изменения внешнего вида: Резкое утрата веса/увеличение массы тела, пластические операции либо повреждения иногда требуют повторной регистрации биометрии.
4. Условия съёмки: Сильная освещённость солнечным светом или плотная тень могут уменьшить точность определения признаков.

Вот несколько рекомендаций по защищённому эксплуатации:

• Для критически важных операций всегда используйте двухфакторную аутентификацию;
• Не активируйте возможность « Разблокировка по лицу » на дешёвых устройствах без ИК-сенсоров;
• Систематически обновляйте прошивку ПО смартфона для предотвращения угроз от новых видов атак;
• Включайте функцию « Требовать раскрытых глаз » там, где она есть.

Где также используется технология помимо смартфонов?

Пускай предмет нашей публикации касается конкретно смартфонам и планшетам, стоит упомянуть о других сферах применения технологии:

• Контроль доступа в офисах и многоквартирных зданиях;
• Платёжные аппараты финансовых учреждений (« Face Pay »);
• Виртуальные идентификационные документы последнего типа;
• Комплексы видеонаблюдения городских сервисов;
• Автоматизация отслеживания присутствия образовательных учреждений/институтов;
• Аутентификация участников ПК/ноутбуков.

Например: В московском метро уже проверяется система оплаты проезда по фейсу (« Face Pay ») — нужно лишь пройти через барьер без пластика или мобильника! Аналогичные проекты реализуются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким образом меняется техпроцесс в наше время?

Любой годик появляются современные идеи для улучшения уровня функционирования систем распознавания лиц:

1. Увеличивается чёткость сенсоров — чем больше деталей фиксируется фотоаппаратом/датчиками глубины, тем меньше вероятность ошибки;
2. Улучшаются искусственные интеллекты — новейшие структуры модели MobileNetV3 дают возможность быстро обучаться новым чертам облика обладателя напрямую на гаджете без отправки данных в облако.
3. Совершенствуются технологии антиспуфинга — теперь мобильные устройства могут отличать реальные анимированные лица от неподвижных снимков/маскировок по незаметным микродвижениям.
4. Синхронизация со смарт-гаджетами — интеллектуальные часы могут автоматически блокировать смартфон, если владелец ушёл далеко.
5. Возникают смешанные устройства — в частности совмещающие голосовую идентификацию + физиономию + дактилоскопический след.

Вот, те направления особенно популярны на сегодняшний день:

1) Миниатюризация элементов

Изготовители намереваются минимизировать размер отверстия (« чёлки ») под сенсоры на дисплее за счёт внедрения компактных ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Переработка прямо на аппарате

Для улучшения личной безопасности всё более расчётов выполняется внутри устройства без пересылки данных во внешний облачный услугу.

3) Стандартизация регламентов

Google активно пропагандирует норму BiometricPrompt API, с целью чтобы подобные системы, например как вулкан россия, и все Android-программы могли взаимодействовать с различными типами биометрии унифицированно.

Что подобрать сегодня?

Если тебе нужна максимальная безопасность данных, остановите выбор на топовые устройства со встроенным ИК-проектором или ToF-сенсором глубины.

• iPhone каждого последних версий
• Huawei Partner/P ряда
• Mix Professional
• Vivo X линейки
• Оппо Find Икс линейки.

Если бюджет ограничен – лучше отдавать предпочтение классическим средствам защиты (PIN-код/сканер отпечатка), а опцию « разблокировка по лицу », такую как в вулкан россия, задействовать только как дополнительную возможность удобства.

Каким образом повысить комфорт использования возможности?

Есть пара хитростей для людей, кто уже использует разблокировку по лицу:

1. Периодически меняйте свою изображение-шаблон, если значительно изменяется внешность.
2. Не забывайте очищать объектив фронтальной камеры – пятна могут снизить четкость!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам активирует камеру как только вы поднимаете его.
4. В процессе регистрационного процесса постарайтесь удерживать лицевую часть неподвижно напротив видеоустройства без резкого наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отворачиваетесь от экрана.

Перспективы прогресса инноваций

В предстоящие годы можно предполагать возникновения полностью безконтактных способов идентификации индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + звучание + походка + жесты рук!

Также предполагается возникновение свежих подходов обеспечения конфиденциальности – скажем, переменное корректировка диджитал образца после каждой успешной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – единственная из наиболее интересных техник нашего времени! Она предоставляет взаимодействие со мобильным устройством комфортнее чем раньше, и такие аппы, как vulkan russia, могут существенно повысить ваш юзерский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы осведомлены, как устроена эта система в деталях, – сможете осознаннее определять свой следующий девайс!