Каким образом работает идентификация лиц в мобильных устройствах

Для чего мы предпочитаем разлочивание по лицевому распознаванию

В недавние времена распознавание лиц является одной из наиболее востребованных функций для разблокировки умных телефонов. Всего пару годов назад большинство пользователей довольствовались PIN-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением таких технологий, как вулкан россия, нам достаточно лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какая вещь делает данную возможность такой востребованной? Во-первых, это удобно: не нужно удерживать в памяти замысловатые пароли или отыскивать нужный палец в темноте. Кроме того, это быстро: современные программы идентифицируют лицо буквально за доли секунды. В-третьих, это чувство футуризма — словно в кинолентах про вулкан россия разведчиков.

Однако за такой на первый взгляд легкостью прячется полный универсум комплексных методов и инженерных решений. Попробуем разобраться, как точно действует распознавание лиц в современных гаджетах, какие бывают технологии, насколько они защищены и что нас предстоит.

Сжатая хроника прогресса технологии

Распознавание лиц как технология существует уже более 50 годов. Начальные эксперименты автоматического изучения лиц были сделаны еще в 1960-х годах в лабораториях США. Тогда вычислительные машины могли лишь обозначать силуэты головы и измерять дистанции между очами и устами на ахроматических фотографиях.

Начальные торговые системы возникли в девяностых годах, но они были несовершенны: функционировали медленно и нередко ошибались. Только с эволюцией искусственных сетей и таких платформ, как вулкан россии, мощных мобильных процессоров определение лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с надёжным трёхмерным идентификацией лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и другие начали интегрировать свои разработки.

Главные шаги действия механизма идентификации

Процесс распознавания лица можно примерно сегментировать на несколько важных этапов:

1. Идентификация лиц — устройство определяет присутствие людского образа в кадре.
2. Извлечение признаков — механизм анализирует особенности физиономии: конфигурацию глаз, обонятельного органа, губ, положение бровей.
3. Построение структуры — создаётся уникальный виртуальный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со образцом — полученный модель сравнивается со записанной при внесении биометрической данными владельца.
5. Принятие решения — если соответствие достаточно существенное, смартфон разблокируется.

Любой из данных стадий требует специальных методов и усовершенствований для скорой работы прямо на устройстве.

Технические составляющие: что скрыто в их недрах

Стандартная фронтальная камера.

Самый легкий способ идентификации физиономии использует исключительно лицевую камеру смартфона смартфона. Данный способ внедрён во различных бюджетных моделях Android-девайсов.

Сильные стороны:

• Необходимо потребляет дополнительных датчиков.
• Быстро функционирует при хорошем освещённости.

Минусы:

• Несложно ввести в заблуждение фотографией или видеозаписью.
• Плохо функционирует при плохом освещённости или непривычных ракурсах.

Инфракрасная камера и пунктирный проекционный аппарат

Более совершенные системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика является основой Face ID от Apple.

Как это работает:

• Точечный проектор проецирует на физиономию пользователя невидимую структуру из тысяч инфракрасных точек (например, Face ID задействует около 30 000 меток).
• ИК камера регистрирует изменение формы данной решетки по плоскости лица.
• Получается 3D карта глубинности, которая практически невозможна для имитации типичной снимком или маской.

Преимущества

• Надёжная работа даже в полной неосвещённости.
• Большая защита к имитациям.
• Точность идентификации более 99%.

Добавочные датчики

В определённых аппаратах задействуются также дополнительные сенсоры: ToF (Time-of-Flight), которые фиксируют период движения луча до предмета и обратно; RGB-датчики дальности; специальные световые дальномеры для построения более точной 3D-модели физиономии.

Эти технологии применяются чаще всего во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искуственный интеллект в действии

Современные механизмы распознавания физиономий немыслимы в отсутствие применения ИИ и machine learning. Именно благодаря таким технологиям, как вулкан россии, аппарат способно распознавать юзера даже при трансформациях внешности: новая причёска, борода, оптика или грим не становятся барьером для открытия.

Распознавание лица

В первом шаге программа необходимо оперативно обнаружить лицо в пределах целого снимка камеры. Для этой задачи задействуются каскадные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые подготовлены идентифицировать человеческие лица среди множества других объектов.

Пример: метод MTCNN может находить облик даже в случае неполном перекрытии (например, шалью или ладонью).

Идентификация ключевых аспектов

После обнаружения лица устройство, такая как вулкан россии, устанавливает расположение ключевых точек: уголки глаз, конец носа, края губ и так далее. Обычно задействуется от 68 до 128 главных маркеров на лицевой поверхности.

Данное требуется для стабилизации картинки: если человек удерживает телефон под углом, или повернул головку, программа “выпрямляет” изображение до нормального состояния для последующего изучения.

Формирование биометрического идентификатора шаблона

Далее нейросеть строит сжатое числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой образ лица длиной от 128 до 512 вещественных чисел.

Данный образец весьма затруднительно подделать: он не удерживает само картинку пользователя, а лишь исключительные особенности его вида, что делает его идеальным для таких площадок, как vulkan russia.

Сравнение и вынесение заключения

Если юзер желает разлочить телефон взглядом, программа повторяет все описанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый порог (обычно больше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ запрещается.

Привыкание к метаморфозам внешнего вида

Интересная особенность актуальных систем — способность самостоятельного обучения. Если вы регулярно доступаете к смартфон с новой укладкой или оптикой, алгоритм постепенно обновляет базовый модель вашего внешности для увеличения точности действия без снижения уровня безопасности.

Охрана биометрических данных.

Множество клиенты беспокоятся хранить свои биометрические данные на телефоне из-за угрозы утечки информации или взлома устройства. Некоторые фирмы, например vulkan russia, предоставляют решения для увеличения сохранности сведений юзеров.

• Локальное хранение: Основная часть девайсов хранит био-идентификационные модели только внутрь защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Они никогда не выходят из аппарат и не доступны включая изготовителю.

• Шифрование: Все сведения сберегаются только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция приложений: Программы третьих девелоперов не обладают непосредственного возможности доступа к биометрическим данным; они могут лишь запрашивать подтверждение подтверждения личности через системный API.

Следует упомянуть значимую особенность: если кто-либо получит доступ к вашему телефону физически (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие производители осуществляют меры безопасности от неосознанного разблокирования — например, заставляют открыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают типы идентификации лиц на изображениях?

Сегодня можно выделить выделить три основных подхода к выполнению этой функции:

Программируемое двухмерное распознавание

Применяется только лицевая видеокамера без вспомогательных датчиков дистанции. Этот подход наблюдается чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность воплощения; умеренная стоимость; быстрая работа при хорошем свете.
Минусы: просто ввести в заблуждение снимком; нестабильная функционирование ночью; низкая защищенность.

Техническое 3D оцифровка

Использует инфракрасную камеру + проекционный модуль пикселей + сенсоры дистанции (Face ID от Apple; аналогичные решения у Huawei Mate).
Достоинства: высокая достоверность; невозможно обмануть изображение/видеозапись; стабильная деятельность в любых условиях освещения.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Гибридные методы с интеграцией ИИ

Используют комбинацию программных методов + техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие товары, как вулкан россии и Google Pixel Face Unlock современных версий, объединяют фронталку c инфракрасным сенсором движения Soli Radar для предотвращения от подделок жестами/масками/видеодисплеями посторонних устройств.

Иллюстрации эксплуатации разнообразных способов

• iPhone модели X/11/12/13/14 задействуют только аппаратное трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз внедрил эквивалент Face ID в числе Android.
• Samsung Galaxy S10/S20 имеют как софтверное 2D идентификацию по фото фронтальной камерой, так и датчик радужки глаза.
• Huawei Mate20 Pro задействует систему из ИК-освещения + Dot Projector + ToF-сенсор

Вопросы безопасности и ошибочные срабатывания

Несмотря на замечательный развитие техники за последние годы, совершенных механизмов пока не наблюдается:

1. Возможность обмана: Доступные телефоны без труда доступны высококачественной фотографией пользователя или видео с экрана другого устройства.
2. Идентичные близнецы: Даже самые совершенные системы могут перепутать между монозиготными близнецами либо родичами с очень аналогичной внешностью.
3. Изменения внешности: Внезапное снижение веса/увеличение массы тела, пластические операции или повреждения порой требуют повторной регистрации биометрических данных.
4. Условия записи: Яркая засветка солнцем либо интенсивная затенение могут уменьшить точность распознавания признаков.

Вот пара подсказок по безопасному эксплуатации:

• Для важных операций всегда внедряйте двухэтапную аутентификацию;
• Не активируйте опцию “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
• Регулярно обновляйте ПО смартфона для обеспечения безопасности от новых видов атак;
• Включайте опцию “Требовать раскрытых глаз” там, где она имеется.

В каких местах ещё используется технологии кроме смартфонов?

Пускай предмет данной работы сосредоточена на именно мобильным устройствам, необходимо сказать о других сферах применения технологии:

• Мониторинг прохода в деловых центрах и многоквартирных зданиях;
• Платёжные устройства банков (“Face Pay”);
• Виртуальные паспорта современного типа;
• Системы видеомониторинга муниципальных подразделений;
• Автоматизирование регистрации посещаемости образовательных учреждений/вузов;
• Авторизация участников компьютеров/ноутбуков.

Например: В московском метро уже проверяется система оплаты проезда по лицу (“Face Pay”) — достаточно пройти через турникет без карты или мобильника! Аналогичные проекты осуществляются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким образом трансформируется технический процесс в нынешнее время?

Каждый годик проявляются свежие концепции для усовершенствования уровня деятельности систем идентификации лиц:

1. Увеличивается детализация датчиков — чем больше деталей фиксируется камерой/глубинными сенсорами, тем меньше риск погрешности;
2. Совершенствуются искусственные интеллекты — передовые архитектуры вида MobileNetV3 обеспечивают возможность скоростно адаптироваться к дополнительным чертам вида пользователя напрямую на гаджете без пересылки информации в облачное хранилище.
3. Совершенствуются методы антиспуфинга — теперь смартфоны могут различать подлинные движущиеся облики от неподвижных фото/маскировок по незаметным микродвижениям.
4. Синхронизация со смарт-гаджетами — смарт-часы могут авто блокировать смартфон, если пользователь ушёл далеко.
5. Проявляются смешанные механизмы — в частности комбинирующие аудио опознание + облик + дактилоскопический след.

Вот, какие направления особенно популярны сейчас:

1) Миниатюризация компонентов

Изготовители стараются сократить размер прорези (“чёлки”) под сенсоры на дисплее за счёт внедрения миниатюрных ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на устройстве

Для улучшения приватности всё больше расчётов выполняется локально без отправки данных во дополнительный облачный услугу.

3) Упорядочивание стандартов

Google энергично пропагандирует эталон BiometricPrompt API, с целью чтобы аналогичные системы, как вулкан россия, и каждые Android-программы могли взаимодействовать с различными типами биометрии единообразно.

Какое решить на сегодня?

Если тебе необходима наивысшая безопасность информации, подбирайте топовые устройства с интегрированным ИК-излучателем или же ToF-датчиком глубины.

• iPhone каждого новейших версий
• Huawei Companion/Series P линейки
• Mi Expert
• Vivo X линейки
• Оппо Обнаружить X линейки.

Если средства скромен – лучше отдавать предпочтение традиционным методам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в вулкан россия, применять только как опциональную возможность комфорта.

Каким способом повысить практичность работы возможности?

Есть некоторые хитростей для людей, кто уже использует функцию распознавания лица:

1. Периодически меняйте свою фото-шаблон, если сильно изменяется облик.
2. Не упускайте из виду чистить объектив фронтальной камеры – загрязнения могут снизить точность!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам запускает камеру как только вы поднимаете его.
4. При регистрации пытайтесь держать голову ровно впереди видеоустройства исключая сильного наклона головы.
5. Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отвели взгляд от экрана.

Возможности эволюции инноваций

В предстоящие годы можно ожидать появления полностью бесконтактных способов идентификации индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + голос + походка + жесты рук!

Также вероятно развитие современных способов охраны личной информации – например, динамическое изменение цифрового образца после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – единственная из очень интересных инноваций нашего эпохи! Она делает общение со смартфоном проще чем когда-либо прежде, и такие приложения, как vulkan russia, могут в разы улучшить ваш пользовательский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы знаете, как устроена эта технология в деталях, – сможете вдумчиво определять свой очередной устройство!