Как работает определение лицевых образов в мобильных устройствах

Зачем мы останавливаемся на разблокировку по лицевому распознаванию

В прошлые годы определение лиц стало одной из самых распространённых возможностей для разблокировки умных телефонов. Еще несколько годов тому назад большинство пользователей удовлетворялись PIN-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением подобных технологий, как вулкан россия, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какой аспект превращает эту функцию такой востребованной? Во-первых, это практично: не нужно удерживать в памяти трудные пароли или искать правильный палец в мраке. Кроме того, это быстро: современные системы распознают лицо практически за мгновения ока. В-третью очередь, это чувство футуризма — как будто в фильмах про vulkan russia агентов.

Тем не менее за такой на первый взгляд легкостью скрывается полный универсум сложных техник и инженерных разработок. Позвольте нам понять, как конкретно работает фейсканирование в современных смартфонах, какие бывают способы, насколько они надёжны и что нас ожидает в будущем.

Короткая хроника прогресса техники

Распознавание лиц как техника существует уже более 50 лет. Первые эксперименты машинного изучения лица были сделаны еще в 1960-х годы в научных учреждениях США. Тогда вычислительные машины способны были лишь выделять контуры лица и вычислять дистанции между глазами и губами на монохромных фотографиях.

Первые бизнес платформы появились в 1990-х годах, но они были несовершенны: действовали неспешно и часто давали сбои. Только с эволюцией синтетических сетей и таких платформ, как вулкан россии, мощных мобильных чипов определение лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с достоверным трёхмерным сканированием лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие начали внедрять личные разработки.

Главные этапы работы устройства идентификации

Процесс определения лица можно примерно сегментировать на несколько основных этапов:

1. Распознавание лиц — аппарат распознает существование людского лица в снимке.
2. Извлечение характеристик — алгоритм анализирует контуры физиономии: очертания зрительных органов, носа, губ, позицию бровей.
3. Построение модели — создаётся неповторимый цифровой отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со образцом — созданный модель сверяется со сохранённой при регистрации биометрической сведениями владельца.
5. Принятие решения — если сходство достаточно значительное, смартфон открывается.

Каждый из этих стадий требует особых процедур и усовершенствований для быстрой работы прямо на устройстве.

Технические составляющие: что прячется внутри них

Типичная передняя камера.

Наиболее несложный метод распознавания лица задействует исключительно фронтальную видеокамеру смартфона. Такой подход реализован во многих доступных вариантах Android-устройств.

Достоинства:

• Не нуждается в потребляет дополнительные сенсоров.
• Оперативно работает при достаточном свете.

Отрицательные стороны:

• Несложно одурачить изображением или видеозаписью.
• Неудачно функционирует при плохом освещении или необычных точках зрения.

Инфракрасная фотокамера и пунктирный проектор

Более совершенные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика составляет базу Face ID от Apple.

Каким способом это действует:

• Точечный устройство проекции отображает на облик пользователя невидимую сетку из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 пятен).
• ИК устройство фиксирует изменение формы данной решетки по поверхности лица.
• Получается 3D карта глубинности, что практически неосуществима для фальсификации типичной снимком или маскировкой.

Плюсы

• Надёжная деятельность даже в полной неосвещённости.
• Высокая защита к фальсификациям.
• Точность определения свыше 99%.

Дополнительные сенсоры

В отдельных устройствах применяются также дополнительные сенсоры: ToF (Time-of-Flight), которые измеряют период распространения света до объекта и обратно; RGB-датчики дальности; специальные лазерные дальномеры для создания более аккуратной 3D-модели лица.

Эти технологии применяются чаще всего во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: искусственный разум в действии

Нынешние системы идентификации физиономий неосуществимы в отсутствие эксплуатации искусственного интеллекта и machine learning. Именно из-за таким разработкам, как вулкан россии, устройство в состоянии распознавать владельца даже при метаморфозах внешности: новая укладка, растительность на лице, оптика или косметика не становятся помехой для разблокировки.

Обнаружение лица

При стартовом шаге система обязана мгновенно обнаружить ликовое изображение внутри целого снимка камеры. Для этой задачи задействуются каскадные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые подготовлены идентифицировать лица людей среди множества других объектов.

Пример: метод MTCNN в состоянии находить физиономию даже с неполном перекрытии (например, шалью или ладонью).

Определение важных аспектов

После идентификации лица система, такая как вулкан россии, устанавливает положение основных точек: края глаз, кончик носа, контуры губ и так далее. Часто задействуется от 68 до 128 ключевых меток на лице.

Данное нужно для выравнивания картинки: если пользователь находится с смартфон под наклоном, или склонил голову, программа „выпрямляет” картинку до нормального состояния для последующего изучения.

Создание биометрии модели

Далее нейронная сеть строит компактное числовое представление („эмбеддинг”) облика пользователя — своеобразный цифровой след лица длиной от 128 до 512 вещественных чисел.

Этот шаблон крайне затруднительно сфальсифицировать: он не сохраняет само картинку пользователя, а лишь уникальные особенности его облика, что делает его идеальным для таких площадок, как vulkan russia.

Сопоставление и принятие выбора

В случае, когда юзер желает разлочить смартфон взглядом, механизм осуществляет все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный уровень (обычно выше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ запрещается.

Привыкание к трансформациям внешнего вида

Увлекательная характеристика актуальных систем — возможность самообучения. Если вы часто доступаете к смартфон с обновленной укладкой или оптикой, система постепенно освежает базовый модель вашего облика для увеличения точности действия без ухудшения безопасности.

Охрана биометрии данных.

Многие юзеры беспокоятся хранить свои био-идентификационные данные на телефоне из-за риска утечки данных или взлома гаджета. Иные организации, вроде vulkan russia, предоставляют методы для повышения безопасности сведений пользователей.

• Локальное сохранение: Большинство девайсов сохраняет биометрические шаблоны только внутри защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Они никогда не покидают аппарат и не доступны в том числе производителю.

• Шифрование: Все данные сохраняются только в кодированном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Приложения внешних разработчиков не имеют непосредственного возможности доступа к биометрическим; они могут лишь требовать подтверждение верификации идентичности через системный API.

Следует упомянуть существенную особенность: в случае, если кто-либо достанет доступ к вашему телефону физически (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство изготовители внедряют систему защиты от автоматического разблокирования — к примеру, заставляют раскрыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют категории определения лиц на изображениях?

В настоящее время можно определить различить 3 ключевых способа к осуществлению этой задачи:

Программируемое 2D определение

Используется только передняя камера без экстра датчиков дистанции. Такой способ наблюдается обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость осуществления; минимальная затраты; оперативная работа при достаточном свете.
Минусы: просто ввести в заблуждение фотографией; нестабильная деятельность ночью; слабая безопасность.

Техническое 3D сканирование

Применяет инфракрасную камеру + проекционный модуль пикселей + датчики глубины (Face ID у Apple; аналогичные технологии у Huawei Mate).
Плюсы: высокая надежность; не получится подделать изображение/видеозапись; постоянная деятельность в любых условиях освещения.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана („чёлка”)

Гибридные подходы с ИИ-дополнением

Применяют комбинацию программируемых методов + аппаратную обработку + последующую обработку нейросетями для повышения устойчивости к атакам („anti-spoofing”). Например, такие товары, например вулкан россии и Google Pixel Face Unlock последних поколений, сочетают фронтальную камеру c инфракрасным датчиком мобильности Soli Radar для предотвращения от подделок жестами/масками/видеодисплеями чужих устройств.

Образцы применения разных методов

• iPhone линейки X/11/12/13/14 задействуют только физическое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition первый раз представил аналог Face ID среди Android.
• Samsung Galaxy S10 модель/S20 поддерживают как программное обеспечение двухмерное распознавание по снимку фронталкой, так и датчик радужки глаза.
• Huawei Mate20 Pro использует комплекс из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Трудности охраны и ошибочные сигналы

Несмотря на впечатляющий развитие инноваций за недавние лет, безупречных механизмов пока не существует:

1. Вероятность подвоха: Недорогие мобильники легко открываются высококачественной фотографией владельца или роликом с экрана другого устройства.
2. Идентичные близнецы: Даже самые совершенные механизмы могут перепутать между однояйцевыми близнецами либо семьями с очень схожей внешностью.
3. Изменения внешности: Стремительное снижение веса/увеличение массы тела, хирургические вмешательства или травмы в некоторых случаях необходимы для повторной регистрации биометрии.
4. Условия съёмки: Интенсивная освещённость солнцем или глубокая тень могут снизить верность определения признаков.

Вот пара рекомендаций для безопасному эксплуатации:

• Для важных операций всегда внедряйте двухфакторную аутентификацию;
• Не включайте возможность „Разблокировка по лицу” на недорогих моделях без ИК-сенсоров;
• Постоянно апгрейдите прошивку смартфона для обеспечения безопасности от актуальных атак;
• Включайте функцию „Требовать распахнутых глаз” там, где она есть.

Где дополнительно применяется технологии за исключением мобильных телефонов?

Хотя предмет данной работы сосредоточена на конкретно смартфонам и планшетам, стоит упомянуть о других сферах применения технологии:

• Контроль доступа в офисах и многоквартирных зданиях;
• Платёжные устройства банков („Face Pay”);
• Электронные паспорта последнего поколения;
• Системы видеоконтроля городских служб;
• Автоматизирование учёта присутствия школ/вузов;
• Вход участников персональных компьютеров/ноутбуков.

Например: В московском метро уже тестируется система платежа проезда по лицу („Face Pay”) — хватит пройти через барьер без карты или мобильника! Аналогичные проекты развиваются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким способом меняется технология в нынешнее время?

Каждый год возникают свежие концепции для усовершенствования стандарта работы систем распознавания лиц:

1. Увеличивается детализация датчиков — чем больше информации фиксируется камерой/датчиками глубины, тем меньше вероятность ошибки;
2. Развиваются искусственные интеллекты — новейшие структуры модели MobileNetV3 обеспечивают возможность скоростно осваивать дополнительным характеристикам вида владельца напрямую на гаджете без пересылки информации в облачное хранилище.
3. Развиваются способы антиспуфинга — теперь смартфоны умеют распознавать настоящие движущиеся лица от фиксированных фото/масок по незаметным микродвижениям.
4. Взаимодействие со умными устройствами — интеллектуальные часы могут автоматически закрыть доступ к мобильный телефон, если обладатель отошёл далеко.
5. Появляются гибридные устройства — к примеру комбинирующие голосовую опознание + облик + дактилоскопический след.

Вот, те тенденции особенно актуальны в данный момент:

1) Уменьшение элементов

Изготовители намереваются минимизировать габариты отверстия („чёлки”) для сенсоры на дисплее за счёт встраивания миниатюрных ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Переработка прямо на аппарате

Для увеличения конфиденциальности всё более обработки данных осуществляется на месте без пересылки информации во сторонний облачный сервис.

3) Упорядочивание регламентов

Гугл интенсивно продвигает стандарт BiometricPrompt API, для того чтобы подобные платформы, вроде вулкан россия, и каждые Android-приложения были совместимы с всеми формами биометрии унифицированно.

Что подобрать сегодня?

В случае если вам всем важна максимальная сохранность данных, выбирайте флагманские устройства с вмонтированным ИК-проектором либо ToF-сенсором глубины.

• iPhone всех новейших моделей
• Huawei Companion/P ряда
• Xiaomi Professional
• Vivo X серии
• Oppo Найти X линейки.

Если финансы невелик – лучше выбирать классическим средствам безопасности (PIN-код/сканер пальца), а возможность „разблокировка по лицу”, такую как в вулкан россия, задействовать только как второстепенную возможность комфорта.

Каким образом улучшить удобство работы функции?

Есть пара советов для пользователей, кто уже применяет разблокировку по лицу:

1. Регулярно обновляйте свою фото-шаблон, если сильно изменяется облик.
2. Не пренебрегайте чистить линзу передней камеры – пятна могут уменьшить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам запускает фотоаппарат если вы берёте его в руки.
4. Во время регистрации старайтесь удерживать лицевую часть ровно перед камеры без резкого наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отвели взгляд от дисплея.

Возможности эволюции техники

В скоро наступающие годы можно ожидать появления полностью бесконтактных способов идентификации персоны сразу по нескольким биометрическим данным параметрам одновременно: облик + голос + манера ходьбы + жесты рук!

Также предполагается появление новых методов охраны личной информации – например, изменяющееся корректировка цифрового шаблона после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – единственная из очень интересных инноваций нашего времени! Она предоставляет интеракцию со телефоном проще чем до этого, и такие аппы, как vulkan russia, могут значительно повысить ваш пользовательский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы понимаете, как работает эта технология в деталях, – сможете более осмысленно выбирать свой будущий девайс!