Каким образом работает определение лицевых образов в мобильных устройствах

Зачем мы выбираем разблокирование по лицевому распознаванию

В последние времена определение физиономий является одной из наиболее востребованных опций для разблокировки умных телефонов. Еще несколько годков ранее основная часть использующих довольствовались PIN-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением таких технологий, например Вулкан Платинум, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Что обуславливает эту конкретную функцию настолько популярной? Прежде всего, это практично: не нужно запоминать трудные пароли или отыскивать нужный палец в мраке. Во-вторых, это оперативно: современные алгоритмы распознают лицо практически за доли секунды. В-третьих, это ощущение будущего — будто в кинолентах про казино Вулкан агентов.

Тем не менее за такой на первый взгляд легкостью прячется весь универсум сложных технологий и инженерных разработок. Попробуем понять, как именно работает фейсканирование в новейших гаджетах, какие существуют методы, насколько они надёжны и что нас предстоит.

Сжатая хроника развития инноваций

Распознавание лиц как техника имеется уже более 50 годов. Изначальные попытки автоматизированного исследования лиц были предприняты еще в 1960-х годы в лабораториях США. Тогда компьютеры могли лишь определять силуэты головы и определять расстояния между зрачками и ртом на монохромных изображениях.

Первые коммерческие системы возникли в 90-х, но они были далеки от совершенства: работали медленно и часто давали сбои. Только с эволюцией синтетических сетей и таких площадок, как Vulkan Platinum, высокопроизводительных мобильных процессоров идентификация лиц стало по-настоящему массовым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным идентификацией лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и прочие начали внедрять собственные разработки.

Главные этапы действия системы определения

Процесс идентификации лица можно ориентировочно разделить на несколько важных этапов:

1. Идентификация лиц — устройство выявляет наличие людского образа в кадре.
2. Определение особенностей — механизм анализирует черты физиономии: форму зрительных органов, обонятельного органа, уст, положение надбровных дуг.
3. Построение модели — создаётся особенный цифровой отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со эталоном — созданный модель сопоставляется со записанной при регистрации биометрической данными владельца.
5. Принятие решения — если совпадение достаточно значительное, смартфон разблокируется.

Любой из данных стадий запрашивает особых алгоритмов и оптимизаций для быстрой работы прямо на устройстве.

Технические компоненты: что скрыто в их недрах

Типичная фронтальная камера.

Самый простой несложный метод идентификации облика задействует только переднюю камеру смартфона мобильного устройства. Такой подход внедрён во многочисленных недорогих версиях Android-устройств.

Сильные стороны:

• Не нуждается в дополнительные датчиков.
• Шустро работает при качественном освещённости.

Недостатки:

• Несложно одурачить изображением или видео.
• Плохо работает при плохом освещённости или нестандартных углах обзора.

Инфракрасная фотокамера и пунктирный проектор

Более усовершенствованные системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика лежит в основе Face ID от Apple.

Каким образом это работает:

• Точечный проекционный прибор проецирует на лицо юзера невидимую сетку из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 точек).
• Инфракрасная устройство записывает деформацию данной решетки по плоскости физиономии.
• Создаётся трехмерная карта глубинности, что почти что неосуществима для имитации типичной фото или маскировкой.

Выигрыши

• Надёжная деятельность даже в полной темноте.
• Высокая защита к имитациям.
• Точность распознавания свыше 99%.

Добавочные датчики

В некоторых устройствах используются также экстра сенсорные устройства: ToF (Time-of-Flight), которые определяют время движения луча до предмета и обратно; Цветные-датчики дальности; специальные лазерные дальномеры для создания более точной 3D-модели физиономии.

Эти технологии встречаются чаще всего во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: синтетический ум на действии

Текущие системы идентификации физиономий неосуществимы без эксплуатации artificial intelligence и machine learning. Именно вследствие таким технологиям, как Vulkan Platinum, устройство способно узнавать владельца даже при изменениях внешнего вида: новая причёска, щетина, оптика или грим не становятся барьером для открытия.

Распознавание физиономии

При начальном стадии программа должна быстро найти образ лица внутри всего кадра с камеры. Для этого задействуются последовательные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые подготовлены находить лица людей среди множества других объектов.

Пример: процесс MTCNN в состоянии распознавать физиономию даже в случае неполном перекрытии (например, платком или рукой).

Идентификация важных аспектов

После распознавания лица устройство, такая как Vulkan Platinum, устанавливает расположение ключевых точек: кончики глаз, верхушка носа, границы губ и так далее. Часто применяется от 68 до 128 основных точек на лице.

Это необходимо для выравнивания изображения: если пользователь держит смартфон под углом, или наклонил головку, программа исправляет изображение до обычного угла для последующего изучения.

Создание биометрии модели

Далее нейросеть строит компактное числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой образ лица длиной от 128 до 512 вещественных чисел.

Такой образец весьма сложно сфальсифицировать: он не удерживает само фото юзера, а лишь особенные характеристики его вида, что делает его идеальным для таких площадок, как Вулкан Казино Платинум.

Сопоставление и принятие заключения

Когда пользователь намеревается открыть смартфон взглядом, система осуществляет все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает заданный уровень (обычно выше 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ блокируется.

Адаптация к изменениям внешности

Увлекательная черта актуальных системы — возможность самообучения. Если вы постоянно доступаете к телефон с новой прической или очками, программа постепенно освежает эталонный модель вашего лица для улучшения точности функционирования без ухудшения безопасности.

Защита биометрических данных информации.

Большинство юзеры беспокоятся держать свои биометрические идентификационные данные на телефоне из-за угрозы потери данных или взлома гаджета. Иные фирмы, такие как Вулкан Казино Платинум, предлагают решения для повышения сохранности сведений пользователей.

• Локальное сохранение: Преимущественно девайсов хранит био-идентификационные шаблоны только внутри защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не оставляют устройство и недоступны в том числе производителю.

• Шифрование: Все информация хранятся только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Приложения третьих девелоперов не обладают непосредственного доступа к биометрическим данным; они могут лишь требовать факт верификации личности через системный API.

Необходимо упомянуть значимую особенность: если кто-то получит физический доступ к вашему телефону (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство компании осуществляют меры безопасности от автоматического разблокирования — к примеру, заставляют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие имеются виды определения лиц?

Сегодня можно различить 3 основных подхода к осуществлению этой функции:

Программируемое двухмерное распознавание

Используется только лицевая камера без дополнительных сенсоров дистанции. Этот метод используется чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота воплощения; умеренная цена; оперативная деятельность при качественном свете.
Минусы: легко ввести в заблуждение снимком; неустойчивая работа ночью; слабая защищенность.

Аппаратное объёмное оцифровка

Задействует инфракрасную видеокамеру + проекционный модуль пикселей + сенсоры глубины (Face ID от Apple; аналогичные решения у Huawei Mate).
Плюсы: значительная надёжность; нельзя подделать фото/видео; постоянная деятельность в любых условиях освещения.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Смешанные подходы с дополнением ИИ

Применяют комбинацию софтверных методов + техническую обработку + постобработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие продукты, например Vulkan Platinum и Google Pixel Face Unlock последних версий, сочетают фронтальную камеру c инфракрасным датчиком мобильности Soli Radar для защиты от фальсификаций руками/масками/видеоэкранами чужих устройств.

Иллюстрации применения разнообразных техник

• iPhone модели X/11/12/13/14 используют только техническое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition в первый раз представил подобие Face ID среди Android.
• Samsung Galaxy S10 версия/S20 поддерживают как софтверное двухмерное распознавание по фото фронтальной камерой, так и сканер ириса глаза.
• Huawei Mate20 Pro использует систему из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Вопросы охраны и ошибочные тревоги

Несмотря на замечательный развитие технологий за прошедшие лет, совершенных системы пока не существует:

1. Возможность подвоха: Доступные смартфоны просто доступны высококачественной фотографией владельца либо роликом с экрана другого устройства.
2. Идентичные близнецы: Даже самые безупречные системы могут ошибиться между монозиготными близнецами либо родичами с очень похожей внешностью.
3. Изменения внешности: Резкое похудение/увеличение массы тела, пластические операции или повреждения в некоторых случаях требуют обновления данных биометрических данных.
4. Условия съёмки: Сильная освещённость солнечным светом или же интенсивная затенение могут уменьшить аккуратность определения признаков.

Вот пара подсказок по безопасному использованию:

• Для критически важных операций всегда применяйте двухэтапную аутентификацию;
• Не запускайте опцию “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
• Систематически апгрейдите прошивку телефона для защиты от современных угроз;
• Включайте опцию “Требовать раскрытых глаз” там, где она имеется.

В каких областях ещё применяется технологии кроме мобильных телефонов?

Несмотря на то, что основная мысль нашей работы сосредоточена на именно портативным гаджетам, необходимо сказать о других сферах применения технологии:

• Контроль входа в офисах и резиденциях;
• Платёжные устройства банков (“Face Pay”);
• Виртуальные идентификационные документы нового поколения;
• Комплексы видеонаблюдения городских подразделений;
• Автоматизация регистрации присутствия учебных заведений/вузов;
• Вход юзеров персональных компьютеров/ноутбуков.

Например: В столичном метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — достаточно пройти через барьер без карты или телефона! Аналогичные инициативы осуществляются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким образом изменяется технология в нынешнее время?

Всякий годочек возникают современные идеи для усовершенствования качества деятельности систем идентификации лиц:

1. Увеличивается разрешение сенсоров — чем больше деталей фиксируется видеокамерой/глубинными сенсорами, тем меньше риск погрешности;
2. Развиваются нейросети — новейшие конструкции типа MobileNetV3 обеспечивают возможность оперативно обучаться свежим чертам вида обладателя прямо на устройстве без пересылки информации в облачное хранилище.
3. Развиваются методы антиспуфинга — теперь смартфоны умеют распознавать реальные движущиеся лица от фиксированных фотографий/масок по незаметным движениям кожи.
4. Взаимодействие со интеллектуальными приборами — смарт-часы могут авто закрыть доступ к мобильный телефон, если обладатель ушёл далеко.
5. Появляются смешанные системы — в частности совмещающие аудио идентификацию + облик + отпечаток пальца.

Итак, какие тренды особенно популярны в данный момент:

1) Миниатюризация компонентов

Производители стараются уменьшить размер прорези (“чёлки”) под сенсоры на дисплее за счёт встраивания маленьких ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Переработка прямо на устройстве

Для повышения конфиденциальности всё больше обработки данных происходит внутри устройства без отправки информации во внешний облачный сервис.

3) Стандартизация регламентов

Google интенсивно продвигает эталон BiometricPrompt API, для того чтобы такие площадки, вроде Вулкан Платинум, и каждые Android-приложения могли работать с всеми формами биометрии унифицированно.

Какое подобрать сегодня?

Когда тебе необходима максимальная защита данных, выбирайте передовые аппараты с интегрированным ИК-проектором или ToF-сенсором глубины.

• iPhone всех актуальных версий
• Huawei Companion/P Series серии
• Xiaomi Professional
• Vivo X серии
• Oppo Find X серии.

Если бюджет невелик – лучше выбирать обычным методам защиты (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в Вулкан Платинум, задействовать только как второстепенную опцию комфорта.

Каким образом улучшить практичность функционирования возможности?

Есть пара лайфхаков для людей, кто уже использует функцию распознавания лица:

1. Часто меняйте свою фотографию-шаблон, если сильно меняется внешность.
2. Не пренебрегайте чистить объектив фронтальной камеры – загрязнения могут понизить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам включает камеру когда вы поднимаете его.
4. Во время регистрации старайтесь сохранять лицо неподвижно напротив камеры без резкого наклона головы.
5. Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отворачиваетесь от экрана.

Возможности прогресса технологии

В ближайшие периоды можно предполагать появления полностью бесконтактных способов опознания персоны сразу по нескольким биометрическим данным параметрам одновременно: облик + речь + манера ходьбы + жесты рук!

Также вероятно возникновение свежих методов обеспечения конфиденциальности – скажем, переменное модификация диджитал паттерна после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – единственная из самых захватывающих техник нашего периода! Она делает взаимодействие со телефоном комфортнее чем до этого, и такие программы, как Вулкан Казино Платинум, могут значительно улучшить ваш юзерский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы знаете, как функционирует эта технология изнутри, – будете в состоянии более осмысленно выбирать свой будущий устройство!