Каким способом действует распознавание лицевых образов в телефонах

Для чего мы выбираем разлочивание по фейсу

В прошлые годы определение лиц превратилось в одной из самых популярных возможностей для разблокировки мобильных телефонов. Всего некоторые лет назад большинство пользователей обходились PIN-кодами, секретными кодами или сканерами отпечатков пальцев. Но при появлением таких технологий, как admiral x, нам вполне просто взглянуть на экран — и устройство тут же узнает своего владельца.

Какой аспект обуславливает эту конкретную функцию такой востребованной? Во-первых, это практично: не нужно помнить трудные пароли или искать нужный палец в тьме. Во-вторых, это быстро: современные алгоритмы идентифицируют лицо практически за доли секунды. В-третьих, это чувство будущего — как будто в фильмах про адмирал х казино агентов.

Тем не менее за данной кажущейся несложностью таится полный универсум трудных методов и инженерных решений. Позвольте нам разобраться, как именно функционирует фейсканирование в современных гаджетах, какие применяются способы, насколько они безопасны и что нас ожидает в будущем.

Короткая хроника прогресса техники

Распознавание лиц как технология присутствует уже более пятидесяти лет. Первые эксперименты машинного изучения облика были осуществлены еще в 1960-х годах в научных учреждениях США. Тогда ЭВМ могли лишь обозначать силуэты черепа и измерять промежутки между очами и ртом на ахроматических изображениях.

Начальные бизнес системы возникли в девяностых годах, но они были несовершенны: работали медленно и часто ошибались. Только с эволюцией синтетических сетей и таких площадок, как адмирал х, мощных мобильных процессоров распознавание лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным идентификацией лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и другие начали интегрировать собственные разработки.

Ключевые шаги функционирования устройства определения

Процесс определения лица можно ориентировочно разделить на несколько ключевых этапов:

1. Распознавание лиц — аппарат распознает присутствие гуманного лица в снимке.
2. Определение особенностей — механизм изучает особенности лица: очертания зрительных органов, носа, губ, позицию надбровных дуг.
3. Построение структуры — создаётся неповторимый цифровой отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с образцом — сформированный образец сверяется со зафиксированной при учёте биометрической данными владельца.
5. Принятие определения — если совпадение достаточно значительное, смартфон деблокируется.

Любой из данных этапов требует особых алгоритмов и улучшений для быстрой работы непосредственно на девайсе.

Технические составляющие: что находится внутри

Обычная передняя камера.

Простейший простой вариант определения лица использует лишь лицевую видеокамеру смартфона. Подобный метод реализован во многочисленных бюджетных версиях Android-устройств.

Плюсы:

• Необходимо нуждается в внешних сенсоров.
• Быстро действует при хорошем освещённости.

Недостатки:

• Легко ввести в заблуждение фотографией или роликом.
• Неудачно работает при плохом освещённости или необычных ракурсах.

Инфракрасная камера и точечный проекционный аппарат

Более усовершенствованные системы, такие как адмирал х, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология лежит в основе Face ID от Apple.

Каким способом это работает:

• Точечный устройство проекции показывает на облик пользователя невидимую сетку из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 пятен).
• Инфракрасная устройство регистрирует искривление данной решетки по плоскости физиономии.
• Формируется трёхмерная карта глубины глубинности, что почти что невозможна для подделки обычной фотографией или маской.

Плюсы

• Надёжная работа даже в полной тьме.
• Высокая сопротивляемость к подделкам.
• Точность определения свыше 99%.

Дополнительные датчики

В некоторых устройствах используются также дополнительные сенсоры: ToF (Time-of-Flight), которые измеряют время прохождения луча до цели и обратно; RGB-датчики глубины; специальные лазерные лидары для построения более аккуратной 3D-модели физиономии.

Эти разработки встречаются чаще всего во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: искусственный ум на действии

Текущие устройства опознания лиц немыслимы при отсутствии применения искусственного интеллекта и машинного обучения. Именно вследствие таким технологиям, как адмирал х, устройство способно распознавать юзера даже при трансформациях внешнего вида: новая стрижка, щетина, оптика или макияж не становятся помехой для открытия.

Детектирование лиц

На начальном шаге система обязана быстро распознать лицо в пределах целого снимка с камеры. Для этого применяются многоуровневые классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые “обучены” распознавать лиц человека среди множества других объектов.

Пример: процесс MTCNN в состоянии находить облик даже в случае частичном закрытии (например, платком или ладонью).

Выделение важных точек

После идентификации лица система, такая как адмирал х, вычисляет местоположение главных точек: кончики глаз, верхушка носа, границы губ и так далее. Как правило используется от 68 до 128 главных меток на лице.

Данное необходимо для стабилизации изображения: если человек удерживает мобильник под наклоном, или склонил голову, программа “выпрямляет” картинку до стандартного положения для дальнейшего анализа.

Формирование биометрического шаблона

Далее нейросеть строит уплотненное числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 флоатов.

Этот шаблон весьма сложно сфальсифицировать: он не сохраняет непосредственно изображение юзера, а лишь особенные характеристики его вида, что делает его совершенным для таких систем, как admiral-x.

Сопоставление и вынесение заключения

В случае, когда пользователь намеревается разблокировать телефон глазами, программа осуществляет все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный уровень (обычно выше 99%), телефон, как и платформа admiral-x, разблокируется; если нет — доступ запрещается.

Адаптация к метаморфозам внешности

Увлекательная черта нынешних системы — способность самообучения. Если вы часто разблокируете смартфон с обновленной стрижкой или оптикой, алгоритм постепенно освежает базовый модель вашего внешности для повышения точности работы без снижения уровня безопасности.

Охрана биометрии данных.

Многие юзеры боятся сохранять свои биометрические идентификационные данные на мобильном устройстве из-за вероятности утечки информации или взлома устройства. Определенные организации, например admiral-x, предоставляют варианты для улучшения защиты информации юзеров.

• Локальное сохранение: Преимущественно устройств хранит биометричные шаблоны лишь внутри защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Они всегда не выходят из устройство и не доступны даже производителю.

• Шифрование: Все данные хранятся только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Программы сторонних девелоперов не имеют непосредственного возможности доступа к биометрическим данным; они могут лишь требовать подтверждение верификации личности через системный API.

Стоит упомянуть существенную особенность: если кто-либо сможет получить физический доступ к вашему телефону (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество компании осуществляют защиту от “слепого” разблокирования — в частности, заставляют открыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают виды определения лиц?

На сегодняшний день можно выделить определить три основных метода к осуществлению этой операции:

Программируемое двухмерное определение

Используется только фронтальная видеокамера без вспомогательных датчиков дистанции. Подобный способ встречается наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота реализации; минимальная стоимость; быстрая работа при качественном освещении.
Минусы: легко ввести в заблуждение фотографией; ненадежная работа ночью; недостаточная защищенность.

Аппаратное объёмное сканирование

Задействует инфракрасную видеокамеру + проекционный модуль пикселей + датчики глубины (Face ID у Apple; подобные решения у Huawei Mate).
Плюсы: значительная достоверность; невозможно обмануть изображение/видеозапись; постоянная деятельность при любом освещении.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные методы с ИИ-дополнением

Применяют комбинацию софтверных методов + аппаратную обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, например адмирал х и Google Pixel Face Unlock новейших поколений, сочетают фронталку c инфракрасным сенсором мобильности Soli Radar для предотвращения от фальсификаций жестами/масками/видеодисплеями посторонних устройств.

Примеры применения разных техник

• iPhone линейки X/11/12/13/14 применяют только физическое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition впервые предложил аналог Face ID в числе Android.
• Samsung Galaxy S10 версия/S20 имеют как программное обеспечение плоское определение по снимку селфи-камерой, так и датчик глазного ириса.
• Huawei Mate20 Pro задействует комплекс из ИК-инфракрасного света + Dot Projector + ToF-датчик

Вопросы защиты и ложные срабатывания

Несмотря на замечательный развитие технологий за недавние лет, совершенных механизмов пока не существует:

1. Возможность обмана: Недорогие смартфоны просто доступны высококачественной снимком пользователя или роликом с экрана другого устройства.
2. Идентичные двойняшки: Даже самые совершенные механизмы могут ошибиться между однояйцевыми близнецами либо родственниками с очень схожей внешностью.
3. Изменения облика: Резкое похудение/увеличение массы тела, хирургические вмешательства или повреждения иногда требуют обновления данных биометрии.
4. Условия записи: Яркая засветка солнечным светом или же интенсивная затенение могут понизить верность идентификации признаков.

Ниже некоторые рекомендаций по надёжному эксплуатации:

• Для критически важных операций всегда внедряйте дополнительную аутентификацию;
• Не активируйте функцию “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
• Постоянно апгрейдите программное обеспечение смартфона для предотвращения угроз от современных угроз;
• Включайте функцию “Требовать открытых глаз” в тех местах, где она имеется.

Где ещё применяется технология помимо смартфонов?

Хотя тема нашей публикации посвящена в частности мобильным устройствам, стоит упомянуть о других сферах применения технологии:

• Контроль входа в рабочих помещениях и жилых домах;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Цифровые паспорта последнего типа;
• Системы видеоконтроля городских сервисов;
• Механизация отслеживания присутствия образовательных учреждений/институтов;
• Авторизация юзеров персональных компьютеров/ноутбуков.

Например: В столичном метро уже тестируется система платежа проезда по фейсу (“Face Pay”) — хватит пройти через барьер без карты или телефона! Схожие программы реализуются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким способом меняется технический процесс в наше время?

Каждый годочек проявляются свежие идеи для улучшения стандарта функционирования систем лицевого распознавания:

1. Увеличивается чёткость сенсорных устройств — чем больше информации фиксируется фотоаппаратом/глубинными сенсорами, тем меньше вероятность погрешности;
2. Совершенствуются нейронные сети — передовые структуры модели MobileNetV3 дают возможность оперативно обучаться дополнительным характеристикам облика пользователя непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Улучшаются способы антиспуфинга — теперь мобильные устройства умеют отличать подлинные движущиеся облики от статичных фотографий/маскировок по микроскопическим микродвижениям.
4. Синхронизация со умными устройствами — интеллектуальные часы могут самостоятельно заблокировать смартфон, если владелец отошёл далеко.
5. Появляются гибридные устройства — например комбинирующие голосовую идентификацию + физиономию + дактилоскопический след.

Здесь, какие направления очень востребованы в данный момент:

1) Уменьшение компонентов

Изготовители намереваются минимизировать величину отверстия (“чёлки”) для датчики на дисплее за счёт внедрения маленьких ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Переработка прямо на девайсе

Для улучшения конфиденциальности всё больше вычислений происходит локально без передачи данных во сторонний облачный сервис.

3) Стандартизация регламентов

Google интенсивно продвигает эталон BiometricPrompt API, для того чтобы аналогичные платформы, например как admiral x, и все Android-приложения могли взаимодействовать с различными типами биометрии единообразно.

Какое выбрать на сегодня?

В случае если тебе необходима максимальная защита информации, остановите выбор на флагманские устройства с интегрированным ИК-проектором либо ToF-датчиком глубины.

• iPhone каждого новейших моделей
• Huawei Partner/P Series ряда
• Mi Expert
• Vivo X модели
• Oppo Find X линейки.

Если бюджет скромен – лучше отдавать предпочтение обычным средствам безопасности (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в admiral x, задействовать только как второстепенную опцию удобства.

Как повысить удобство работы опции?

Есть пара лайфхаков для тех, кто уже применяет разблокировку через лицо:

1. Регулярно меняйте свою фото-шаблон, если кардинально меняется внешность.
2. Не пренебрегайте очищать линзу передней камеры – разводы могут уменьшить точность!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам включает камеру как только вы берёте его в руки.
4. При регистрационного процесса постарайтесь удерживать лицо прямо впереди объектива исключая значительного наклона головы.
5. Используйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отвернулись от дисплея.

Будущее эволюции инноваций

В предстоящие времена можно предполагать развития полностью бесконтактных способов распознавания индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + звучание + шаги + жесты рук!

Также предполагается развитие свежих подходов обеспечения приватности – например, динамическое изменение электронного шаблона после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из наиболее увлекательных технологий нашего периода! Она предоставляет общение со телефоном удобнее чем когда-либо прежде, и такие программы, как admiral-x, могут в разы оптимизировать ваш пользовательский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы понимаете, как работает эта технология внутри, – сможете осознаннее подбирать свой следующий девайс!