Каким образом работает идентификация лиц в смартфонах

Зачем мы предпочитаем разблокирование по лицу

В недавние годы распознавание лиц является одной из самых популярных опций для деблокировки смартфонов. Всего несколько лет тому назад основная масса использующих обходились PIN-кодами, паролями или датчиками отпечатков пальцев. Но с появлением таких технологий, например вулкан россия, нам вполне лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Что делает эту особенность такой востребованной? Во-первых, это практично: не нужно удерживать в памяти сложные пароли или искать правильный палец в темноте. Во-вторых, это мгновенно: современные программы узнают лицо буквально за доли секунды. В-третьих, это впечатление футуристичности — словно в кинофильмах про казино вулкан шпионов.

Впрочем за такой на первый взгляд несложностью прячется целый универсум сложных методов и инженерных разработок. Давайте разобраться, как именно функционирует идентификация по лицу в новейших мобильных телефонах, какие бывают технологии, насколько они надёжны и что нас предстоит.

Короткая повествование эволюции инноваций

Идентификация лиц как технология имеется уже более пятидесяти лет. Изначальные попытки автоматизированного исследования лиц были сделаны еще в 1960-х годах в исследовательских центрах США. Тогда компьютеры могли лишь определять контуры черепа и вычислять расстояния между глазами и устами на черно-белых снимках.

Первые коммерческие установки появились в девяностых годах, но они были далеки от совершенства: действовали неспешно и часто ошибались. Только с развитием синтетических сетей и таких систем, как вулкан россии, сильных мобильных процессоров распознавание лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным идентификацией лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали внедрять собственные решения.

Ключевые стадии работы системы идентификации

Процесс определения лица можно условно поделить на несколько важных этапов:

1. Распознавание лица — аппарат выявляет присутствие гуманного лица в изображении.
2. Извлечение характеристик — механизм анализирует особенности физиономии: очертания глаз, обонятельного органа, уст, положение надбровных дуг.
3. Построение структуры — создаётся особенный цифровой отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со эталоном — созданный модель сверяется с сохранённой при учёте биометрической сведениями владельца.
5. Принятие выбора — если соответствие достаточно существенное, смартфон деблокируется.

Каждый из указанных шагов нуждается в индивидуальных процедур и улучшений для оперативной работы непосредственно на девайсе.

Технические компоненты: что находится внутри них

Обычная селфи камера.

Самый простой простой способ распознавания лица применяет только переднюю камеру смартфона мобильного устройства. Данный способ внедрён во многочисленных доступных версиях Android-устройств.

Сильные стороны:

• Не потребляет дополнительных датчиков.
• Шустро работает при качественном свете.

Слабые стороны:

• Просто ввести в заблуждение изображением или видеозаписью.
• Неудачно действует при низком освещённости или нестандартных точках зрения.

Инфракрасная камера и пунктирный проектор

Более продвинутые системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология составляет базу Face ID от Apple.

Каким способом это действует:

• Точечный проектор проецирует на физиономию юзера невидимую решетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 точек).
• Инфракрасная устройство регистрирует деформацию данной решетки по плоскости физиономии.
• Создаётся 3D карта глубины глубины, что почти неподвластна для подделки обычной фотографией или маской.

Плюсы

• Надёжная деятельность даже в полной неосвещённости.
• Большая устойчивость к имитациям.
• Точность идентификации более 99%.

Дополнительные сенсоры

В отдельных аппаратах задействуются также экстра сенсоры: ToF (Time-of-Flight), которые определяют время распространения луча до цели и обратно; RGB-датчики дальности; специальные лазерные измерители расстояния для формирования более детализированной 3D-модели лица.

Эти инновации встречаются чаще всего во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: синтетический ум в исполнении

Современные системы опознания физиономий неосуществимы в отсутствие эксплуатации искусственного интеллекта и machine learning. Именно вследствие таким технологиям, как вулкан россии, устройство может распознавать юзера даже при трансформациях внешнего вида: новая стрижка, щетина, линзы или косметика не становятся препятствием для деблокировки.

Детектирование физиономии

На первом шаге алгоритм необходимо мгновенно найти образ лица в пределах всего снимка камеры. Для этой задачи задействуются последовательные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые подготовлены распознавать человеческие лица среди множества других объектов.

Пример: процесс MTCNN в состоянии находить физиономию даже в случае частичном закрытии (например, платком или рукой).

Идентификация основных аспектов

После идентификации лица система, такая как вулкан россии, устанавливает положение основных точек: уголки глаз, верхушка носа, границы губ и так далее. Обычно применяется от 68 до 128 ключевых точек на лицевой области.

Это действие необходимо для выравнивания изображения: если юзер удерживает смартфон под наклоненным, или повернул головку, программа корректирует картинку до нормального состояния для дальнейшего анализа.

Формирование биометрического образца

Далее нейросеть строит уплотненное цифровое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 чисел с плавающей запятой.

Такой шаблон очень трудно сфальсифицировать: он не хранит непосредственно фото юзера, а лишь исключительные характеристики его облика, что делает его оптимальным для таких систем, как vulkan russia.

Сопоставление и осуществление решения

Если человек желает разлочить телефон взглядом, система осуществляет все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает заданный границу (обычно выше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ не предоставляется.

Адаптация к изменениям внешнего вида

Интересная черта нынешних системы — возможность самообучения. Если вы регулярно разблокируете смартфон с обновленной укладкой или очками, система постепенно модернизирует базовый образец вашего внешности для повышения точности работы без снижения уровня безопасности.

Защита биометрических данных.

Большинство пользователи боятся хранить свои биометрические идентификационные данные на телефоне из-за угрозы утечки информации или взлома устройства. Некоторые организации, например vulkan russia, предлагают варианты для улучшения сохранности данных клиентов.

• Локальное сбережение: Большинство устройств сохраняет биометрические образцы только в пределах защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не покидают аппарат и закрыты включая создателю.

• Шифрование: Все сведения хранятся только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Приложения сторонних девелоперов не имеют непосредственного возможности доступа к биометрическим данным; они могут лишь требовать подтверждение подтверждения идентичности через системный API.

Необходимо отметить важную подробность: если кто-либо сможет получить физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие производители осуществляют систему защиты от неосознанного разблокирования — к примеру, требуют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают виды определения лиц?

На сегодняшний день можно выделить различить три основных метода к реализации этой операции:

Программное плоское идентификация

Используется только фронтальная камера без вспомогательных детекторов глубины. Подобный способ используется чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость воплощения; умеренная стоимость; оперативная функционирование при качественном свете.
Минусы: легко ввести в заблуждение фотографией; ненадежная деятельность ночью; слабая охрана.

Аппаратное трёхмерное сканирование

Применяет ИК видеокамеру + проектор пикселей + сенсоры глубины (Face ID у Apple; подобные технологии у Huawei Mate).
Плюсы: значительная надёжность; нельзя подделать фото/видео; устойчивая деятельность в любых условиях освещения.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные способы с дополнением ИИ

Используют комбинацию софтверных методов + аппаратно-техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные товары, например вулкан россии и Google Pixel Face Unlock современных версий, комбинируют фронталку c инфракрасным сенсором мобильности Soli Radar для защиты от фальсификаций руками/масками/видеоэкранами чужих устройств.

Иллюстрации эксплуатации разных методов

• iPhone модели X/11/12/13/14 задействуют только аппаратное трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз внедрил аналог Face ID в ряду Android.
• Samsung Galaxy S10/S20 имеют как программное обеспечение 2D определение по фото фронталкой, так и сенсор глазного ириса.
• Huawei Mate20 Pro использует набор из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Проблемы защиты и ошибочные сигналы

Несмотря на поразительный успехи технологий за недавние годы, совершенных системы пока не имеется:

1. Шанс подвоха: Недорогие смартфоны без труда “разблокируются” качественной изображением владельца или же видеозаписью с экрана другого устройства.
2. Идентичные близнецы: Даже самые идеальные механизмы могут ошибиться между однояйцевыми близнецами либо семьями с очень схожей внешностью.
3. Трансформации внешности: Резкое утрата веса/набор веса, косметические процедуры или повреждения иногда необходимы для повторной регистрации биометрии.
4. Условия записи: Интенсивная освещённость солнечным светом либо плотная темнота могут уменьшить аккуратность идентификации признаков.

Ниже несколько рекомендаций для защищённому использованию:

• Для значимых операций всегда применяйте двухфакторную аутентификацию;
• Не включайте функцию “Разблокировка по лицу” на бюджетных устройствах без ИК-сенсоров;
• Постоянно обновляйте прошивку программное обеспечение мобильного устройства для обеспечения безопасности от новых видов атак;
• Включайте настройку “Требовать распахнутых глаз” в тех местах, где она имеется.

В каких областях также используется технологии кроме смартфонов?

Хотя предмет данной публикации сосредоточена на именно смартфонам и планшетам, необходимо сказать о других сферах применения технологии:

• Мониторинг входа в рабочих помещениях и резиденциях;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Цифровые паспорта последнего типа;
• Комплексы видеонаблюдения городских подразделений;
• Автоматизация учёта посещаемости учебных заведений/университетов;
• Авторизация юзеров ПК/ноутбуков.

Например: В городском метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — достаточно пройти через барьер без карты или телефона! Схожие программы осуществляются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом трансформируется технология в нынешнее время?

Всякий годочек появляются свежие идеи для усовершенствования стандарта работы систем распознавания лиц:

1. Увеличивается разрешение сенсорных устройств — чем больше элементов фиксируется фотоаппаратом/датчиками глубины, тем меньше риск погрешности;
2. Улучшаются нейронные сети — новейшие архитектуры вида MobileNetV3 обеспечивают возможность оперативно обучаться дополнительным особенностям облика обладателя непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Улучшаются технологии антиспуфинга — теперь телефоны могут отличать подлинные анимированные лица от фиксированных фото/масок по микроскопическим движениям кожи.
4. Взаимодействие со интеллектуальными приборами — интеллектуальные часы могут авто заблокировать мобильный телефон, если владелец удалился на значительное расстояние.
5. Проявляются гибридные системы — к примеру комбинирующие голосовую аутентификацию + физиономию + дактилоскопический след.

Вот, те направления очень востребованы в данный момент:

1) Уменьшение деталей

Компании стараются минимизировать величину отверстия (“чёлки”) под сенсоры на дисплее за счёт встраивания компактных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на устройстве

Для повышения личной безопасности всё больше вычислений выполняется внутри устройства без пересылки информации во дополнительный облачный услугу.

3) Унификация стандартов

Google интенсивно продвигает стандарт BiometricPrompt API, с целью чтобы такие системы, например как вулкан россия, и каждые Android-программы могли работать с различными типами биометрии стандартизированно.

Какое выбрать на сегодня?

В случае если вам всем нужна наивысшая безопасность данных, выбирайте передовые устройства со встроенным ИК-проектором или же ToF-сенсором глубины.

• iPhone каждого последних версий
• Huawei Mate/P Series ряда
• Mi Expert
• Vivo X линейки
• Oppo Find X серии.

Если бюджет невелик – лучше предпочесть обычным способам безопасности (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в вулкан россия, задействовать только как опциональную возможность комфорта.

Как увеличить комфорт функционирования возможности?

Есть пара советов для пользователей, кто уже пользуется разблокировку через лицо:

1. Периодически обновляйте свою фото-шаблон, если кардинально меняется внешность.
2. Не пренебрегайте очищать линзу фронтальной камеры – разводы могут уменьшить точность!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам активирует камеру когда вы берёте его в руки.
4. Во время регистрации постарайтесь удерживать лицевую часть ровно напротив объектива без сильного наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отвели взгляд от дисплея.

Возможности прогресса инноваций

В скоро наступающие времена можно ожидать появления полностью безконтактных способов опознания персоны сразу по нескольким биометрическим параметрам одновременно: лицо + голос + походка + манипуляции руками!

Также вероятно развитие новых способов защиты личной информации – к примеру, динамическое модификация цифрового шаблона после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых захватывающих техник нашего времени! Она делает общение со телефоном комфортнее чем до этого, и такие приложения, как vulkan russia, могут значительно улучшить ваш пользовательский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы понимаете, как функционирует эта технология изнутри, – сможете вдумчиво определять свой очередной устройство!