Каким образом работает распознавание лиц в мобильных устройствах

Зачем мы выбираем разлочивание по фейсу

В прошлые годы определение лиц является одной из наиболее востребованных функций для деблокировки смартфонов. Всего некоторые годов тому назад основная часть пользователей обходились PIN-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением подобных технологий, например вулкан россия, нам достаточно лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Что превращает эту конкретную функцию такой востребованной? Во-первых, это комфортно: не нужно запоминать замысловатые пароли или находить правильный палец в тьме. Кроме того, это мгновенно: современные системы узнают лицо буквально за мгновение. В-третьих, это впечатление футуризма — будто в кинофильмах про вулкан россия разведчиков.

Однако за этой на первый взгляд легкостью скрывается целый мир трудных технологий и инженерных концепций. Попробуем понять, как конкретно функционирует идентификация по лицу в актуальных гаджетах, какие бывают методы, насколько они защищены и что нас ожидает в будущем.

Короткая история развития инноваций

Распознавание лиц как техника имеется уже более пятидесяти лет. Начальные попытки автоматического исследования лиц были сделаны еще в 1960-х годах в исследовательских центрах США. Тогда компьютеры умели лишь выделять очертания головы и вычислять промежутки между очами и ртом на ахроматических снимках.

Начальные торговые установки появились в девяностых годах, но они были далеки от совершенства: работали медленно и часто давали сбои. Только с развитием синтетических сетей и таких платформ, как вулкан россии, сильных мобильных микросхем идентификация лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с надёжным трёхмерным сканированием лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и прочие стали интегрировать личные решения.

Главные стадии работы устройства идентификации

Процесс распознавания лица можно примерно разделить на несколько важных этапов:

Идентификация лица — устройство выявляет присутствие людского образа в изображении.
Определение особенностей — система исследует черты облика: очертания зрительных органов, носа, уст, положение надбровных дуг.
Построение модели — создаётся неповторимый виртуальный отпечаток (faceprint) на основе определённых признаков.
Сравнение с образцом — сформированный шаблон сверяется со зафиксированной при учёте биометрической данными владельца.
Принятие определения — если совпадение достаточно высокое, смартфон открывается.

Любой из указанных стадий запрашивает специальных алгоритмов и улучшений для оперативной работы непосредственно на девайсе.

Железные компоненты: что скрыто в их недрах

Типичная фронтальная камера.

Самый несложный способ распознавания облика задействует исключительно лицевую видеокамеру смартфона. Данный подход осуществлён во многих бюджетных моделях Android-устройств.

Достоинства:

Не требует дополнительных сенсоров.
Быстро действует при достаточном свете.

Минусы:

Несложно ввести в заблуждение изображением или видеозаписью.
Плохо действует при слабом освещённости или нестандартных точках зрения.

ИК камера и точечный проектор

Более продвинутые системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология составляет базу Face ID от Apple.

Каким образом это функционирует:

Точечный устройство проекции отображает на облик юзера невидимую структуру из тысяч инфракрасных меток (например, Face ID применяет около 30 000 точек).
Инфракрасная камера фиксирует деформацию этой сетки по поверхности лица.
Формируется 3D глубинная карта глубинности, что почти что неподвластна для подделки обычной фотографией или маскировкой.

Выигрыши

Надёжная работа даже в полной темноте.
Высокая сопротивляемость к фальсификациям.
Точность определения более 99%.

Добавочные сенсоры

В отдельных аппаратах задействуются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые фиксируют период распространения света до предмета и обратно; Трехцветные-датчики дальности; специальные оптические измерители расстояния для формирования более точной 3D-модели физиономии.

Эти разработки используются в основном во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: искуственный интеллект на действии

Современные системы распознавания лиц неосуществимы в отсутствие использования искусственного интеллекта и машинного обучения. Именно благодаря таким разработкам, как вулкан россии, устройство может распознавать пользователя даже при трансформациях облика: новая причёска, растительность на лице, очки или косметика не становятся помехой для открытия.

Детектирование физиономии

В начальном стадии программа обязана мгновенно найти лицо в пределах целого кадра с камеры. Для данной цели задействуются многоуровневые классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые “обучены” находить человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN в состоянии распознавать физиономию даже в случае частичном закрытии (например, платком или ладонью).

Определение важных точек

После обнаружения лица устройство, такая как вулкан россии, определяет расположение основных точек: края глаз, кончик носа, контуры губ и так далее. Обычно используется от 68 до 128 ключевых маркеров на лицевой поверхности.

Данное необходимо для стабилизации визуала: если человек удерживает мобильник под углом, или наклонил головку, программа корректирует картинку до нормального состояния для дальнейшего анализа.

Создание биометрии образца

Далее нейросеть строит сжатое математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой образ лица длиной от 128 до 512 флоатов.

Этот формат весьма трудно имитировать: он не хранит непосредственно картинку пользователя, а лишь уникальные черты его вида, что делает его идеальным для таких платформ, как vulkan russia.

Сравнительный анализ и принятие решения

Когда юзер хочет открыть смартфон взором, система воспроизводит все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый порог (обычно превышает 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ блокируется.

Адаптация к метаморфозам внешности

Интересная особенность актуальных систем — способность самостоятельного обучения. Если вы постоянно разблокируете мобильное устройство с обновленной стрижкой или очками, программа постепенно освежает основной модель вашего внешности для увеличения точности действия без снижения уровня безопасности.

Охрана биометрии информации.

Множество клиенты опасаются сохранять свои биометрические идентификационные данные на смартфоне из-за вероятности утечки информации или взлома устройства. Определенные компании, такие как vulkan russia, предоставляют решения для улучшения безопасности сведений клиентов.

Локальное сохранение: Большинство устройств записывает био-идентификационные шаблоны исключительно внутрь безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Они всегда не оставляют устройство и не доступны включая производителю.
Шифрование: Все информация сохраняются только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.
Изоляция приложений: Приложения внешних разработчиков не обладают непосредственного возможности доступа к биометрическим данным; они могут лишь запрашивать факт подтверждения идентичности через системный API.

Необходимо упомянуть важную подробность: если кто-то сможет получить физический доступ к вашему телефону (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие компании осуществляют систему защиты от автоматического разблокирования — к примеру, просят раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют типы определения лиц?

Сегодня можно выделить определить 3 основных метода к осуществлению этой функции:

Софтверное двухмерное идентификация

Используется только фронтальная видеокамера без дополнительных детекторов глубины. Подобный метод встречается обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота осуществления; умеренная цена; быстрая функционирование при хорошем освещении.
Минусы: легко одурачить фотографией; нестабильная функционирование ночью; низкая охрана.

Аппаратное 3D сканирование

Использует инфракрасную видеокамеру + проекционный модуль точек + сенсоры дистанции (Face ID от Apple; аналогичные решения у Huawei Mate).
Плюсы: высокая достоверность; не получится подделать изображение/видеозапись; постоянная деятельность в любых условиях освещения.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные способы с ИИ-дополнением

Используют комбинацию программируемых методов + аппаратную обработку + постобработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие товары, например вулкан россии и Google Pixel Face Unlock новейших поколений, комбинируют фронталку c ИК сенсором движения Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями чужих устройств.

Иллюстрации эксплуатации разных техник

iPhone модели X/11/12/13/14 задействуют только техническое трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition впервые представил аналог Face ID в ряду Android.
Samsung Galaxy S10/S20 имеют как софтверное 2D распознавание по изображению фронталкой, так и сенсор глазного ириса.
Huawei Mate20 Pro применяет комплекс из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Проблемы безопасности и ошибочные тревоги

Несмотря на поразительный прогресс техники за недавние лет, безупречных механизмов пока не существует:

Шанс обмана: Бюджетные мобильники без труда открываются высококачественной фотографией пользователя или видеозаписью с дисплея иного гаджета.
Идентичные близнецы: Даже самые совершенные механизмы могут ошибиться между однояйцевыми близнецами либо родственниками с очень схожей внешностью.
Метаморфозы внешнего вида: Стремительное похудение/набор веса, пластические операции или повреждения порой требуют повторной регистрации биометрических данных.
Условия записи: Сильная засветка солнечным светом или интенсивная темнота могут снизить аккуратность распознавания признаков.

Ниже некоторые рекомендаций по защищённому применению:

Для важных операций всегда применяйте дополнительную аутентификацию;
Не активируйте опцию “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
Постоянно обновляйте прошивку мобильного устройства для предотвращения угроз от актуальных атак;
Включайте функцию “Требовать открытых глаз” в тех местах, где она имеется.

В каких местах дополнительно используется технология помимо смартфонов?

Пускай тема данной статьи сосредоточена на в частности портативным гаджетам, необходимо сказать о прочих направлениях внедрения технологии:

Мониторинг входа в офисах и резиденциях;
Платёжные аппараты финансовых учреждений (“Face Pay”);
Цифровые паспорта последнего поколения;
Системы видеонаблюдения муниципальных служб;
Механизация отслеживания посещаемости школ/университетов;
Аутентификация юзеров компьютеров/ноутбуков.

Например: В московском метро уже тестируется система оплаты проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без пластика или мобильника! Похожие проекты осуществляются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким образом изменяется технический процесс в нынешнее время?

Каждый годочек появляются современные идеи для повышения стандарта функционирования систем лицевого распознавания:

Увеличивается детализация датчиков — чем больше деталей фиксируется камерой/глубинными сенсорами, тем меньше шанс ошибки;
Улучшаются нейронные сети — новейшие структуры модели MobileNetV3 обеспечивают возможность быстро адаптироваться к дополнительным чертам вида обладателя непосредственно на девайсе без пересылки информации в облачное хранилище.
Совершенствуются методы антиспуфинга — теперь телефоны могут отличать подлинные анимированные облики от фиксированных снимков/масок по мельчайшим микродвижениям.
Взаимодействие со смарт-гаджетами — смарт-часы могут автоматически закрыть доступ к телефон, если обладатель ушёл далеко.
Проявляются гибридные системы — в частности объединяющие голосовую идентификацию + облик + дактилоскопический след.

Вот, те тенденции особенно актуальны на сегодняшний день:

1) Миниатюризация деталей

Производители пытаются минимизировать размер прорези (“чёлки”) для сенсоры на экране за счёт внедрения маленьких ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработывание прямо на аппарате

Для увеличения приватности всё более обработки данных осуществляется внутри устройства без пересылки данных во внешний облачный сервис.

3) Стандартизация норм

Гугл интенсивно пропагандирует стандарт BiometricPrompt API, с целью чтобы подобные системы, вроде вулкан россия, и все Android-программы могли взаимодействовать с различными типами биометрии унифицированно.

Какое решить сегодня?

В случае если вам необходима наивысшая сохранность информации, остановите выбор на флагманские модели с интегрированным ИК-проектором или же ToF-сенсором глубины.

iPhone каждого новейших версий
Huawei Partner/P Series линейки
Mi Pro
Vivo X серии
Oppo Обнаружить Х линейки.

Если бюджет невелик – лучше отдавать предпочтение классическим методам безопасности (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в вулкан россия, задействовать только как опциональную опцию комфорта.

Как улучшить практичность использования опции?

Есть несколько лайфхаков для тех, кто уже использует функцию распознавания лица:

Регулярно меняйте свою фотографию-шаблон, если кардинально трансформируется облик.
Не забывайте очищать объектив фронтальной камеры – разводы могут снизить точность!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам включает камеру как только вы берёте его в руки.
При регистрации постарайтесь сохранять лицевую часть прямо напротив объектива без значительного наклона головы.
Используйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отворачиваетесь от экрана.

Возможности эволюции техники

В скоро наступающие периоды можно предвкушать появления полностью дистанционных способов идентификации индивидуума сразу по нескольким биометрическим данным параметрам одновременно: лицо + речь + манера ходьбы + манипуляции руками!

Также возможно появление свежих способов обеспечения личной информации – например, динамическое изменение электронного шаблона после каждой удачной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – единственная из самых увлекательных инноваций нашего периода! Она делает интеракцию со мобильным устройством удобнее чем когда-либо прежде, и такие программы, как vulkan russia, могут существенно улучшить ваш опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы осведомлены, как устроена эта технология внутри, – сумеете вдумчиво выбирать свой очередной девайс!