Каким способом функционирует распознавание лицевых образов в мобильных устройствах

Для чего мы предпочитаем разблокировку по лицевому распознаванию

В прошлые годы идентификация физиономий является одной из самых популярных возможностей для разблокировки мобильных телефонов. Всего некоторые годков тому назад основная масса пользователей обходились пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но с появлением таких технологий, как вулкан россия, нам достаточно просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какая вещь обуславливает данную функцию очень нужной? Прежде всего, это комфортно: не нужно удерживать в памяти замысловатые пароли или искать правильный палец в мраке. Во-вторых, это оперативно: современные алгоритмы узнают лицо буквально за мгновения ока. В-третью очередь, это впечатление футуризма — как будто в кинолентах про вулкан казино разведчиков.

Впрочем за такой кажущейся несложностью прячется весь мир сложных технологий и инженерных решений. Позвольте нам понять, как именно функционирует идентификация по лицу в современных гаджетах, какие бывают методы, насколько они безопасны и что нас ждёт впереди.

Сжатая повествование прогресса техники

Распознавание лиц как техника присутствует уже более пятидесяти лет. Первые эксперименты автоматизированного изучения лица были осуществлены еще в 1960-х годах в исследовательских центрах США. Тогда вычислительные машины умели лишь определять очертания головы и определять промежутки между очами и устами на монохромных фотографиях.

Начальные коммерческие установки появились в 90-х, но они были неидеальны: работали медленно и часто давали сбои. Только с развитием синтетических сетей и таких систем, как вулкан россии, мощных мобильных микросхем определение лиц стало по-настоящему массовым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с достоверным трёхмерным идентификацией лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и прочие стали интегрировать собственные разработки.

Ключевые стадии работы устройства определения

Процесс определения лица можно ориентировочно сегментировать на несколько ключевых этапов:

Идентификация лиц — камера выявляет существование людского лица в снимке.
Определение особенностей — система анализирует особенности лица: очертания глаз, носа, уст, позицию надбровных дуг.
Построение модели — создаётся особенный электронный отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение со стандартом — сформированный шаблон сравнивается с записанной при внесении биометрической информацией владельца.
Принятие определения — если совпадение достаточно значительное, смартфон разблокируется.

Любой из указанных шагов требует специальных алгоритмов и улучшений для скорой работы прямо на устройстве.

Технические компоненты: что находится внутри

Стандартная фронтальная камера.

Простейший простой способ распознавания лица использует только переднюю видеокамеру смартфона. Такой способ осуществлён во различных бюджетных вариантах Android-устройств.

Сильные стороны:

Не нуждается в требует дополнительные датчиков.
Быстро действует при хорошем освещённости.

Отрицательные стороны:

Несложно одурачить фотографией или видео.
Плохо функционирует при низком освещении или нестандартных углах обзора.

ИК фотокамера и точечный проектор

Более усовершенствованные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика составляет базу Face ID от Apple.

Каким способом это работает:

Точечный проектор проецирует на физиономию пользователя невидимую решетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 меток).
ИК камера регистрирует изменение формы этой сетки по поверхности физиономии.
Формируется трехмерная карта глубины глубинности, которая почти невозможна для имитации типичной фотографией или маской.

Преимущества

Надёжная функционирование даже в полной неосвещённости.
Большая сопротивляемость к имитациям.
Точность идентификации выше 99%.

Добавочные сенсоры

В определённых девайсах применяются также дополнительные сенсоры: ToF (Time-of-Flight), которые определяют время прохождения света до объекта и обратно; RGB-датчики дальности; специальные световые лидары для создания более точной 3D-модели физиономии.

Эти инновации применяются наиболее часто во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: искусственный ум на исполнении

Текущие системы идентификации лиц немыслимы в отсутствие эксплуатации искусственного интеллекта и машинного обучения. Именно благодаря таким технологиям, как вулкан россии, гаджет может идентифицировать юзера даже при метаморфозах облика: новая причёска, щетина, линзы или макияж не становятся препятствием для деблокировки.

Детектирование лица

На стартовом стадии программа должна быстро найти лицо в пределах всего снимка с камеры. Для этой задачи используются последовательные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые “обучены” идентифицировать лица людей среди множества других объектов.

Пример: алгоритм MTCNN в состоянии обнаруживать физиономию даже в случае неполном перекрытии (например, шалью или рукой).

Выделение основных моментов

После обнаружения лица механизм, такая как вулкан россии, вычисляет местоположение ключевых точек: кончики глаз, конец носа, границы губ и так далее. Как правило применяется от 68 до 128 основных точек на лице.

Это необходимо для стабилизации картинки: если юзер находится с телефон под наклоненным, или склонил голову, программа “выпрямляет” изображение до обычного угла для последующего изучения.

Создание биометрического идентификатора шаблона

Далее искусственная сеть строит сжатое математическое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след лица длиной от 128 до 512 чисел с плавающей запятой.

Данный образец весьма сложно имитировать: он не хранит непосредственно картинку пользователя, а лишь исключительные характеристики его вида, что делает его совершенным для таких площадок, как vulkan russia.

Сравнительный анализ и осуществление заключения

Когда человек хочет открыть смартфон взором, программа повторяет все описанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный границу (обычно больше 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ не предоставляется.

Привыкание к трансформациям внешнего вида

Занимательная характеристика актуальных систем — возможность самообучения. Если вы часто открываете телефон с обновленной стрижкой или очками, программа постепенно освежает эталонный шаблон вашего облика для улучшения точности функционирования без снижения уровня безопасности.

Защита биометрических данных информации.

Множество пользователи опасаются держать свои биометрические данные на телефоне из-за угрозы утечки информации или взлома устройства. Иные фирмы, вроде vulkan russia, предоставляют варианты для увеличения безопасности сведений пользователей.

Локальное сбережение: Большинство аппаратов записывает биометрические шаблоны исключительно в пределах безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не оставляют аппарат и недоступны включая создателю.
Шифрование: Все сведения хранятся только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.
Изоляция программ: Приложения сторонних разработчиков не обладают непосредственного возможности доступа к биометрическим; они могут лишь требовать подтверждение верификации личности через системный API.

Следует подчеркнуть значимую особенность: если кто-то достанет физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство производители внедряют меры безопасности от неосознанного разблокирования — в частности, требуют разомкнуть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают виды идентификации лиц?

На сегодняшний день можно выделить выделить 3 ключевых метода к реализации этой операции:

Программируемое двухмерное определение

Применяется только лицевая камера без экстра датчиков глубины. Такой метод встречается наиболее часто в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность осуществления; минимальная цена; оперативная работа при качественном освещении.
Минусы: несложно ввести в заблуждение фотографией; неустойчивая работа ночью; низкая охрана.

Оборудование для объёмное оцифровка

Задействует ИК видеокамеру + проектор точек + сенсоры глубины (Face ID от Apple; подобные технологии у Huawei Mate).
Плюсы: большая достоверность; нельзя обмануть изображение/видеозапись; устойчивая деятельность в любых условиях освещения.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные методы с дополнением ИИ

Используют комбинацию программных методов + техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, например вулкан россии и Google Pixel Face Unlock новейших версий, объединяют фронтальную камеру c инфракрасным сенсором движения Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями чужих устройств.

Иллюстрации применения разных техник

iPhone модели X/11/12/13/14 используют только техническое трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition в первый раз внедрил аналог Face ID в числе Android.
Samsung Galaxy S10 версия/S20 имеют как программное двухмерное идентификацию по фото фронталкой, так и сканер радужки глаза.
Huawei Mate20 Pro задействует комплекс из ИК-освещения + Dot Projector + ToF-датчик

Вопросы защиты и ложные тревоги

Несмотря на замечательный успехи технологий за недавние годы, совершенных механизмов пока не имеется:

Шанс подвоха: Недорогие телефоны просто доступны качественной фотографией хозяина или же роликом с дисплея иного гаджета.
Идентичные близняшки: Даже самые совершенные системы могут ошибиться между однояйцевыми близнецами либо семьями с очень схожей внешностью.
Трансформации внешности: Внезапное утрата веса/набор веса, пластические операции либо повреждения иногда необходимы для обновления данных биометрических данных.
Условия фотографирования: Интенсивная засветка солнцем или глубокая тень могут понизить аккуратность распознавания признаков.

Здесь некоторые советов для защищённому эксплуатации:

Для значимых операций всегда применяйте двухфакторную аутентификацию;
Не включайте опцию “Разблокировка по лицу” на недорогих аппаратах без ИК-сенсоров;
Постоянно апгрейдите прошивку смартфона для защиты от новых видов атак;
Включайте настройку “Требовать распахнутых глаз” везде, где она есть.

В каких местах дополнительно применяется технология кроме смартфонов?

Несмотря на то, что тема нашей работы посвящена именно смартфонам и планшетам, стоит упомянуть о альтернативных областях использования технологии:

Контроль входа в офисах и резиденциях;
Платёжные аппараты банков (“Face Pay”);
Цифровые паспорта современного поколения;
Системы видеомониторинга городских сервисов;
Механизация отслеживания явки образовательных учреждений/вузов;
Аутентификация участников ПК/ноутбуков.

Например: В столичном метро уже испытывается система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без карты или мобильника! Схожие проекты реализуются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким способом изменяется техпроцесс сегодня?

Каждый год появляются новые идеи для улучшения стандарта функционирования систем лицевого распознавания:

Увеличивается разрешение датчиков — чем больше деталей фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность погрешности;
Совершенствуются нейросети — передовые конструкции модели MobileNetV3 обеспечивают возможность скоростно адаптироваться к новым особенностям внешности обладателя прямо на устройстве без отправки данных в облако.
Улучшаются способы антиспуфинга — теперь телефоны способны отличать подлинные живые облики от статичных снимков/масок по микроскопическим микродвижениям.
Синхронизация со интеллектуальными приборами — умные часы могут авто закрыть доступ к телефон, если пользователь отошёл далеко.
Возникают смешанные механизмы — в частности объединяющие голосовую аутентификацию + облик + дактилоскопический след.

Вот, которые тенденции в особенности актуальны сейчас:

1) Миниатюризация элементов

Изготовители пытаются минимизировать величину выреза (“чёлки”) под сенсоры на дисплее за счёт интеграции компактных ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на аппарате

Для улучшения конфиденциальности всё более вычислений осуществляется локально без передачи данных во внешний облачный услугу.

3) Стандартизация норм

Google энергично продвигает стандарт BiometricPrompt API, чтобы такие платформы, как вулкан россия, и любые Android-аппы могли работать с различными типами биометрии стандартизированно.

Какое выбрать сегодня?

Когда тебе важна наивысшая сохранность информации, остановите выбор на топовые устройства с вмонтированным ИК-проектором или же ToF-датчиком глубины.

iPhone всех существующих новейших моделей
Huawei Partner/P линейки
Mix Professional
Vivo X модели
Oppo Обнаружить Х линейки.

Если финансы скромен – лучше предпочесть традиционным способам защиты (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в вулкан россия, использовать только как второстепенную возможность комфорта.

Каким способом увеличить комфорт работы функции?

Есть пара хитростей для людей, кто уже применяет разблокировку по лицу:

Периодически обновляйте свою фотографию-шаблон, если значительно изменяется внешний вид.
Не забывайте чистить линзу фронтальной камеры – пятна могут понизить точность!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам активирует фотоаппарат как только вы берёте его в руки.
При регистрационного процесса пытайтесь сохранять лицевую часть неподвижно напротив камеры исключая значительного наклона головы.
Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвернулись от дисплея.

Возможности развития техники

В ближайшие годы можно ожидать развития полностью дистанционных способов идентификации персоны сразу по нескольким биометрическим данным параметрам одновременно: физиономия + голос + шаги + движения рук!

Также вероятно появление новых подходов охраны конфиденциальности – например, изменяющееся корректировка диджитал шаблона после каждой успешной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – одна из очень захватывающих технологий нашего времени! Она обеспечивает интеракцию со телефоном удобнее чем когда-либо прежде, и такие программы, как vulkan russia, могут значительно повысить ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы осведомлены, как устроена эта методика изнутри, – сумеете более осмысленно определять свой следующий гаджет!