Как функционирует идентификация лиц в мобильных устройствах

Для чего мы останавливаемся на разблокирование по фейсу

В последние годы распознавание физиономий превратилось в одной из самых распространённых опций для деблокировки умных телефонов. Всего некоторые годов ранее основная часть юзеров довольствовались пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением таких технологий, например Вулкан 24, нам вполне лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Какой аспект делает эту конкретную возможность такой востребованной? Во-первых, это удобно: не нужно удерживать в памяти замысловатые пароли или отыскивать нужный палец в темноте. Также, это оперативно: современные системы распознают лицо буквально за мгновение. В-третью очередь, это ощущение будущего — будто в кинофильмах про вулкан казино агентов.

Впрочем за данной на первый взгляд простотой скрывается весь вселенная сложных технологий и инженерных разработок. Попробуем исследовать, как точно работает распознавание лиц в современных гаджетах, какие применяются способы, насколько они безопасны и что нас предстоит.

Краткая история развития технологии

Распознавание лиц как технология присутствует уже более пятидесяти лет. Изначальные попытки автоматизированного изучения лиц были сделаны еще в 1960-х годы в лабораториях США. Тогда компьютеры способны были лишь выделять очертания головы и определять промежутки между глазами и ртом на ахроматических фотографиях.

Изначальные бизнес платформы возникли в девяностых годах, но они были несовершенны: работали медленно и нередко ошибались. Только с прогрессом нейронных сетей и таких систем, как Вулкан 24 Казино, высокопроизводительных мобильных процессоров идентификация лиц стало по-настоящему массовым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с достоверным трёхмерным сканированием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали внедрять собственные разработки.

Главные шаги функционирования устройства определения

Процесс распознавания лица можно условно сегментировать на несколько ключевых этапов:

Идентификация лиц — устройство распознает присутствие людского лица в кадре.
Выделение характеристик — алгоритм анализирует особенности облика: форму зрительных органов, носа, уст, расположение надбровных дуг.
Построение шаблона — создаётся уникальный электронный отпечаток (faceprint) на основе выделенных признаков.
Сравнение со стандартом — сформированный шаблон сверяется со сохранённой при внесении биометрической информацией владельца.
Принятие выбора — если сходство достаточно значительное, смартфон разблокируется.

Каждый из данных этапов требует индивидуальных процедур и улучшений для быстрой работы непосредственно на девайсе.

Технические компоненты: что находится внутри

Типичная селфи камера.

Самый легкий способ определения облика применяет только лицевую камеру смартфона смартфона. Подобный метод реализован во многих недорогих версиях Android-устройств.

Достоинства:

Не нуждается в нуждается в дополнительных сенсоров.
Оперативно функционирует при достаточном освещённости.

Слабые стороны:

Несложно одурачить изображением или видеозаписью.
Неудачно функционирует при низком освещении или нестандартных ракурсах.

ИК фотокамера и точечный проектор

Более совершенные системы, такие как Вулкан 24 Казино, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика составляет базу Face ID от Apple.

Как это функционирует:

Точечный проекционный прибор проецирует на физиономию пользователя невидимую структуру из тысяч инфракрасных точек (например, Face ID применяет около 30 000 точек).
ИК камера фиксирует искривление этой решетки по плоскости лица.
Получается трехмерная карта глубины глубинности, что практически неосуществима для подделки обычной снимком или маской.

Выигрыши

Надёжная деятельность даже в полной тьме.
Сильная защита к подделкам.
Точность распознавания свыше 99%.

Дополнительные датчики

В определённых устройствах применяются также дополнительные сенсоры: ToF (Time-of-Flight), которые фиксируют период прохождения луча до предмета и обратно; Трехцветные-датчики дальности; специальные лазерные лидары для создания более детализированной 3D-модели лица.

Эти разработки встречаются наиболее часто во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: искуственный разум на исполнении

Современные механизмы распознавания физиономий немыслимы без применения искусственного интеллекта и машинного обучения. Именно вследствие таким технологиям, как Вулкан 24 Казино, аппарат может распознавать пользователя даже при метаморфозах облика: новая укладка, борода, очки или грим не становятся препятствием для деблокировки.

Детектирование лиц

При начальном шаге программа должна мгновенно обнаружить ликовое изображение в пределах всего снимка с камеры. Для этой задачи задействуются каскадные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые подготовлены распознавать человеческие лица среди множества других объектов.

Пример: процесс MTCNN способен находить лицо даже с неполном перекрытии (например, шалью или ладонью).

Определение основных точек

После идентификации лица устройство, такая как Вулкан 24 Казино, устанавливает местоположение ключевых точек: уголки глаз, конец носа, края губ и так далее. Обычно применяется от 68 до 128 ключевых точек на лицевой области.

Это действие требуется для выравнивания изображения: если человек находится с смартфон под наклоненным, или склонил голову, программа корректирует изображение до стандартного положения для дальнейшего анализа.

Построение биометрического идентификатора модели

Далее нейронная сеть строит уплотненное числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ лица длиной от 128 до 512 вещественных чисел.

Такой шаблон очень затруднительно подделать: он не хранит непосредственно картинку юзера, а лишь уникальные характеристики его внешности, что делает его оптимальным для таких площадок, как Vulkan24.

Сравнительный анализ и принятие заключения

Если человек намеревается разблокировать смартфон взглядом, механизм осуществляет все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный границу (обычно выше 99%), телефон, как и платформа Vulkan24, открывается; если нет — доступ запрещается.

Привыкание к изменениям внешности

Интересная характеристика современных систем — способность самостоятельного обучения. Если вы часто разблокируете телефон с обновленной укладкой или оптикой, программа постепенно модернизирует основной модель вашего лица для увеличения точности действия без снижения уровня безопасности.

Защита биометрических данных информации.

Большинство клиенты беспокоятся сохранять свои био-идентификационные данные на смартфоне из-за вероятности потери данных или взлома устройства. Иные фирмы, например Vulkan24, предлагают варианты для улучшения защиты данных клиентов.

Локальное сбережение: Преимущественно девайсов хранит биометричные образцы лишь в пределах безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не выходят из устройство и недоступны даже производителю.
Шифрование: Все информация сохраняются только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.
Изоляция приложений: Приложения сторонних девелоперов не имеют прямого возможности доступа к биометрическим; они могут лишь запрашивать подтверждение подтверждения идентичности через системный API.

Стоит подчеркнуть важную особенность: в случае, если кто-то сможет получить физический доступ к вашему телефону (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие производители внедряют систему защиты от автоматического разблокирования — в частности, заставляют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают виды идентификации лиц на изображениях?

На сегодняшний день можно определить различить 3 ключевых подхода к осуществлению этой операции:

Программное плоское определение

Эксплуатируется только лицевая видеокамера без вспомогательных датчиков глубины. Такой подход используется обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность реализации; минимальная цена; оперативная работа при достаточном свете.
Минусы: легко обмануть фотографией; нестабильная деятельность ночью; недостаточная охрана.

Аппаратное 3D сканирование

Использует ИК камеру + проекционный модуль точек + датчики дистанции (Face ID у Apple; подобные решения у Huawei Mate).
Плюсы: большая достоверность; не получится подделать фото/видео; устойчивая работа в любых условиях освещения.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Гибридные методы с ИИ-дополнением

Применяют комбинацию программных методов + аппаратно-техническую обработку + постобработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, например Вулкан 24 Казино и Google Pixel Face Unlock новейших версий, комбинируют фронтальную камеру c инфракрасным датчиком мобильности Soli Radar для предотвращения от фальсификаций руками/масками/видеодисплеями посторонних устройств.

Примеры применения различных способов

iPhone модели X/11/12/13/14 задействуют только аппаратное трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition первый раз внедрил эквивалент Face ID среди Android.
Samsung Galaxy S10 версия/S20 поддерживают как программное 2D распознавание по снимку фронталкой, так и сенсор радужки глаза.
Huawei Mate20 Pro применяет набор из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Трудности защиты и неверные сигналы

Несмотря на поразительный развитие техники за прошедшие лет, безупречных механизмов пока не существует:

Вероятность подвоха: Недорогие телефоны просто “разблокируются” четкой фотографией пользователя или же видео с дисплея иного гаджета.
Идентичные двойняшки: Даже самые идеальные устройства могут спутать между однояйцевыми близнецами либо семьями с очень аналогичной внешностью.
Трансформации внешности: Резкое утрата веса/увеличение массы тела, пластические операции или повреждения иногда требуют повторной регистрации биометрических данных.
Условия съёмки: Интенсивная подсветка солнечным светом или же глубокая темнота могут уменьшить верность идентификации признаков.

Ниже некоторые рекомендаций для защищённому эксплуатации:

Для значимых операций всегда внедряйте двухфакторную аутентификацию;
Не активируйте опцию “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
Регулярно обновляйте прошивку программное обеспечение смартфона для защиты от новых видов атак;
Включайте опцию “Требовать открытых глаз” в тех местах, где она есть.

В каких местах также находится применение технология кроме смартфонов?

Пускай тема этой работы посвящена конкретно смартфонам и планшетам, следует отметить других сферах применения технологии:

Управление доступа в офисах и жилых домах;
Платёжные терминалы банков (“Face Pay”);
Электронные удостоверения личности современного типа;
Установки видеомониторинга городских сервисов;
Автоматизирование отслеживания посещаемости школ/университетов;
Авторизация юзеров компьютеров/ноутбуков.

Например: В столичном метро уже тестируется система платежа проезда по лицу (“Face Pay”) — хватит пройти через турникет без пластика или телефона! Похожие проекты осуществляются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким образом меняется технология в нынешнее время?

Любой год проявляются современные концепции для усовершенствования стандарта работы систем распознавания лиц:

Увеличивается чёткость сенсорных устройств — чем больше информации фиксируется видеокамерой/датчиками глубины, тем меньше шанс неточности;
Улучшаются нейронные сети — передовые архитектуры вида MobileNetV3 дают возможность оперативно осваивать дополнительным чертам внешности пользователя напрямую на гаджете без пересылки информации в облачное хранилище.
Совершенствуются способы антиспуфинга — теперь телефоны умеют распознавать реальные анимированные лица от статичных снимков/маскировок по микроскопическим движениям кожи.
Интеграция со умными устройствами — умные часы могут самостоятельно блокировать смартфон, если обладатель отошёл далеко.
Проявляются комбинированные устройства — в частности комбинирующие речевую опознание + физиономию + отпечаток пальца.

Вот, какие направления в особенности популярны в данный момент:

1) Уменьшение элементов

Компании стараются уменьшить размер отверстия (“чёлки”) под сенсоры на экране за счёт встраивания маленьких ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Переработка прямо на аппарате

Для улучшения приватности всё более расчётов осуществляется на месте без отправки информации во внешний облачный сервис.

3) Унификация регламентов

Гугл интенсивно пропагандирует стандарт BiometricPrompt API, чтобы подобные площадки, как Вулкан 24, и все Android-приложения были совместимы с любыми видами биометрии единообразно.

Что подобрать сегодня?

Когда вам необходима предельная безопасность информации, подбирайте передовые устройства с интегрированным ИК-излучателем или ToF-датчиком глубины.

iPhone всех существующих актуальных версий
Huawei Mate/P серии
Mix Expert
Vivo X модели
Oppo Найти Х линейки.

Если средства невелик – лучше предпочесть традиционным способам защиты (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в Вулкан 24, применять только как опциональную возможность комфорта.

Каким способом повысить комфорт работы функции?

Есть некоторые хитростей для людей, кто уже использует функцию распознавания лица:

Периодически меняйте свою фотографию-шаблон, если сильно трансформируется внешний вид.
Не упускайте из виду протирать линзу фронтальной камеры – разводы могут уменьшить четкость!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам запускает фотоаппарат если вы берёте его в руки.
При регистрации постарайтесь удерживать лицевую часть прямо перед видеоустройства без сильного наклона головы.
Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвернулись от дисплея.

Перспективы прогресса техники

В скоро наступающие годы можно предвкушать развития полностью безконтактных способов идентификации человека сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + голос + походка + манипуляции руками!

Также возможно развитие новых подходов обеспечения личной информации – к примеру, изменяющееся модификация цифрового шаблона после каждой успешной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – единственная из очень интересных технологий нашего периода! Она делает взаимодействие со мобильным устройством комфортнее чем до этого, и такие программы, как Vulkan24, могут существенно повысить ваш пользовательский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы понимаете, как работает эта методика изнутри, – будете в состоянии более осмысленно подбирать свой будущий гаджет!