Как действует определение лицевых образов в смартфонах

Почему мы предпочитаем разблокирование по фейсу

В прошлые годы распознавание лиц является одной из самых популярных опций для открытия смартфонов. Всего несколько лет ранее основная часть юзеров удовлетворялись пин-кодами, паролями или сканерами отпечатков пальцев. Но с появлением подобных технологий, например Вулкан Платинум, нам вполне просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Что обуславливает эту конкретную возможность такой востребованной? Для начала, это удобно: не нужно удерживать в памяти замысловатые пароли или искать верный палец в темноте. Во-вторых, это быстро: современные программы узнают лицо фактически за мгновение. В-третьем пункте, это впечатление футуристичности — словно в кинофильмах про вулкан платинум шпионов.

Впрочем за такой кажущейся несложностью скрывается целый мир сложных техник и инженерных разработок. Позвольте нам исследовать, как именно действует фейсканирование в новейших гаджетах, какие существуют методы, насколько они защищены и что нас ждёт впереди.

Сжатая повествование эволюции инноваций

Идентификация лиц как технология присутствует уже более 50 лет. Начальные эксперименты автоматического анализа лица были осуществлены еще в 1960-х годы в научных учреждениях США. Тогда компьютеры могли лишь обозначать очертания лица и вычислять дистанции между зрачками и губами на монохромных снимках.

Первые торговые системы появились в 90-х, но они были далеки от совершенства: работали медленно и часто ошибались. Только с развитием синтетических сетей и таких платформ, как Vulkan Platinum, сильных мобильных процессоров определение лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным сканированием лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали интегрировать собственные решения.

Ключевые этапы функционирования системы определения

Процесс идентификации лица можно примерно сегментировать на несколько основных этапов:

Обнаружение лица — аппарат выявляет присутствие гуманного лица в изображении.
Определение характеристик — механизм исследует контуры облика: очертания зрительных органов, носа, губ, позицию надбровных дуг.
Построение шаблона — создаётся неповторимый виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение с стандартом — созданный модель сверяется с записанной при учёте биометрической информацией владельца.
Принятие решения — если соответствие достаточно существенное, смартфон открывается.

Всякий из указанных шагов требует специальных процедур и улучшений для скорой работы прямо на устройстве.

Аппаратные компоненты: что прячется внутри

Стандартная передняя камера.

Наиболее несложный метод определения лица применяет лишь переднюю камеру смартфона смартфона. Данный подход реализован во многочисленных бюджетных вариантах Android-устройств.

Сильные стороны:

Не нуждается в требует внешних сенсоров.
Шустро функционирует при качественном свете.

Отрицательные стороны:

Легко обмануть снимком или видеозаписью.
Плохо работает при плохом освещении или непривычных точках зрения.

ИК камера и пунктирный проекционный аппарат

Более совершенные системы, такие как Vulkan Platinum, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика составляет базу Face ID от Apple.

Каким способом это функционирует:

Точечный проектор отображает на физиономию использующего невидимую сетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 меток).
ИК камера фиксирует изменение формы этой сетки по плоскости лица.
Создаётся трехмерная глубинная карта глубины, что практически неподвластна для фальсификации типичной фото или маской.

Преимущества

Надёжная деятельность даже в полной тьме.
Сильная защита к подделкам.
Точность идентификации свыше 99%.

Добавочные сенсоры

В отдельных устройствах применяются также дополнительные сенсоры: ToF (Time-of-Flight), которые фиксируют время распространения света до предмета и обратно; Цветные-датчики дальности; специальные лазерные дальномеры для создания более аккуратной 3D-модели лица.

Эти технологии применяются чаще всего во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: искусственный разум в работе

Современные устройства опознания физиономий невозможны без использования ИИ и машинного обучения. Именно вследствие таким технологиям, как Vulkan Platinum, гаджет в состоянии узнавать пользователя даже при изменениях облика: новая стрижка, борода, оптика или макияж не становятся барьером для открытия.

Детектирование физиономии

На стартовом шаге алгоритм должна оперативно найти лицо в пределах целого кадра с камеры. Для данной цели используются каскадные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые подготовлены распознавать лица людей среди множества других объектов.

Пример: алгоритм MTCNN может находить физиономию даже в случае неполном перекрытии (например, шалью или рукой).

Идентификация основных моментов

После идентификации лица механизм, такая как Vulkan Platinum, определяет положение ключевых точек: края глаз, конец носа, границы губ и так далее. Как правило задействуется от 68 до 128 основных маркеров на лице.

Это нужно для выравнивания картинки: если человек удерживает смартфон под наклоном, или повернул головку, программа корректирует картинку до обычного угла для последующего изучения.

Создание биометрии образца

Далее нейросеть строит сжатое математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 флоатов.

Этот шаблон весьма трудно имитировать: он не хранит само фото пользователя, а лишь исключительные особенности его облика, что делает его оптимальным для таких систем, как Вулкан Казино Платинум.

Сопоставление и вынесение заключения

Когда юзер желает открыть смартфон взглядом, программа осуществляет все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный уровень (обычно превышает 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ блокируется.

Адаптация к изменениям внешности

Увлекательная характеристика нынешних систем — способность самообучения. Если ты часто доступаете к смартфон с свежей прической или очками, система постепенно освежает базовый образец вашего лица для улучшения точности функционирования без снижения уровня безопасности.

Охрана биометрических данных данных.

Многие пользователи боятся сохранять свои биометрические идентификационные данные на мобильном устройстве из-за вероятности утечки информации или взлома устройства. Определенные компании, вроде Вулкан Казино Платинум, предлагают варианты для повышения безопасности информации клиентов.

Локальное сбережение: Большинство устройств сохраняет биометричные шаблоны лишь внутрь безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не оставляют аппарат и закрыты в том числе изготовителю.
Шифрование: Все сведения хранятся только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция программ: Программы сторонних разработчиков не имеют прямого доступа к биометрическим данным; они могут лишь запрашивать факт верификации личности через системный API.

Стоит отметить значимую подробность: если кто-либо получит физический доступ к вашему телефону (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество изготовители реализуют систему защиты от “слепого” разблокирования — в частности, заставляют разомкнуть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие бывают виды определения лиц на изображениях?

В настоящее время можно определить определить три главных способа к выполнению этой функции:

Софтверное 2D определение

Используется только передняя видеокамера без дополнительных сенсоров глубины. Этот способ наблюдается чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость осуществления; минимальная стоимость; оперативная работа при хорошем освещении.
Минусы: просто обмануть фотографией; ненадежная деятельность ночью; недостаточная безопасность.

Оборудование для трёхмерное сканирование

Использует ИК камеру + проекционный модуль пикселей + датчики глубины (Face ID у Apple; аналогичные решения у Huawei Mate).
Преимущества: большая надёжность; не получится исказить фото/видео; устойчивая деятельность при любом освещении.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Гибридные методы с ИИ-дополнением

Применяют комбинацию софтверных методов + аппаратно-техническую обработку + последующую обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные товары, например Vulkan Platinum и Google Pixel Face Unlock новейших поколений, комбинируют фронталку c ИК сенсором движения Soli Radar для защиты от фальсификаций руками/масками/видеоэкранами посторонних устройств.

Примеры применения разных методов

iPhone серии X/11/12/13/14 задействуют только аппаратное трёхмерное сканирование
Xiaomi Mi8 Explorer Edition первый раз представил подобие Face ID в числе Android.
Samsung Galaxy S10 модель/S20 поддерживают как софтверное двухмерное идентификацию по снимку фронталкой, так и датчик глазного ириса.
Huawei Mate20 Pro применяет систему из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Трудности безопасности и ложные тревоги

Несмотря на впечатляющий развитие инноваций за недавние лет, безупречных системы пока не имеется:

Возможность подвоха: Доступные телефоны просто доступны качественной фотографией пользователя либо видео с дисплея иного гаджета.
Идентичные близняшки: Даже самые совершенные механизмы могут ошибиться между монозиготными близнецами либо семьями с очень аналогичной внешностью.
Метаморфозы облика: Резкое снижение веса/набор веса, хирургические вмешательства или травмы в некоторых случаях требуют перерегистрации биометрии.
Условия записи: Сильная подсветка солнечным светом или интенсивная темнота могут уменьшить аккуратность идентификации признаков.

Ниже некоторые подсказок для безопасному эксплуатации:

Для критически важных операций всегда используйте двухфакторную аутентификацию;
Не активируйте функцию “Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
Постоянно обновляйте прошивку мобильного устройства для предотвращения угроз от новых видов атак;
Включайте опцию “Требовать открытых глаз” там, где она имеется.

В каких областях ещё находится применение технологии кроме мобильных телефонов?

Пускай основная мысль этой статьи касается конкретно смартфонам и планшетам, следует отметить других сферах применения технологии:

Мониторинг доступа в рабочих помещениях и резиденциях;
Платёжные устройства банков (“Face Pay”);
Электронные идентификационные документы современного поколения;
Комплексы видеоконтроля городских подразделений;
Механизация регистрации присутствия школ/вузов;
Аутентификация пользователей ПК/ноутбуков.

Например: В городском метро уже испытывается система платежа проезда по лицу (“Face Pay”) — достаточно пройти через турникет без карты или телефона! Аналогичные программы реализуются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом трансформируется технология сегодня?

Каждый годочек появляются современные мысли для усовершенствования уровня функционирования систем распознавания лиц:

Увеличивается разрешение датчиков — чем больше информации фиксируется камерой/датчиками глубины, тем меньше вероятность погрешности;
Развиваются нейронные сети — новейшие конструкции модели MobileNetV3 обеспечивают возможность скоростно адаптироваться к свежим особенностям облика пользователя непосредственно на девайсе без пересылки информации в облачное хранилище.
Улучшаются методы антиспуфинга — теперь смартфоны способны различать настоящие живые лица от неподвижных фото/маскировок по незаметным микродвижениям.
Интеграция со интеллектуальными приборами — умные часы могут автоматически блокировать смартфон, если владелец отошёл далеко.
Появляются комбинированные устройства — к примеру объединяющие голосовую аутентификацию + лицо + дактилоскопический след.

Здесь, какие тенденции очень востребованы в данный момент:

1) Миниатюризация деталей

Компании намереваются сократить величину выреза (“чёлки”) для сенсоры на дисплее за счёт интеграции компактных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на аппарате

Для повышения личной безопасности всё более расчётов осуществляется внутри устройства без пересылки данных во сторонний облачный услугу.

3) Упорядочивание стандартов

Google активно продвигает норму BiometricPrompt API, с целью чтобы такие системы, например как Вулкан Платинум, и любые Android-программы были совместимы с любыми видами биометрии стандартизированно.

Что решить сегодня?

Когда тебе нужна наивысшая сохранность данных, выбирайте передовые устройства с вмонтированным ИК-проектором или же ToF-сенсором глубины.

iPhone каждого актуальных моделей
Huawei Partner/P Series линейки
Mi Pro
Vivo X линейки
Oppo Find Х серии.

Если средства невелик – лучше выбирать обычным методам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в Вулкан Платинум, применять только как второстепенную возможность комфорта.

Каким способом увеличить удобство использования опции?

Есть пара хитростей для пользователей, кто уже пользуется разблокировку через лицо:

Часто обновляйте свою фото-шаблон, если кардинально меняется облик.
Не забывайте чистить объектив фронтальной камеры – загрязнения могут уменьшить точность!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам включает фотоаппарат когда вы поднимаете его.
Во время записи постарайтесь сохранять лицевую часть неподвижно перед видеоустройства без резкого наклона головы.
Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отвернулись от дисплея.

Будущее развития техники

В скоро наступающие годы можно предвкушать возникновения полностью безконтактных способов распознавания человека сразу по нескольким биометрическим параметрам одновременно: облик + речь + манера ходьбы + манипуляции руками!

Также возможно развитие новых подходов обеспечения приватности – к примеру, динамическое модификация диджитал шаблона после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – единственная из наиболее увлекательных техник нашего периода! Она обеспечивает интеракцию со смартфоном комфортнее чем до этого, и такие аппы, как Вулкан Казино Платинум, могут в разы улучшить ваш юзерский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы знаете, как функционирует эта технология в деталях, – сумеете осознаннее определять свой очередной гаджет!