Каким образом работает определение лиц в смартфонах

Зачем мы предпочитаем разлочивание по фейсу

В последние годы распознавание лиц стало одной из самых популярных возможностей для открытия умных телефонов. Всего некоторые лет тому назад большинство пользователей обходились PIN-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением таких технологий, например вулкан россия, нам вполне лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Какая вещь обуславливает эту конкретную особенность очень нужной? Для начала, это комфортно: не нужно удерживать в памяти трудные пароли или искать правильный палец в тьме. Кроме того, это быстро: современные алгоритмы узнают лицо буквально за мгновение. В-третью очередь, это чувство футуризма — будто в кинолентах про вулкан казино разведчиков.

Тем не менее за такой видимой несложностью скрывается весь вселенная сложных методов и инженерных концепций. Попробуем разобраться, как именно работает фейсканирование в современных гаджетах, какие применяются методы, насколько они безопасны и что нас ждёт впереди.

Сжатая повествование эволюции техники

Идентификация лиц как техника имеется уже более пятидесяти годов. Первые попытки машинного изучения лиц были предприняты еще в 1960-х годы в исследовательских центрах США. Тогда ЭВМ умели лишь определять контуры головы и вычислять промежутки между зрачками и ртом на монохромных фотографиях.

Изначальные торговые системы возникли в 90-х, но они были неидеальны: работали медленно и нередко ошибались. Только с прогрессом синтетических сетей и таких платформ, как вулкан россии, мощных мобильных микросхем распознавание лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с достоверным трёхмерным распознаванием лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали внедрять личные решения.

Главные этапы работы механизма идентификации

Процесс определения лица можно условно поделить на несколько важных этапов:

Идентификация лица — аппарат выявляет присутствие людского образа в изображении.
Определение характеристик — алгоритм анализирует контуры физиономии: очертания глаз, обонятельного органа, уст, положение надбровных дуг.
Построение шаблона — создаётся особенный цифровой отпечаток (faceprint) на основе выделенных признаков.
Сравнение с эталоном — полученный модель сравнивается с записанной при внесении биометрической сведениями владельца.
Принятие решения — если совпадение достаточно существенное, смартфон разблокируется.

Каждый из указанных этапов нуждается в особых алгоритмов и усовершенствований для скорой работы прямо на устройстве.

Технические элементы: что скрыто в их недрах

Обычная фронтальная камера.

Самый легкий способ определения физиономии задействует лишь лицевую камеру смартфона мобильного устройства. Подобный метод внедрён во многих бюджетных моделях Android-устройств.

Плюсы:

Необходимо потребляет дополнительные сенсоров.
Оперативно функционирует при хорошем освещённости.

Слабые стороны:

Несложно обмануть снимком или видео.
Плохо работает при низком освещённости или нестандартных ракурсах.

Инфракрасная фотокамера и точечный проектор

Более совершенные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс лежит в основе Face ID от Apple.

Как это функционирует:

Точечный устройство проекции отображает на физиономию пользователя невидимую сетку из тысяч инфракрасных меток (например, Face ID использует около 30 000 пятен).
Инфракрасная устройство фиксирует изменение формы этой решетки по поверхности лица.
Создаётся трёхмерная карта глубинности, которая почти неподвластна для подделки стандартной фото или маской.

Плюсы

Надёжная работа даже в полной тьме.
Большая сопротивляемость к имитациям.
Точность определения выше 99%.

Добавочные датчики

В отдельных устройствах используются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые измеряют время прохождения луча до предмета и обратно; RGB-датчики глубины; специальные оптические лидары для построения более детализированной 3D-модели лица.

Эти разработки встречаются наиболее часто во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные алгоритмы: синтетический разум на исполнении

Современные системы идентификации лиц неосуществимы в отсутствие эксплуатации artificial intelligence и машинного обучения. Именно из-за таким технологиям, как вулкан россии, гаджет может узнавать юзера даже при изменениях внешнего вида: новая стрижка, борода, оптика или косметика не становятся помехой для деблокировки.

Детектирование лица

При первом стадии алгоритм должна быстро найти лицо в пределах целого кадра камеры. Для данной цели применяются последовательные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые “обучены” распознавать лица людей среди множества других объектов.

Пример: процесс MTCNN может находить облик даже с частичном закрытии (например, платком или рукой).

Определение ключевых точек

После идентификации лица устройство, такая как вулкан россии, вычисляет расположение основных точек: края глаз, кончик носа, контуры губ и так далее. Часто применяется от 68 до 128 ключевых маркеров на лицевой области.

Данное нужно для выравнивания изображения: если пользователь находится с телефон под наклоном, или склонил головку, программа исправляет картинку до обычного угла для дальнейшего анализа.

Создание биометрического идентификатора образца

Далее нейросеть строит уплотненное цифровое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след лица длиной от 128 до 512 чисел с плавающей запятой.

Такой образец очень трудно сфальсифицировать: он не сохраняет непосредственно фото пользователя, а лишь исключительные особенности его облика, что делает его оптимальным для таких площадок, как vulkan russia.

Сопоставление и принятие заключения

Если пользователь хочет разлочить мобильник взором, программа осуществляет все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый порог (обычно выше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ блокируется.

Адаптация к метаморфозам внешнего вида

Увлекательная особенность современных систем — возможность самообучения. Если вы регулярно доступаете к телефон с новой прической или очками, алгоритм постепенно обновляет эталонный шаблон вашего облика для повышения точности работы без снижения уровня безопасности.

Охрана биометрических информации.

Множество юзеры опасаются держать свои биометрические идентификационные данные на телефоне из-за угрозы потери данных или взлома устройства. Некоторые фирмы, такие как vulkan russia, предлагают варианты для увеличения сохранности информации юзеров.

Локальное хранение: Большинство устройств хранит био-идентификационные шаблоны исключительно внутрь безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не покидают аппарат и закрыты в том числе производителю.
Шифрование: Все сведения сберегаются только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция приложений: Приложения внешних разработчиков не обладают прямого доступа к биометрическим; они могут лишь требовать факт подтверждения личности через системный API.

Следует отметить важную особенность: если какой-то человек достанет физический доступ к вашему телефону (например, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство изготовители реализуют защиту от неосознанного разблокирования — в частности, заставляют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют типы распознавания лиц?

В настоящее время можно различить 3 ключевых способа к осуществлению этой функции:

Софтверное плоское распознавание

Используется только передняя камера без дополнительных детекторов дистанции. Этот способ используется чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность воплощения; минимальная затраты; скоростная деятельность при качественном освещении.
Минусы: просто одурачить снимком; нестабильная работа ночью; слабая защищенность.

Оборудование для трёхмерное сканирование

Использует инфракрасную камеру + проектор пикселей + датчики глубины (Face ID от Apple; аналогичные решения у Huawei Mate).
Преимущества: высокая надёжность; невозможно обмануть изображение/видеозапись; постоянная функционирование в любых условиях освещения.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Смешанные способы с интеграцией ИИ

Используют комбинацию программируемых методов + техническую обработку + последующую обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, например вулкан россии и Google Pixel Face Unlock последних версий, объединяют фронталку c ИК сенсором мобильности Soli Radar для защиты от фальсификаций руками/масками/видеоэкранами чужих устройств.

Образцы эксплуатации разнообразных способов

iPhone линейки X/11/12/13/14 используют только физическое трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition в первый раз предложил аналог Face ID в числе Android.
Samsung Galaxy S10/S20 обеспечивают как программное обеспечение плоское распознавание по изображению селфи-камерой, так и датчик глазного ириса.
Huawei Mate20 Pro применяет систему из ИК-освещения + Dot Projector + ToF-датчик

Трудности защиты и ложные тревоги

Несмотря на замечательный развитие инноваций за прошедшие годы, безупречных механизмов пока не существует:

Возможность подвоха: Недорогие мобильники без труда доступны качественной снимком владельца либо видео с дисплея иного гаджета.
Идентичные близняшки: Даже самые совершенные механизмы могут спутать между монозиготными близнецами либо родичами с очень похожей внешностью.
Метаморфозы облика: Внезапное похудение/набор веса, хирургические вмешательства или повреждения порой требуют перерегистрации биометрических данных.
Условия фотографирования: Яркая засветка солнечным светом либо плотная темнота могут уменьшить верность идентификации признаков.

Вот пара рекомендаций по защищённому эксплуатации:

Для значимых операций всегда применяйте двухэтапную аутентификацию;
Не запускайте функцию “Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
Регулярно апгрейдите прошивку смартфона для обеспечения безопасности от новых видов атак;
Включайте настройку “Требовать распахнутых глаз” в тех местах, где она доступна.

Где также применяется технология кроме мобильных телефонов?

Несмотря на то, что основная мысль нашей публикации сосредоточена на конкретно мобильным устройствам, стоит упомянуть о прочих направлениях внедрения технологии:

Контроль прохода в офисах и жилых домах;
Платёжные терминалы финансовых учреждений (“Face Pay”);
Цифровые паспорта нового образца;
Системы видеомониторинга муниципальных подразделений;
Автоматизация регистрации явки школ/университетов;
Вход участников ПК/ноутбуков.

Например: В московском метро уже проверяется система оплаты проезда по лицу (“Face Pay”) — нужно лишь пройти через барьер без карты или телефона! Аналогичные инициативы реализуются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом изменяется техпроцесс сегодня?

Всякий год проявляются современные концепции для улучшения качества работы систем лицевого распознавания:

Увеличивается детализация датчиков — чем больше информации фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность погрешности;
Развиваются нейронные сети — современные архитектуры модели MobileNetV3 дают возможность скоростно осваивать новым особенностям вида владельца прямо на устройстве без пересылки информации в облачное хранилище.
Улучшаются технологии антиспуфинга — теперь смартфоны могут различать реальные живые лица от фиксированных фото/масок по микроскопическим движениям кожи.
Взаимодействие со смарт-гаджетами — умные часы могут автоматически заблокировать телефон, если владелец ушёл далеко.
Появляются комбинированные механизмы — например комбинирующие голосовую аутентификацию + облик + пальцевой отпечаток.

Итак, те тренды очень популярны сейчас:

1) Сокращение деталей

Изготовители стараются уменьшить величину отверстия (“чёлки”) под датчики на дисплее за счёт интеграции компактных ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработка прямо на девайсе

Для улучшения личной безопасности всё больше вычислений выполняется локально без передачи информации во сторонний облачный услугу.

3) Упорядочивание регламентов

Google энергично продвигает эталон BiometricPrompt API, чтобы такие системы, вроде вулкан россия, и каждые Android-аппы могли работать с различными типами биометрии стандартизированно.

Какое решить на сегодня?

Когда вам нужна максимальная безопасность данных, подбирайте флагманские модели с интегрированным ИК-излучателем либо ToF-датчиком глубины.

iPhone каждого последних моделей
Huawei Partner/P ряда
Mi Professional
Vivo X линейки
Oppo Найти Х серий.

Если финансы ограничен – лучше отдавать предпочтение классическим средствам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в вулкан россия, применять только как опциональную возможность комфорта.

Каким способом повысить комфорт работы опции?

Есть несколько хитростей для тех, кто уже пользуется разблокировку по лицу:

Регулярно меняйте свою фотографию-шаблон, если сильно трансформируется внешность.
Не забывайте чистить объектив передней камеры – разводы могут уменьшить четкость!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам включает фотоаппарат когда вы поднимаете его.
Во время регистрации пытайтесь удерживать лицевую часть неподвижно перед видеоустройства исключая резкого наклона головы.
Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отворачиваетесь от дисплея.

Перспективы эволюции технологии

В скоро наступающие времена можно предполагать развития полностью безконтактных способов идентификации персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + голос + шаги + манипуляции руками!

Также предполагается появление свежих подходов охраны личной информации – например, изменяющееся изменение диджитал образца после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – одна из очень захватывающих технологий нашего периода! Она обеспечивает интеракцию со мобильным устройством удобнее чем раньше, и такие аппы, как vulkan russia, могут в разы повысить ваш юзерский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы знаете, как устроена эта система изнутри, – сможете более осмысленно выбирать свой будущий гаджет!

Каким образом работает определение лиц в смартфонах