Каким способом действует определение лицевых образов в мобильных устройствах

Почему мы предпочитаем разблокировку по лицевому распознаванию

В последние годы идентификация лиц превратилось в одной из самых распространённых возможностей для открытия умных телефонов. Лишь несколько годков назад основная часть использующих удовлетворялись пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но при появлением подобных технологий, как вулкан россия, нам достаточно лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Какая вещь превращает данную особенность очень нужной? Во-первых, это практично: не нужно запоминать замысловатые пароли или искать нужный палец в темноте. Также, это оперативно: современные алгоритмы узнают лицо фактически за мгновение. В-третьем пункте, это ощущение будущего — как будто в кинолентах про вулкан казино агентов.

Однако за такой видимой простотой прячется весь мир комплексных технологий и инженерных концепций. Попробуем разобраться, как точно действует распознавание лиц в новейших смартфонах, какие существуют методы, насколько они надёжны и что нас предстоит.

Краткая история эволюции инноваций

Распознавание лиц как методика существует уже более пятидесяти годов. Изначальные эксперименты автоматизированного анализа облика были предприняты еще в 1960-х годах в исследовательских центрах США. Тогда вычислительные машины могли лишь выделять силуэты головы и измерять промежутки между глазами и губами на ахроматических фотографиях.

Начальные торговые платформы возникли в 1990-х годах, но они были неидеальны: функционировали медленно и часто давали сбои. Только с эволюцией нейронных сетей и таких площадок, как вулкан россии, высокопроизводительных мобильных микросхем определение лиц стало по-настоящему массовым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с достоверным трёхмерным сканированием лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и прочие стали внедрять свои решения.

Основные шаги функционирования устройства идентификации

Процесс определения лица можно условно разделить на несколько важных этапов:

1. Распознавание лица — камера выявляет существование человеческого образа в снимке.
2. Определение признаков — алгоритм анализирует особенности облика: конфигурацию зрительных органов, носа, губ, расположение надбровных дуг.
3. Построение структуры — создаётся особенный электронный отпечаток (faceprint) на основе определённых признаков.
4. Сравнение со стандартом — полученный образец сравнивается с сохранённой при учёте биометрической данными владельца.
5. Принятие решения — если совпадение достаточно существенное, смартфон деблокируется.

Любой из этих этапов нуждается в индивидуальных методов и усовершенствований для быстрой работы прямо на устройстве.

Аппаратные элементы: что находится в их недрах

Типичная передняя камера.

Наиболее несложный способ распознавания лица использует только переднюю видеокамеру смартфона. Данный метод реализован во многочисленных бюджетных вариантах Android-девайсов.

Достоинства:

• Необходимо потребляет дополнительных датчиков.
• Шустро действует при достаточном освещении.

Отрицательные стороны:

• Легко ввести в заблуждение фотографией или видео.
• Неправильно работает при плохом освещённости или нестандартных точках зрения.

Инфракрасная фотокамера и пунктирный проекционный аппарат

Более усовершенствованные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология является основой Face ID от Apple.

Каким способом это работает:

• Точечный проектор показывает на физиономию юзера невидимую сетку из тысяч инфракрасных точек (например, Face ID применяет около 30 000 меток).
• Инфракрасная камера регистрирует искривление данной решетки по плоскости физиономии.
• Создаётся 3D карта глубинности, что почти что невозможна для имитации типичной снимком или маскировкой.

Достоинства

• Надёжная деятельность даже в полной темноте.
• Большая сопротивляемость к имитациям.
• Точность распознавания свыше 99%.

Дополнительные сенсорные устройства

В отдельных девайсах применяются также экстра сенсорные устройства: ToF (Time-of-Flight), которые определяют период движения света до предмета и обратно; RGB-датчики глубины; специальные лазерные измерители расстояния для построения более аккуратной 3D-модели физиономии.

Эти инновации применяются чаще всего во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные алгоритмы: искуственный интеллект на исполнении

Текущие устройства опознания лиц неосуществимы в отсутствие применения искусственного интеллекта и machine learning. Именно вследствие таким технологиям, как вулкан россии, аппарат может идентифицировать владельца даже при трансформациях внешнего вида: новая стрижка, растительность на лице, очки или косметика не становятся препятствием для разблокировки.

Детектирование лица

При первом этапе система необходимо мгновенно распознать ликовое изображение внутри целого снимка камеры. Для этого задействуются каскадные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые натренированы идентифицировать человеческие лица среди множества других объектов.

Пример: метод MTCNN способен распознавать облик даже с неполном перекрытии (например, платком или рукой).

Идентификация основных моментов

После распознавания лица устройство, такая как вулкан россии, устанавливает расположение основных точек: края глаз, кончик носа, края губ и так далее. Обычно используется от 68 до 128 основных меток на лице.

Данное требуется для нормализации визуала: если пользователь находится с телефон под наклоном, или наклонил головку, программа исправляет изображение до нормального состояния для последующего изучения.

Создание биометрического идентификатора шаблона

Далее нейросеть строит сжатое математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой след внешности длиной от 128 до 512 флоатов.

Этот образец очень трудно сфальсифицировать: он не сохраняет само изображение пользователя, а лишь исключительные черты его вида, что делает его идеальным для таких площадок, как vulkan russia.

Сопоставление и принятие решения

Если человек желает разблокировать мобильник глазами, система воспроизводит все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный уровень (обычно больше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ запрещается.

Адаптация к метаморфозам облика

Интересная характеристика актуальных системы — способность самообучения. Если ты постоянно доступаете к телефон с свежей прической или оптикой, алгоритм постепенно освежает эталонный шаблон вашего облика для улучшения точности функционирования без ухудшения безопасности.

Защита биометрии данных.

Множество пользователи боятся хранить свои био-идентификационные данные на смартфоне из-за риска утечки данных или взлома гаджета. Иные организации, например vulkan russia, предоставляют варианты для увеличения сохранности данных юзеров.

• Локальное хранение: Большинство аппаратов сохраняет биометрические модели только в пределах защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не покидают аппарат и недоступны в том числе изготовителю.

• Шифрование: Все сведения хранятся только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Программы внешних разработчиков не имеют непосредственного возможности доступа к биометрическим; они могут лишь запрашивать подтверждение верификации идентичности через системный API.

Необходимо упомянуть существенную подробность: в случае, если какой-то человек сможет получить физический доступ к вашему телефону (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество изготовители осуществляют меры безопасности от автоматического разблокирования — в частности, просят раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают типы идентификации лиц на изображениях?

Сегодня можно определить различить три главных метода к выполнению этой задачи:

Программируемое плоское определение

Эксплуатируется только передняя камера без дополнительных сенсоров дистанции. Подобный метод используется обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность осуществления; минимальная цена; оперативная функционирование при качественном свете.
Минусы: несложно одурачить снимком; ненадежная работа ночью; слабая защищенность.

Техническое трёхмерное сканирование

Применяет ИК камеру + проектор пикселей + сенсоры глубины (Face ID у Apple; аналогичные решения у Huawei Mate).
Достоинства: высокая надежность; невозможно исказить изображение/видеозапись; стабильная работа в любых условиях освещения.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Смешанные методы с ИИ-дополнением

Применяют комбинацию программных методов + техническую обработку + постобработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, как вулкан россии и Google Pixel Face Unlock последних поколений, сочетают фронталку c инфракрасным сенсором движения Soli Radar для предотвращения от фальсификаций жестами/масками/видеодисплеями посторонних устройств.

Иллюстрации использования различных методов

• iPhone линейки X/11/12/13/14 задействуют только техническое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition в первый раз предложил аналог Face ID среди Android.
• Samsung Galaxy S10 модель/S20 поддерживают как программное двухмерное идентификацию по изображению фронталкой, так и датчик глазного ириса.
• Huawei Mate20 Pro применяет набор из ИК-подсветки + Dot Projector + ToF-сенсор

Проблемы безопасности и неверные тревоги

Несмотря на замечательный развитие инноваций за прошедшие годы, совершенных систем пока не наблюдается:

1. Вероятность мошенничества: Бюджетные телефоны без труда открываются четкой снимком владельца или же роликом с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые совершенные устройства могут перепутать между монозиготными близнецами либо родственниками с очень похожей внешностью.
3. Изменения облика: Внезапное снижение веса/набор веса, хирургические вмешательства или травмы порой требуют перерегистрации биометрических данных.
4. Условия фотографирования: Сильная подсветка солнцем либо глубокая затенение могут понизить аккуратность распознавания признаков.

Ниже несколько советов для безопасному эксплуатации:

• Для критически важных операций всегда внедряйте двухэтапную аутентификацию;
• Не активируйте возможность “Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
• Постоянно обновляйте прошивку прошивку смартфона для предотвращения угроз от новых видов атак;
• Включайте настройку “Требовать распахнутых глаз” в тех местах, где она имеется.

В каких местах также применяется технологии кроме мобильных телефонов?

Несмотря на то, что основная мысль нашей публикации сосредоточена на в частности портативным гаджетам, стоит упомянуть о прочих направлениях внедрения технологии:

• Управление входа в офисах и резиденциях;
• Платёжные устройства банков (“Face Pay”);
• Электронные удостоверения личности последнего типа;
• Системы видеонаблюдения муниципальных подразделений;
• Механизация отслеживания посещаемости школ/университетов;
• Аутентификация юзеров компьютеров/ноутбуков.

Например: В городском метро уже тестируется система оплаты проезда по лицу (“Face Pay”) — достаточно пройти через турникет без пластика или телефона! Аналогичные проекты реализуются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким образом изменяется технический процесс в нынешнее время?

Всякий годочек проявляются современные концепции для повышения стандарта работы систем распознавания лиц:

1. Увеличивается чёткость сенсорных устройств — чем больше информации фиксируется камерой/глубинными сенсорами, тем меньше риск ошибки;
2. Развиваются нейросети — современные архитектуры вида MobileNetV3 обеспечивают возможность быстро осваивать свежим чертам облика обладателя напрямую на гаджете без пересылки информации в облачное хранилище.
3. Совершенствуются технологии антиспуфинга — теперь телефоны способны различать реальные живые лица от фиксированных фотографий/маскировок по мельчайшим микродвижениям.
4. Взаимодействие со смарт-гаджетами — умные часы могут автоматически блокировать мобильный телефон, если пользователь отошёл далеко.
5. Возникают гибридные механизмы — например объединяющие голосовую идентификацию + лицо + пальцевой отпечаток.

Итак, которые направления очень актуальны сейчас:

1) Уменьшение компонентов

Компании стараются сократить габариты отверстия (“чёлки”) для сенсоры на дисплее за счёт интеграции маленьких ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на аппарате

Для увеличения приватности всё больше обработки данных выполняется на месте без передачи информации во дополнительный облачный сервис.

3) Упорядочивание норм

Google интенсивно пропагандирует норму BiometricPrompt API, для того чтобы подобные площадки, как вулкан россия, и любые Android-программы могли работать с всеми формами биометрии унифицированно.

Что подобрать на сегодня?

В случае если вам всем нужна предельная защита данных, выбирайте передовые устройства с интегрированным ИК-проектором либо ToF-датчиком глубины.

• iPhone всех существующих новейших версий
• Huawei Companion/P ряда
• Xiaomi Pro
• Vivo X линейки
• Оппо Find Х серий.

Если финансы невелик – лучше выбирать обычным средствам защиты (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в вулкан россия, применять только как дополнительную возможность комфорта.

Каким образом улучшить комфорт функционирования функции?

Есть несколько лайфхаков для тех, кто уже использует функцию распознавания лица:

1. Часто меняйте свою изображение-шаблон, если кардинально меняется внешний вид.
2. Не забывайте очищать линзу фронтальной камеры – загрязнения могут снизить точность!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам активирует фотоаппарат когда вы берёте его в руки.
4. Во время записи старайтесь сохранять голову неподвижно перед объектива без сильного наклона головы.
5. Используйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отвели взгляд от дисплея.

Будущее прогресса инноваций

В ближайшие времена можно предполагать появления полностью безконтактных способов идентификации индивидуума сразу по нескольким биометрическим данным параметрам одновременно: лицо + голос + манера ходьбы + движения рук!

Также вероятно появление новых методов защиты личной информации – скажем, динамическое корректировка цифрового паттерна после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из самых захватывающих технологий нашего времени! Она обеспечивает общение со смартфоном комфортнее чем раньше, и такие программы, как vulkan russia, могут значительно повысить ваш опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы понимаете, как работает эта технология внутри, – будете в состоянии осознаннее выбирать свой очередной гаджет!