Каким способом работает распознавание лицевых образов в смартфонах

Зачем мы выбираем разблокирование по фейсу

В прошлые годы идентификация лиц стало одной из самых распространённых функций для разблокировки мобильных телефонов. Лишь некоторые годов назад большинство юзеров обходились PIN-кодами, ключами доступа или датчиками отпечатков пальцев. Но с появлением подобных технологий, например Вулкан Платинум, нам достаточно просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Какой аспект обуславливает эту конкретную особенность очень нужной? Для начала, это комфортно: не нужно помнить сложные пароли или искать верный палец в мраке. Также, это быстро: современные программы идентифицируют лицо фактически за мгновения ока. В-третьих, это чувство футуристичности — будто в фильмах про Вулкан казино разведчиков.

Однако за этой кажущейся простотой скрывается целый универсум сложных техник и инженерных разработок. Попробуем понять, как именно действует фейсканирование в актуальных мобильных телефонах, какие бывают методы, насколько они надёжны и что нас ждёт впереди.

Сжатая хроника развития техники

Распознавание лиц как технология существует уже более пятидесяти годов. Изначальные пробы машинного анализа лица были осуществлены еще в 1960-х годы в исследовательских центрах США. Тогда ЭВМ могли лишь обозначать очертания головы и определять промежутки между зрачками и устами на монохромных фотографиях.

Начальные торговые установки стали доступны в девяностых годах, но они были несовершенны: действовали неспешно и часто давали сбои. Только с эволюцией синтетических сетей и таких платформ, как Vulkan Platinum, сильных мобильных микросхем определение лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным сканированием лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и другие стали интегрировать свои разработки.

Главные шаги функционирования механизма определения

Процесс определения лица можно ориентировочно разделить на несколько важных этапов:

Распознавание лиц — аппарат определяет наличие людского образа в изображении.
Определение признаков — алгоритм исследует особенности лица: форму зрительных органов, носа, уст, расположение надбровных дуг.
Построение модели — создаётся уникальный виртуальный отпечаток (faceprint) на основе выделенных признаков.
Сравнение с эталоном — сформированный шаблон сопоставляется со зафиксированной при учёте биометрической информацией владельца.
Принятие выбора — если соответствие достаточно значительное, смартфон открывается.

Каждый из данных стадий требует особых алгоритмов и оптимизаций для скорой работы прямо на устройстве.

Железные составляющие: что скрыто внутри них

Обычная передняя камера.

Простейший несложный вариант определения физиономии использует лишь лицевую видеокамеру мобильного устройства. Подобный подход внедрён во многих бюджетных моделях Android-девайсов.

Преимущества:

Не требует дополнительные датчиков.
Быстро действует при качественном свете.

Отрицательные стороны:

Легко ввести в заблуждение изображением или видеозаписью.
Плохо работает при плохом освещении или необычных точках зрения.

ИК камера и пунктирный проекционный аппарат

Более совершенные системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс составляет базу Face ID от Apple.

Как это работает:

Точечный проекционный прибор отображает на лицо использующего невидимую сетку из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 точек).
Инфракрасная устройство записывает искривление этой сетки по плоскости физиономии.
Создаётся трёхмерная карта глубинности, что практически невозможна для фальсификации стандартной фотографией или маскировкой.

Плюсы

Надёжная работа даже в полной темноте.
Сильная защита к подделкам.
Точность определения выше 99%.

Дополнительные сенсорные устройства

В отдельных устройствах применяются также вспомогательные сенсоры: ToF (Time-of-Flight), которые фиксируют время прохождения луча до предмета и обратно; Цветные-датчики дальности; специальные световые измерители расстояния для формирования более аккуратной 3D-модели лица.

Эти разработки применяются в основном во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные методы: искуственный интеллект на исполнении

Современные устройства опознания лиц немыслимы без использования искусственного интеллекта и machine learning. Именно из-за таким инновациям, как Vulkan Platinum, аппарат в состоянии распознавать владельца даже при изменениях внешности: новая укладка, щетина, очки или грим не становятся барьером для деблокировки.

Обнаружение лица

При начальном шаге система должна мгновенно найти лицо внутри полного изображения камеры. Для данной цели применяются каскадные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые подготовлены идентифицировать лиц человека среди множества других объектов.

Пример: метод MTCNN способен распознавать облик даже при частичном перекрытии (например, шалью или ладонью).

Выделение ключевых аспектов

После идентификации лица механизм, такая как Vulkan Platinum, устанавливает расположение ключевых точек: уголки глаз, конец носа, границы губ и так далее. Часто задействуется от 68 до 128 основных меток на лицевой поверхности.

Это действие необходимо для стабилизации изображения: если юзер находится с смартфон под углом, или повернул головку, программа корректирует картинку до нормального состояния для дальнейшего анализа.

Создание биометрии модели

Далее нейросеть строит компактное числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 флоатов.

Такой формат очень сложно подделать: он не сохраняет непосредственно изображение юзера, а лишь уникальные особенности его облика, что делает его идеальным для таких платформ, как Вулкан Казино Платинум.

Сопоставление и вынесение выбора

В случае, когда пользователь желает открыть телефон взором, механизм осуществляет все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает заданный границу (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, открывается; если нет — доступ не предоставляется.

Привыкание к трансформациям облика

Занимательная характеристика нынешних систем — возможность самообучения. Если вы регулярно доступаете к мобильное устройство с обновленной прической или очками, программа постепенно модернизирует эталонный образец вашего облика для повышения точности работы без ухудшения безопасности.

Защита биометрических информации.

Многие пользователи опасаются держать свои биометрические данные на смартфоне из-за угрозы потери данных или взлома гаджета. Иные организации, такие как Вулкан Казино Платинум, предлагают методы для повышения защиты сведений пользователей.

Локальное хранение: Большинство аппаратов записывает биометрические шаблоны исключительно внутри защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Они всегда не покидают аппарат и закрыты включая производителю.
Шифрование: Все данные сохраняются только в шифрованном виде с использованием современных криптографических алгоритмов AES256.
Изоляция приложений: Приложения сторонних девелоперов не обладают непосредственного возможности доступа к биометрическим данным; они могут лишь запрашивать факт подтверждения личности через системный API.

Необходимо упомянуть существенную особенность: в случае, если кто-либо получит физический доступ к вашему телефону (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие производители реализуют меры безопасности от неосознанного разблокирования — к примеру, заставляют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают виды определения лиц?

Сегодня можно определить выделить 3 главных метода к реализации этой функции:

Софтверное плоское определение

Используется только передняя видеокамера без вспомогательных сенсоров глубины. Подобный метод используется обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость осуществления; минимальная затраты; быстрая деятельность при достаточном свете.
Минусы: просто одурачить фотографией; ненадежная деятельность ночью; низкая защищенность.

Аппаратное 3D сканирование

Использует инфракрасную видеокамеру + проекционный модуль точек + датчики дистанции (Face ID от Apple; аналогичные решения у Huawei Mate).
Преимущества: высокая надёжность; нельзя исказить фото/видео; постоянная работа при любом освещении.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Гибридные методы с дополнением ИИ

Применяют комбинацию программных методов + аппаратно-техническую обработку + постобработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные товары, например Vulkan Platinum и Google Pixel Face Unlock новейших версий, сочетают фронтальную камеру c инфракрасным датчиком мобильности Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями чужих устройств.

Образцы эксплуатации разных техник

iPhone модели X/11/12/13/14 применяют только техническое трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition впервые внедрил подобие Face ID в ряду Android.
Samsung Galaxy S10 версия/S20 обеспечивают как программное плоское распознавание по снимку фронталкой, так и сканер ириса глаза.
Huawei Mate20 Pro применяет набор из ИК-подсветки + Dot Projector + ToF-сенсор

Трудности защиты и ошибочные сигналы

Несмотря на впечатляющий развитие технологий за недавние лет, совершенных системы пока не имеется:

Вероятность обмана: Доступные телефоны легко открываются четкой фотографией пользователя или видеозаписью с дисплея иного гаджета.
Идентичные близняшки: Даже самые совершенные механизмы могут перепутать между монозиготными близнецами либо родичами с очень схожей внешностью.
Метаморфозы внешнего вида: Внезапное похудение/набор веса, пластические операции или повреждения порой требуют повторной регистрации биометрических данных.
Условия фотографирования: Сильная подсветка солнцем или же плотная затенение могут снизить верность распознавания признаков.

Здесь пара советов по защищённому применению:

Для критически важных операций всегда используйте двухэтапную аутентификацию;
Не активируйте опцию “Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
Постоянно апгрейдите программное обеспечение телефона для обеспечения безопасности от новых видов атак;
Включайте опцию “Требовать открытых глаз” в тех местах, где она имеется.

В каких местах ещё используется технологии за исключением мобильных телефонов?

Пускай тема этой работы сосредоточена на именно портативным гаджетам, стоит упомянуть о альтернативных областях использования технологии:

Мониторинг прохода в деловых центрах и многоквартирных зданиях;
Платёжные аппараты финансовых учреждений (“Face Pay”);
Виртуальные удостоверения личности современного поколения;
Установки видеоконтроля муниципальных подразделений;
Автоматизация учёта явки учебных заведений/вузов;
Авторизация участников персональных компьютеров/ноутбуков.

Например: В столичном метро уже тестируется система оплаты проезда по фейсу (“Face Pay”) — хватит пройти через барьер без пластика или телефона! Аналогичные инициативы реализуются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Как трансформируется технология в наше время?

Каждый год появляются современные идеи для повышения качества деятельности систем лицевого распознавания:

Увеличивается детализация сенсорных устройств — чем больше информации фиксируется камерой/глубинными сенсорами, тем меньше вероятность неточности;
Совершенствуются нейросети — новейшие структуры вида MobileNetV3 обеспечивают возможность быстро адаптироваться к свежим особенностям облика обладателя прямо на устройстве без пересылки информации в облачное хранилище.
Развиваются технологии антиспуфинга — теперь телефоны умеют различать подлинные движущиеся лица от статичных снимков/масок по мельчайшим микродвижениям.
Синхронизация со смарт-гаджетами — умные часы могут автоматически блокировать мобильный телефон, если владелец ушёл далеко.
Возникают смешанные механизмы — в частности совмещающие аудио идентификацию + лицо + отпечаток пальца.

Итак, которые тенденции очень популярны сейчас:

1) Сокращение компонентов

Производители намереваются сократить размер отверстия (“чёлки”) для сенсоры на дисплее за счёт интеграции маленьких ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработка прямо на устройстве

Для увеличения приватности всё более обработки данных происходит на месте без передачи данных во сторонний облачный услугу.

3) Упорядочивание норм

Гугл интенсивно продвигает эталон BiometricPrompt API, с целью чтобы аналогичные системы, вроде Вулкан Платинум, и все Android-программы могли взаимодействовать с различными типами биометрии стандартизированно.

Какое решить на сегодня?

Если вам всем необходима максимальная сохранность информации, остановите выбор на флагманские модели со встроенным ИК-проектором либо ToF-сенсором глубины.

iPhone каждого актуальных версий
Huawei Partner/Series P ряда
Xiaomi Professional
Vivo X линейки
Оппо Find Икс серий.

Если средства невелик – лучше отдавать предпочтение традиционным способам защиты (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в Вулкан Платинум, задействовать только как дополнительную опцию удобства.

Каким способом увеличить практичность функционирования возможности?

Есть пара советов для людей, кто уже применяет разблокировку по лицу:

Регулярно обновляйте свою изображение-шаблон, если кардинально трансформируется внешность.
Не пренебрегайте очищать объектив фронтальной камеры – загрязнения могут уменьшить четкость!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам активирует камеру когда вы берёте его в руки.
При записи пытайтесь удерживать лицо прямо впереди объектива не допуская сильного наклона головы.
Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отвернулись от дисплея.

Перспективы прогресса техники

В предстоящие годы можно предвкушать развития полностью бесконтактных способов идентификации персоны сразу по нескольким биометрическим параметрам одновременно: облик + голос + шаги + жесты рук!

Также возможно развитие современных методов охраны приватности – скажем, динамическое корректировка диджитал паттерна после каждой успешной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых увлекательных инноваций нашего времени! Она предоставляет общение со смартфоном проще чем до этого, и такие программы, как Вулкан Казино Платинум, могут существенно повысить ваш опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы осведомлены, как функционирует эта технология изнутри, – сможете более осмысленно выбирать свой очередной гаджет!