Каким образом действует распознавание лиц в мобильных устройствах

Почему мы останавливаемся на разблокирование по фейсу

В последние годы определение лиц стало одной из наиболее востребованных возможностей для открытия смартфонов. Еще пару лет ранее большинство юзеров довольствовались пин-кодами, паролями или сканерами отпечатков пальцев. Но с появлением таких технологий, например Вулкан 24, нам достаточно лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Какой аспект делает эту конкретную возможность такой востребованной? Для начала, это практично: не нужно помнить трудные пароли или находить правильный палец в мраке. Также, это мгновенно: современные системы распознают лицо буквально за мгновения ока. В-третью очередь, это ощущение футуризма — будто в кинолентах про вулкан автомат разведчиков.

Однако за этой на первый взгляд легкостью таится весь вселенная комплексных техник и инженерных разработок. Давайте понять, как конкретно действует фейсканирование в актуальных смартфонах, какие применяются технологии, насколько они защищены и что нас ждёт впереди.

Краткая повествование эволюции технологии

Распознавание лиц как технология существует уже более пятидесяти годов. Первые эксперименты автоматизированного анализа лица были осуществлены еще в 1960-х годах в исследовательских центрах США. Тогда компьютеры способны были лишь выделять силуэты лица и вычислять промежутки между зрачками и губами на монохромных снимках.

Изначальные коммерческие системы появились в девяностых годах, но они были несовершенны: действовали неспешно и нередко ошибались. Только с прогрессом искусственных сетей и таких систем, как Вулкан 24 Казино, мощных мобильных микросхем идентификация лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным идентификацией лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и другие начали внедрять личные разработки.

Ключевые стадии функционирования системы идентификации

Процесс определения лица можно условно поделить на несколько ключевых этапов:

1. Распознавание лиц — камера выявляет существование человеческого лица в изображении.
2. Определение признаков — механизм изучает особенности облика: форму глаз, носа, губ, позицию бровей.
3. Построение шаблона — создаётся уникальный электронный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с эталоном — сформированный образец сравнивается с зафиксированной при регистрации биометрической данными владельца.
5. Принятие выбора — если совпадение достаточно существенное, смартфон деблокируется.

Всякий из указанных этапов нуждается в особых методов и улучшений для быстрой работы непосредственно на девайсе.

Железные компоненты: что находится внутри

Стандартная фронтальная камера.

Простейший несложный вариант определения лица задействует лишь переднюю камеру смартфона. Такой подход реализован во многочисленных доступных моделях Android-девайсов.

Положительные стороны:

• Не нуждается в нуждается в внешних датчиков.
• Шустро работает при качественном свете.

Отрицательные стороны:

• Легко обмануть фотографией или видеозаписью.
• Плохо работает при низком освещении или непривычных углах обзора.

Инфракрасная фотокамера и точечный проекционный аппарат

Более усовершенствованные системы, такие как Вулкан 24 Казино, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология лежит в основе Face ID от Apple.

Как это действует:

• Точечный проектор показывает на физиономию пользователя невидимую решетку из тысяч инфракрасных точек (например, Face ID применяет около 30 000 точек).
• ИК устройство фиксирует деформацию данной решетки по плоскости лица.
• Формируется 3D карта глубины глубинности, которая почти что невозможна для имитации стандартной фото или маскировкой.

Плюсы

• Надёжная деятельность даже в полной тьме.
• Сильная устойчивость к подделкам.
• Точность распознавания выше 99%.

Дополнительные сенсорные устройства

В отдельных аппаратах применяются также экстра сенсоры: ToF (Time-of-Flight), которые измеряют период движения света до предмета и обратно; Цветные-датчики глубины; специальные оптические лидары для формирования более детализированной 3D-модели лица.

Эти разработки применяются наиболее часто во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные алгоритмы: искуственный интеллект в работе

Текущие устройства опознания лиц немыслимы в отсутствие применения искусственного интеллекта и machine learning. Именно благодаря таким разработкам, как Вулкан 24 Казино, устройство в состоянии узнавать владельца даже при метаморфозах внешнего вида: новая укладка, борода, очки или косметика не становятся барьером для разблокировки.

Распознавание физиономии

При стартовом этапе программа обязана оперативно найти ликовое изображение среди полного изображения камеры. Для этого задействуются многоуровневые классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые натренированы распознавать лица людей среди множества других объектов.

Пример: алгоритм MTCNN может находить облик даже с частичном закрытии (например, шарфом или рукой).

Выделение ключевых моментов

После распознавания лица механизм, такая как Вулкан 24 Казино, определяет местоположение основных точек: края глаз, кончик носа, края губ и так далее. Часто задействуется от 68 до 128 ключевых маркеров на лице.

Данное необходимо для нормализации картинки: если человек удерживает смартфон под наклоном, или повернул голову, программа корректирует изображение до нормального состояния для последующего изучения.

Создание биометрии модели

Далее нейросеть строит сжатое математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след лица длиной от 128 до 512 флоатов.

Такой формат весьма затруднительно имитировать: он не удерживает непосредственно фото пользователя, а лишь исключительные черты его вида, что делает его совершенным для таких площадок, как Vulkan24.

Сравнение и вынесение выбора

Когда юзер намеревается разблокировать телефон глазами, программа осуществляет все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный уровень (обычно выше 99%), телефон, как и платформа Vulkan24, разблокируется; если нет — доступ запрещается.

Приспособление к метаморфозам внешности

Увлекательная характеристика современных системы — способность самостоятельного обучения. Если вы постоянно доступаете к мобильное устройство с новой укладкой или оптикой, система постепенно освежает эталонный шаблон вашего внешности для повышения точности работы без ухудшения безопасности.

Охрана биометрии данных.

Большинство пользователи опасаются хранить свои биометрические данные на мобильном устройстве из-за вероятности потери данных или хакерской атаки. Определенные организации, такие как Vulkan24, предлагают методы для улучшения защиты сведений юзеров.

• Локальное хранение: Основная часть устройств хранит биометрические модели только внутрь защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не покидают устройство и закрыты даже производителю.

• Шифрование: Все сведения сохраняются только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Программы третьих девелоперов не обладают прямого возможности доступа к биометрическим; они могут лишь запрашивать факт верификации личности через системный API.

Следует упомянуть существенную особенность: в случае, если какой-то человек сможет получить физический доступ к вашему телефону (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество компании реализуют защиту от автоматического разблокирования — к примеру, заставляют разомкнуть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют виды определения лиц на изображениях?

В настоящее время можно выделить определить 3 основных способа к реализации этой задачи:

Программируемое 2D идентификация

Применяется только фронтальная камера без вспомогательных сенсоров дистанции. Этот метод встречается чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота реализации; низкая затраты; быстрая работа при хорошем свете.
Минусы: просто одурачить фотографией; неустойчивая деятельность ночью; недостаточная охрана.

Техническое объёмное оцифровка

Задействует инфракрасную видеокамеру + проектор пикселей + сенсоры дистанции (Face ID от Apple; аналогичные решения у Huawei Mate).
Достоинства: большая достоверность; нельзя обмануть изображение/видеозапись; устойчивая деятельность в любых условиях освещения.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Смешанные подходы с интеграцией ИИ

Задействуют комбинацию софтверных методов + техническую обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие товары, например Вулкан 24 Казино и Google Pixel Face Unlock последних версий, объединяют фронтальную камеру c ИК датчиком мобильности Soli Radar для защиты от подделок жестами/масками/видеодисплеями чужих устройств.

Образцы использования разнообразных способов

• iPhone модели X/11/12/13/14 применяют только аппаратное трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition первый раз представил эквивалент Face ID в числе Android.
• Samsung Galaxy S10 версия/S20 поддерживают как софтверное двухмерное определение по фото фронтальной камерой, так и сканер ириса глаза.
• Huawei Mate20 Pro задействует систему из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Трудности охраны и ложные сигналы

Несмотря на поразительный успехи инноваций за недавние годы, совершенных системы пока не наблюдается:

1. Возможность обмана: Недорогие смартфоны просто доступны качественной фотографией пользователя либо роликом с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые идеальные устройства могут спутать между монозиготными близнецами либо родичами с очень схожей внешностью.
3. Изменения внешности: Резкое снижение веса/увеличение массы тела, косметические процедуры или травмы в некоторых случаях необходимы для перерегистрации биометрии.
4. Условия фотографирования: Интенсивная освещённость солнечным светом или же глубокая темнота могут понизить аккуратность идентификации признаков.

Ниже некоторые рекомендаций для надёжному эксплуатации:

• Для важных операций всегда используйте двухэтапную аутентификацию;
• Не включайте возможность “Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
• Постоянно обновляйте прошивку смартфона для предотвращения угроз от новых видов атак;
• Включайте функцию “Требовать открытых глаз” там, где она есть.

В каких областях дополнительно применяется технология помимо мобильных телефонов?

Несмотря на то, что основная мысль нашей работы посвящена в частности портативным гаджетам, следует отметить других сферах применения технологии:

• Контроль прохода в рабочих помещениях и резиденциях;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Электронные идентификационные документы последнего образца;
• Установки видеомониторинга муниципальных сервисов;
• Автоматизирование учёта присутствия образовательных учреждений/институтов;
• Авторизация пользователей ПК/ноутбуков.

Например: В московском метро уже тестируется система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через турникет без пластика или телефона! Похожие проекты реализуются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Как изменяется технический процесс в наше время?

Каждый годик появляются новые мысли для улучшения качества функционирования систем лицевого распознавания:

1. Увеличивается чёткость датчиков — чем больше информации фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность погрешности;
2. Улучшаются искусственные интеллекты — современные архитектуры модели MobileNetV3 обеспечивают возможность быстро осваивать свежим особенностям облика обладателя прямо на устройстве без пересылки информации в облачное хранилище.
3. Совершенствуются методы антиспуфинга — теперь смартфоны могут различать настоящие живые облики от неподвижных фото/масок по микроскопическим микродвижениям.
4. Взаимодействие со смарт-гаджетами — умные часы могут автоматически блокировать телефон, если пользователь ушёл далеко.
5. Проявляются гибридные системы — в частности объединяющие голосовую опознание + физиономию + дактилоскопический след.

Здесь, которые тренды особенно актуальны на сегодняшний день:

1) Сокращение элементов

Компании намереваются минимизировать габариты прорези (“чёлки”) под датчики на дисплее за счёт встраивания миниатюрных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработывание прямо на устройстве

Для улучшения приватности всё более расчётов выполняется на месте без передачи данных во дополнительный облачный сервис.

3) Стандартизация регламентов

Google энергично продвигает эталон BiometricPrompt API, с целью чтобы аналогичные площадки, вроде Вулкан 24, и все Android-программы могли взаимодействовать с любыми видами биометрии единообразно.

Какое выбрать на сегодня?

Когда вам нужна максимальная безопасность данных, выбирайте флагманские модели со встроенным ИК-излучателем или же ToF-датчиком глубины.

• iPhone всех новейших версий
• Huawei Companion/P серии
• Mix Expert
• Vivo X линейки
• Oppo Find X линейки.

Если бюджет невелик – лучше выбирать традиционным способам безопасности (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в Вулкан 24, задействовать только как второстепенную опцию удобства.

Как улучшить практичность функционирования возможности?

Есть несколько хитростей для пользователей, кто уже пользуется разблокировку через лицо:

1. Периодически меняйте свою изображение-шаблон, если сильно изменяется внешность.
2. Не забывайте чистить линзу фронтальной камеры – разводы могут уменьшить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам запускает камеру если вы берёте его в руки.
4. Во время регистрации старайтесь держать лицевую часть неподвижно напротив камеры без значительного наклона головы.
5. Используйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отвернулись от экрана.

Будущее прогресса технологии

В скоро наступающие периоды можно предвкушать появления полностью дистанционных способов опознания персоны сразу по нескольким биометрическим параметрам одновременно: физиономия + речь + шаги + жесты рук!

Также вероятно возникновение новых подходов охраны конфиденциальности – скажем, динамическое корректировка электронного паттерна после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – единственная из самых интересных инноваций нашего периода! Она предоставляет общение со мобильным устройством удобнее чем когда-либо прежде, и такие аппы, как Vulkan24, могут значительно улучшить ваш опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы знаете, как устроена эта методика внутри, – сумеете более осмысленно определять свой будущий девайс!