Каким способом работает определение лиц в смартфонах

Для чего мы предпочитаем разблокирование по лицевому распознаванию

В недавние времена определение лиц стало одной из самых распространённых функций для деблокировки мобильных телефонов. Лишь некоторые годов ранее основная часть юзеров обходились PIN-кодами, паролями или сканерами отпечатков пальцев. Но с появлением таких технологий, как Вулкан 24, нам вполне лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Какая вещь обуславливает эту особенность такой востребованной? Для начала, это практично: не нужно удерживать в памяти трудные пароли или искать нужный палец в мраке. Также, это оперативно: современные системы идентифицируют лицо фактически за мгновение. В-третьем пункте, это чувство футуризма — как будто в кинофильмах про казино вулкан агентов.

Впрочем за этой видимой легкостью прячется целый вселенная комплексных методов и инженерных решений. Давайте понять, как конкретно функционирует идентификация по лицу в современных мобильных телефонах, какие бывают технологии, насколько они безопасны и что нас ждёт впереди.

Короткая повествование развития техники

Распознавание лиц как техника присутствует уже более 50 годов. Первые эксперименты автоматизированного изучения лиц были осуществлены еще в 1960-х годы в лабораториях США. Тогда вычислительные машины могли лишь выделять очертания черепа и измерять дистанции между очами и устами на ахроматических изображениях.

Начальные торговые платформы стали доступны в 90-х, но они были далеки от совершенства: работали медленно и нередко ошибались. Только с развитием нейронных сетей и таких платформ, как Вулкан 24 Казино, мощных мобильных чипов идентификация лиц стало по-настоящему массовым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным распознаванием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие начали интегрировать собственные разработки.

Основные стадии действия механизма распознавания

Процесс определения лица можно примерно поделить на несколько основных этапов:

1. Распознавание лица — аппарат определяет наличие человеческого лица в кадре.
2. Извлечение характеристик — система исследует особенности физиономии: форму глаз, обонятельного органа, губ, положение надбровных дуг.
3. Построение шаблона — создаётся уникальный электронный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со стандартом — сформированный шаблон сравнивается со зафиксированной при учёте биометрической данными владельца.
5. Принятие выбора — если соответствие достаточно значительное, смартфон разблокируется.

Любой из этих стадий требует индивидуальных алгоритмов и улучшений для оперативной работы непосредственно на девайсе.

Технические составляющие: что прячется в их недрах

Типичная селфи камера.

Наиболее несложный вариант распознавания лица применяет исключительно фронтальную камеру мобильного устройства. Данный метод реализован во различных бюджетных моделях Android-девайсов.

Достоинства:

• Не требует дополнительные сенсоров.
• Оперативно функционирует при хорошем свете.

Слабые стороны:

• Просто одурачить фотографией или роликом.
• Неправильно работает при плохом свете или непривычных ракурсах.

ИК камера и точечный проектор

Более продвинутые системы, такие как Вулкан 24 Казино, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология составляет базу Face ID от Apple.

Каким способом это работает:

• Точечный проекционный прибор показывает на физиономию пользователя невидимую решетку из тысяч инфракрасных меток (например, Face ID задействует около 30 000 пятен).
• ИК камера записывает искривление данной решетки по плоскости лица.
• Формируется 3D карта глубины, которая почти невозможна для подделки стандартной фотографией или маской.

Выигрыши

• Надёжная работа даже в полной темноте.
• Сильная сопротивляемость к подделкам.
• Точность распознавания свыше 99%.

Добавочные датчики

В определённых девайсах используются также дополнительные сенсоры: ToF (Time-of-Flight), которые измеряют время распространения света до предмета и обратно; RGB-датчики дальности; специальные оптические дальномеры для построения более детализированной 3D-модели физиономии.

Эти инновации используются в основном во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искусственный разум на работе

Нынешние механизмы распознавания физиономий немыслимы при отсутствии эксплуатации ИИ и машинного обучения. Именно благодаря таким инновациям, как Вулкан 24 Казино, устройство способно узнавать владельца даже при метаморфозах облика: новая причёска, растительность на лице, линзы или косметика не становятся препятствием для деблокировки.

Распознавание лица

При стартовом стадии система необходимо оперативно найти лицо внутри полного изображения с камеры. Для данной цели применяются многоуровневые классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые натренированы идентифицировать человеческие лица среди множества других объектов.

Пример: метод MTCNN в состоянии обнаруживать физиономию даже с частичном закрытии (например, шарфом или рукой).

Определение важных моментов

После распознавания лица устройство, такая как Вулкан 24 Казино, вычисляет местоположение главных точек: кончики глаз, кончик носа, границы губ и так далее. Часто применяется от 68 до 128 основных меток на лицевой области.

Это действие требуется для выравнивания картинки: если пользователь держит смартфон под наклоном, или наклонил головку, программа корректирует картинку до стандартного положения для дальнейшего анализа.

Формирование биометрии модели

Далее нейросеть строит сжатое числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след лица длиной от 128 до 512 флоатов.

Данный формат крайне сложно подделать: он не хранит само картинку пользователя, а лишь исключительные особенности его вида, что делает его оптимальным для таких площадок, как Vulkan24.

Сравнение и принятие решения

Когда юзер желает открыть мобильник глазами, механизм воспроизводит все описанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный границу (обычно больше 99%), телефон, как и платформа Vulkan24, доступен; если нет — доступ блокируется.

Приспособление к трансформациям облика

Интересная особенность актуальных системы — способность самостоятельного обучения. Если вы часто разблокируете мобильное устройство с новой стрижкой или оптикой, программа постепенно модернизирует эталонный модель вашего облика для увеличения точности действия без ухудшения безопасности.

Защита биометрии информации.

Множество юзеры боятся хранить свои био-идентификационные данные на телефоне из-за вероятности утечки информации или хакерской атаки. Иные компании, например Vulkan24, предлагают решения для улучшения сохранности сведений клиентов.

• Локальное сбережение: Большинство девайсов записывает био-идентификационные образцы только внутри защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не выходят из аппарат и недоступны в том числе производителю.

• Шифрование: Все данные сберегаются только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция приложений: Программы сторонних девелоперов не имеют прямого возможности доступа к биометрическим; они могут лишь требовать подтверждение подтверждения идентичности через системный API.

Необходимо подчеркнуть значимую подробность: в случае, если кто-либо сможет получить доступ к вашему телефону физически (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство изготовители реализуют меры безопасности от неосознанного разблокирования — в частности, требуют разомкнуть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют категории распознавания лиц на изображениях?

Сегодня можно выделить 3 ключевых метода к выполнению этой задачи:

Программируемое плоское распознавание

Эксплуатируется только фронтальная камера без дополнительных датчиков глубины. Этот метод встречается чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота осуществления; умеренная затраты; скоростная деятельность при хорошем освещении.
Минусы: несложно одурачить фотографией; нестабильная работа ночью; недостаточная охрана.

Аппаратное 3D сканирование

Задействует инфракрасную видеокамеру + проекционный модуль точек + сенсоры глубины (Face ID у Apple; аналогичные технологии у Huawei Mate).
Преимущества: высокая надёжность; нельзя исказить фото/видео; стабильная функционирование при любом освещении.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Гибридные методы с дополнением ИИ

Используют комбинацию софтверных методов + техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например Вулкан 24 Казино и Google Pixel Face Unlock новейших поколений, объединяют фронталку c ИК датчиком движения Soli Radar для защиты от фальсификаций жестами/масками/видеоэкранами посторонних устройств.

Примеры применения различных техник

• iPhone линейки X/11/12/13/14 задействуют только аппаратное трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition первый раз предложил подобие Face ID в числе Android.
• Samsung Galaxy S10 версия/S20 обеспечивают как программное обеспечение 2D распознавание по фото фронталкой, так и сенсор радужки глаза.
• Huawei Mate20 Pro использует набор из ИК-подсветки + Dot Projector + ToF-сенсор

Трудности безопасности и неверные срабатывания

Несмотря на поразительный развитие инноваций за недавние лет, идеальных механизмов пока не наблюдается:

1. Возможность обмана: Бюджетные телефоны просто “разблокируются” высококачественной фотографией хозяина либо роликом с экрана другого устройства.
2. Идентичные двойняшки: Даже самые безупречные системы могут ошибиться между однояйцевыми близнецами либо родичами с очень схожей внешностью.
3. Метаморфозы облика: Резкое снижение веса/увеличение массы тела, хирургические вмешательства или повреждения иногда требуют повторной регистрации биометрии.
4. Условия фотографирования: Интенсивная засветка солнечным светом или же интенсивная тень могут снизить аккуратность распознавания признаков.

Здесь пара рекомендаций для надёжному эксплуатации:

• Для важных операций всегда внедряйте дополнительную аутентификацию;
• Не запускайте опцию “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
• Систематически апгрейдите прошивку мобильного устройства для обеспечения безопасности от новых видов атак;
• Включайте настройку “Требовать распахнутых глаз” везде, где она есть.

В каких областях ещё применяется технология кроме мобильных телефонов?

Пускай предмет данной работы касается именно смартфонам и планшетам, стоит упомянуть о прочих направлениях внедрения технологии:

• Контроль доступа в офисах и резиденциях;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Виртуальные идентификационные документы нового поколения;
• Системы видеомониторинга городских сервисов;
• Автоматизирование отслеживания посещаемости школ/вузов;
• Авторизация пользователей компьютеров/ноутбуков.

Например: В городском метро уже испытывается система платежа проезда по лицу (“Face Pay”) — нужно лишь пройти через турникет без карты или мобильника! Схожие программы осуществляются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким способом меняется технология в наше время?

Всякий годочек возникают свежие мысли для улучшения качества функционирования систем распознавания лиц:

1. Увеличивается чёткость датчиков — чем больше деталей фиксируется камерой/глубинными сенсорами, тем меньше вероятность погрешности;
2. Совершенствуются нейронные сети — новейшие конструкции модели MobileNetV3 обеспечивают возможность быстро обучаться новым чертам облика обладателя напрямую на гаджете без пересылки информации в облачное хранилище.
3. Развиваются технологии антиспуфинга — теперь смартфоны умеют распознавать реальные движущиеся облики от фиксированных снимков/маскировок по микроскопическим микродвижениям.
4. Синхронизация со смарт-гаджетами — смарт-часы могут авто блокировать смартфон, если пользователь ушёл далеко.
5. Появляются гибридные механизмы — в частности объединяющие аудио опознание + лицо + дактилоскопический след.

Здесь, которые тренды в особенности популярны сейчас:

1) Миниатюризация деталей

Изготовители стараются сократить размер прорези (“чёлки”) для сенсоры на экране за счёт встраивания компактных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на девайсе

Для улучшения приватности всё больше расчётов выполняется внутри устройства без передачи информации во сторонний облачный услугу.

3) Стандартизация норм

Google энергично пропагандирует стандарт BiometricPrompt API, для того чтобы такие площадки, например как Вулкан 24, и любые Android-аппы были совместимы с всеми формами биометрии унифицированно.

Какое решить на сегодня?

Если вам всем нужна максимальная безопасность информации, выбирайте топовые устройства с вмонтированным ИК-излучателем либо ToF-сенсором глубины.

• iPhone каждого актуальных моделей
• Huawei Partner/P Series ряда
• Mi Pro
• Vivo X серии
• Оппо Find X серии.

Если финансы скромен – лучше выбирать классическим средствам защиты (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в Вулкан 24, использовать только как второстепенную опцию удобства.

Каким образом улучшить комфорт использования опции?

Есть пара хитростей для пользователей, кто уже использует разблокировку через лицо:

1. Регулярно меняйте свою изображение-шаблон, если кардинально меняется внешний вид.
2. Не забывайте протирать объектив фронтальной камеры – разводы могут понизить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам активирует фотоаппарат когда вы поднимаете его.
4. В процессе записи старайтесь сохранять лицо ровно напротив камеры не допуская сильного наклона головы.
5. Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отворачиваетесь от дисплея.

Возможности эволюции инноваций

В скоро наступающие времена можно предвкушать возникновения полностью безконтактных способов опознания индивидуума сразу по нескольким биометрическим данным параметрам одновременно: лицо + звучание + манера ходьбы + манипуляции руками!

Также возможно появление свежих подходов обеспечения личной информации – скажем, переменное изменение цифрового паттерна после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень интересных инноваций нашего времени! Она предоставляет взаимодействие со мобильным устройством комфортнее чем когда-либо прежде, и такие приложения, как Vulkan24, могут существенно оптимизировать ваш пользовательский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы знаете, как работает эта методика внутри, – будете в состоянии осознаннее подбирать свой будущий девайс!