Как действует идентификация лиц в смартфонах

Зачем мы предпочитаем разлочивание по фейсу

В недавние времена распознавание лиц превратилось в одной из самых распространённых возможностей для деблокировки смартфонов. Еще пару годов назад основная часть юзеров удовлетворялись PIN-кодами, паролями или сканерами отпечатков пальцев. Но при появлением таких технологий, например cabura, нам вполне просто взглянуть на экран — и устройство тут же узнает своего владельца.

Что делает эту особенность настолько популярной? Во-первых, это практично: не нужно удерживать в памяти трудные пароли или искать верный палец в мраке. Также, это мгновенно: современные системы узнают лицо фактически за мгновения ока. В-третью очередь, это впечатление футуристичности — будто в фильмах про кабура разведчиков.

Тем не менее за данной на первый взгляд простотой скрывается весь универсум трудных технологий и инженерных разработок. Давайте разобраться, как именно работает идентификация по лицу в актуальных смартфонах, какие применяются технологии, насколько они защищены и что нас ждёт впереди.

Краткая хроника прогресса техники

Распознавание лиц как методика присутствует уже более 50 годов. Первые пробы автоматического исследования облика были осуществлены еще в 1960-х годы в научных учреждениях США. Тогда ЭВМ могли лишь обозначать контуры черепа и определять промежутки между очами и ртом на ахроматических фотографиях.

Изначальные торговые установки стали доступны в 90-х, но они были далеки от совершенства: работали медленно и часто ошибались. Только с прогрессом искусственных сетей и таких платформ, как кабура, высокопроизводительных мобильных чипов идентификация лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным идентификацией лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и другие начали интегрировать собственные решения.

Ключевые этапы функционирования устройства определения

Процесс идентификации лица можно условно поделить на несколько ключевых этапов:

1. Идентификация лиц — аппарат определяет существование человеческого образа в изображении.
2. Извлечение признаков — механизм исследует контуры лица: форму зрительных органов, обонятельного органа, уст, расположение бровей.
3. Построение шаблона — создаётся особенный цифровой отпечаток (faceprint) на основе определённых признаков.
4. Сравнение с эталоном — сформированный модель сверяется с записанной при регистрации биометрической сведениями владельца.
5. Принятие решения — если совпадение достаточно высокое, смартфон деблокируется.

Каждый из этих этапов запрашивает специальных алгоритмов и усовершенствований для скорой работы прямо на устройстве.

Аппаратные компоненты: что прячется внутри них

Типичная селфи камера.

Простейший легкий вариант распознавания физиономии использует исключительно лицевую камеру смартфона смартфона. Подобный метод осуществлён во различных бюджетных версиях Android-девайсов.

Преимущества:

• Не нуждается в потребляет внешних датчиков.
• Быстро работает при достаточном освещённости.

Минусы:

• Легко одурачить изображением или видео.
• Неудачно функционирует при слабом свете или нестандартных углах обзора.

Инфракрасная фотокамера и пунктирный проектор

Более совершенные системы, такие как кабура, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология лежит в основе Face ID от Apple.

Каким способом это функционирует:

• Точечный проекционный прибор проецирует на физиономию пользователя невидимую сетку из тысяч инфракрасных точек (например, Face ID применяет около 30 000 точек).
• ИК устройство регистрирует искривление этой сетки по плоскости физиономии.
• Получается трехмерная карта глубины глубинности, что практически невозможна для фальсификации обычной фото или маской.

Преимущества

• Надёжная работа даже в полной темноте.
• Большая устойчивость к имитациям.
• Точность распознавания свыше 99%.

Добавочные сенсоры

В некоторых девайсах задействуются также вспомогательные датчики: ToF (Time-of-Flight), которые определяют период движения света до объекта и обратно; RGB-датчики дальности; специальные оптические измерители расстояния для формирования более детализированной 3D-модели лица.

Эти разработки встречаются в основном во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: искусственный разум в действии

Текущие устройства идентификации лиц невозможны без применения ИИ и машинного обучения. Именно из-за таким инновациям, как кабура, устройство способно распознавать пользователя даже при изменениях внешности: новая стрижка, щетина, очки или макияж не становятся барьером для деблокировки.

Обнаружение физиономии

При первом шаге алгоритм должна быстро обнаружить лицо внутри целого кадра камеры. Для этой задачи используются многоуровневые классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые подготовлены распознавать человеческие лица среди множества других объектов.

Пример: процесс MTCNN может обнаруживать физиономию даже при частичном закрытии (например, шарфом или ладонью).

Идентификация основных моментов

После обнаружения лица система, такая как кабура, определяет положение главных точек: уголки глаз, верхушка носа, края губ и так далее. Обычно применяется от 68 до 128 ключевых точек на лицевой поверхности.

Это нужно для стабилизации визуала: если юзер держит мобильник под наклоненным, или склонил голову, программа “выпрямляет” изображение до обычного угла для последующего изучения.

Создание биометрии модели

Далее нейронная сеть строит компактное числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 вещественных чисел.

Данный формат крайне трудно подделать: он не хранит само фото пользователя, а лишь уникальные особенности его внешности, что делает его оптимальным для таких площадок, как кабура казино.

Сравнение и вынесение заключения

Если человек хочет открыть смартфон глазами, механизм воспроизводит все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный границу (обычно больше 99%), телефон, как и платформа кабура казино, открывается; если нет — доступ не предоставляется.

Привыкание к трансформациям внешности

Увлекательная черта современных систем — способность самообучения. Если вы регулярно доступаете к телефон с обновленной прической или оптикой, программа постепенно освежает эталонный модель вашего внешности для повышения точности работы без ухудшения безопасности.

Защита биометрических данных.

Многие пользователи боятся хранить свои биометрические данные на смартфоне из-за риска потери данных или хакерской атаки. Иные фирмы, например кабура казино, предоставляют методы для повышения защиты данных пользователей.

• Локальное сохранение: Преимущественно аппаратов хранит биометричные модели исключительно в пределах защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не оставляют устройство и недоступны в том числе создателю.

• Шифрование: Все информация сберегаются только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция приложений: Программы третьих разработчиков не обладают прямого возможности доступа к биометрическим данным; они могут лишь запрашивать подтверждение подтверждения личности через системный API.

Стоит упомянуть существенную подробность: в случае, если кто-то достанет физический доступ к вашему телефону (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство изготовители осуществляют защиту от неосознанного разблокирования — к примеру, требуют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют категории идентификации лиц?

В настоящее время можно определить три главных подхода к осуществлению этой операции:

Программное плоское идентификация

Применяется только лицевая видеокамера без дополнительных датчиков глубины. Такой подход наблюдается обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота осуществления; минимальная стоимость; скоростная функционирование при качественном свете.
Минусы: несложно ввести в заблуждение фотографией; неустойчивая работа ночью; слабая охрана.

Техническое объёмное оцифровка

Применяет инфракрасную видеокамеру + проекционный модуль точек + сенсоры глубины (Face ID от Apple; аналогичные решения у Huawei Mate).
Плюсы: большая надежность; невозможно исказить фото/видео; устойчивая деятельность в любых условиях освещения.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные способы с ИИ-дополнением

Применяют комбинацию программируемых методов + аппаратно-техническую обработку + последующую обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие продукты, например кабура и Google Pixel Face Unlock новейших поколений, комбинируют фронтальную камеру c инфракрасным сенсором мобильности Soli Radar для предотвращения от подделок жестами/масками/видеодисплеями посторонних устройств.

Образцы применения разных техник

• iPhone линейки X/11/12/13/14 применяют только техническое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition в первый раз внедрил эквивалент Face ID среди Android.
• Samsung Galaxy S10 версия/S20 поддерживают как программное двухмерное распознавание по изображению фронтальной камерой, так и сканер глазного ириса.
• Huawei Mate20 Pro использует систему из ИК-освещения + Dot Projector + ToF-сенсор

Проблемы безопасности и неверные срабатывания

Несмотря на замечательный успехи инноваций за последние годы, безупречных системы пока не существует:

1. Возможность обмана: Недорогие мобильники без труда открываются качественной снимком хозяина или же видео с дисплея иного гаджета.
2. Идентичные близнецы: Даже самые идеальные механизмы могут перепутать между однояйцевыми близнецами либо семьями с очень аналогичной внешностью.
3. Метаморфозы внешнего вида: Резкое похудение/увеличение массы тела, косметические процедуры либо повреждения в некоторых случаях требуют обновления данных биометрии.
4. Условия фотографирования: Яркая засветка солнцем либо интенсивная затенение могут понизить точность идентификации признаков.

Вот несколько советов для надёжному эксплуатации:

• Для критически важных операций всегда используйте двухфакторную аутентификацию;
• Не включайте функцию “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
• Регулярно обновляйте ПО телефона для обеспечения безопасности от современных угроз;
• Включайте опцию “Требовать открытых глаз” там, где она имеется.

Где дополнительно применяется технология помимо смартфонов?

Хотя тема нашей работы посвящена в частности смартфонам и планшетам, необходимо сказать о других сферах применения технологии:

• Контроль прохода в офисах и жилых домах;
• Платёжные устройства банков (“Face Pay”);
• Виртуальные удостоверения личности нового образца;
• Комплексы видеоконтроля городских подразделений;
• Автоматизация отслеживания присутствия образовательных учреждений/университетов;
• Вход участников персональных компьютеров/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — хватит пройти через барьер без пластика или телефона! Схожие проекты осуществляются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом трансформируется технический процесс в наше время?

Всякий годочек возникают свежие мысли для повышения стандарта работы систем распознавания лиц:

1. Увеличивается разрешение датчиков — чем больше деталей фиксируется фотоаппаратом/датчиками глубины, тем меньше риск погрешности;
2. Совершенствуются нейронные сети — новейшие архитектуры вида MobileNetV3 обеспечивают возможность быстро адаптироваться к свежим особенностям вида пользователя напрямую на гаджете без пересылки информации в облачное хранилище.
3. Совершенствуются методы антиспуфинга — теперь мобильные устройства могут распознавать подлинные анимированные лица от неподвижных фотографий/маскировок по мельчайшим микродвижениям.
4. Взаимодействие со умными устройствами — интеллектуальные часы могут самостоятельно закрыть доступ к телефон, если владелец удалился на значительное расстояние.
5. Появляются комбинированные механизмы — например совмещающие речевую аутентификацию + лицо + дактилоскопический след.

Здесь, какие направления в особенности актуальны в данный момент:

1) Сокращение элементов

Компании стараются минимизировать размер прорези (“чёлки”) под сенсоры на дисплее за счёт внедрения компактных ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработка прямо на устройстве

Для повышения личной безопасности всё больше обработки данных происходит на месте без пересылки данных во сторонний облачный услугу.

3) Упорядочивание норм

Google энергично продвигает стандарт BiometricPrompt API, с целью чтобы такие системы, например как cabura, и любые Android-программы могли взаимодействовать с различными типами биометрии стандартизированно.

Что выбрать на сегодня?

В случае если вам важна предельная сохранность информации, выбирайте флагманские аппараты со встроенным ИК-проектором или же ToF-сенсором глубины.

• iPhone всех существующих новейших поколений
• Huawei Companion/Series P серии
• Mix Professional
• Vivo X серии
• Oppo Обнаружить Икс серий.

Если средства невелик – лучше предпочесть классическим методам защиты (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в cabura, задействовать только как дополнительную опцию удобства.

Каким способом увеличить комфорт использования опции?

Есть несколько советов для тех, кто уже использует разблокировку через лицо:

1. Регулярно обновляйте свою фотографию-шаблон, если кардинально изменяется внешний вид.
2. Не забывайте чистить объектив передней камеры – пятна могут понизить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам запускает фотоаппарат если вы берёте его в руки.
4. В процессе регистрации постарайтесь сохранять голову неподвижно впереди видеоустройства без резкого наклона головы.
5. Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отвели взгляд от экрана.

Будущее развития технологии

В скоро наступающие годы можно предполагать появления полностью дистанционных способов идентификации индивидуума сразу по нескольким биометрическим данным параметрам одновременно: физиономия + голос + походка + манипуляции руками!

Также возможно возникновение современных подходов защиты приватности – например, изменяющееся корректировка электронного образца после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из очень увлекательных технологий нашего эпохи! Она обеспечивает интеракцию со мобильным устройством проще чем раньше, и такие аппы, как кабура казино, могут существенно оптимизировать ваш пользовательский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы знаете, как работает эта система в деталях, – сможете осознаннее определять свой будущий устройство!