Каким образом функционирует идентификация лицевых образов в телефонах

Зачем мы выбираем разлочивание по фейсу

В прошлые годы распознавание лиц стало одной из самых популярных опций для открытия умных телефонов. Всего несколько годков назад основная часть пользователей довольствовались пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением таких технологий, как cabura, нам достаточно лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Что превращает эту конкретную особенность такой востребованной? Прежде всего, это комфортно: не нужно удерживать в памяти сложные пароли или находить правильный палец в темноте. Во-вторых, это быстро: современные системы распознают лицо буквально за мгновения ока. В-третью очередь, это впечатление футуризма — будто в фильмах про кабура шпионов.

Впрочем за этой кажущейся легкостью прячется целый вселенная сложных технологий и инженерных решений. Позвольте нам исследовать, как точно функционирует идентификация по лицу в актуальных смартфонах, какие бывают способы, насколько они защищены и что нас предстоит.

Краткая история эволюции инноваций

Идентификация лиц как техника присутствует уже более пятидесяти лет. Первые попытки машинного анализа облика были осуществлены еще в 1960-х годах в лабораториях США. Тогда вычислительные машины способны были лишь выделять очертания черепа и определять расстояния между зрачками и ртом на ахроматических снимках.

Первые коммерческие системы стали доступны в 1990-х годах, но они были несовершенны: функционировали медленно и часто давали сбои. Только с прогрессом нейронных сетей и таких площадок, как кабура, сильных мобильных процессоров определение лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным распознаванием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие начали интегрировать свои решения.

Основные стадии работы устройства распознавания

Процесс определения лица можно примерно поделить на несколько важных этапов:

1. Обнаружение лица — аппарат распознает наличие людского лица в снимке.
2. Выделение особенностей — механизм анализирует особенности лица: форму глаз, обонятельного органа, уст, расположение надбровных дуг.
3. Построение структуры — создаётся неповторимый виртуальный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с эталоном — полученный модель сравнивается со записанной при внесении биометрической данными владельца.
5. Принятие решения — если сходство достаточно значительное, смартфон открывается.

Каждый из этих шагов нуждается в особых процедур и усовершенствований для скорой работы прямо на устройстве.

Железные составляющие: что находится внутри

Типичная селфи камера.

Простейший легкий способ определения физиономии использует лишь фронтальную камеру смартфона мобильного устройства. Данный метод внедрён во различных бюджетных вариантах Android-устройств.

Сильные стороны:

• Не нуждается в потребляет внешних датчиков.
• Шустро функционирует при качественном освещении.

Слабые стороны:

• Несложно ввести в заблуждение фотографией или роликом.
• Плохо функционирует при слабом освещённости или нестандартных ракурсах.

Инфракрасная камера и точечный проекционный аппарат

Более усовершенствованные системы, такие как кабура, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология лежит в основе Face ID от Apple.

Как это действует:

• Точечный проектор показывает на лицо использующего невидимую сетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 меток).
• ИК устройство записывает изменение формы этой сетки по плоскости лица.
• Формируется 3D глубинная карта глубины, которая почти неосуществима для подделки стандартной фото или маской.

Достоинства

• Надёжная деятельность даже в полной неосвещённости.
• Сильная сопротивляемость к подделкам.
• Точность определения выше 99%.

Добавочные сенсоры

В некоторых девайсах применяются также вспомогательные сенсоры: ToF (Time-of-Flight), которые измеряют время прохождения луча до предмета и обратно; RGB-датчики глубины; специальные лазерные лидары для формирования более точной 3D-модели лица.

Эти технологии используются наиболее часто во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: синтетический интеллект на исполнении

Нынешние механизмы распознавания лиц невозможны без эксплуатации artificial intelligence и машинного обучения. Именно вследствие таким инновациям, как кабура, аппарат в состоянии распознавать владельца даже при изменениях облика: новая укладка, борода, очки или грим не становятся помехой для открытия.

Обнаружение лица

При первом стадии система необходимо быстро обнаружить ликовое изображение среди всего кадра с камеры. Для этого используются каскадные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые “обучены” распознавать человеческие лица среди множества других объектов.

Пример: процесс MTCNN может находить физиономию даже с неполном перекрытии (например, шалью или рукой).

Идентификация ключевых моментов

После идентификации лица механизм, такая как кабура, вычисляет положение основных точек: уголки глаз, кончик носа, контуры губ и так далее. Часто применяется от 68 до 128 основных маркеров на лицевой поверхности.

Это требуется для выравнивания визуала: если человек находится с телефон под наклоном, или наклонил головку, программа исправляет изображение до обычного угла для последующего изучения.

Построение биометрического идентификатора образца

Далее нейронная сеть строит компактное математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ лица длиной от 128 до 512 чисел с плавающей запятой.

Данный формат крайне затруднительно подделать: он не сохраняет само изображение пользователя, а лишь уникальные характеристики его внешности, что делает его идеальным для таких систем, как кабура казино.

Сравнение и вынесение заключения

Когда юзер желает открыть телефон глазами, программа повторяет все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный уровень (обычно превышает 99%), телефон, как и платформа кабура казино, разблокируется; если нет — доступ не предоставляется.

Привыкание к метаморфозам внешнего вида

Интересная характеристика нынешних систем — способность самообучения. Если вы часто разблокируете смартфон с новой стрижкой или оптикой, система постепенно освежает основной модель вашего лица для повышения точности работы без ухудшения безопасности.

Охрана биометрических данных информации.

Множество юзеры боятся хранить свои биометрические идентификационные данные на телефоне из-за угрозы потери данных или хакерской атаки. Иные организации, вроде кабура казино, предоставляют решения для увеличения защиты информации юзеров.

• Локальное хранение: Большинство девайсов хранит биометрические образцы только внутрь защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не оставляют аппарат и закрыты включая производителю.

• Шифрование: Все информация сохраняются только в кодированном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция приложений: Программы сторонних разработчиков не обладают прямого доступа к биометрическим данным; они могут лишь запрашивать подтверждение верификации личности через системный API.

Стоит упомянуть важную деталь: в случае, если кто-то сможет получить физический доступ к вашему телефону (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество изготовители внедряют защиту от “слепого” разблокирования — к примеру, заставляют раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют виды распознавания лиц?

На сегодняшний день можно выделить определить три главных метода к реализации этой функции:

Программируемое плоское определение

Применяется только передняя видеокамера без дополнительных детекторов глубины. Такой метод наблюдается обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость воплощения; низкая стоимость; быстрая деятельность при хорошем освещении.
Минусы: несложно одурачить фотографией; ненадежная деятельность ночью; недостаточная безопасность.

Оборудование для 3D оцифровка

Задействует инфракрасную камеру + проекционный модуль точек + датчики дистанции (Face ID от Apple; аналогичные решения у Huawei Mate).
Преимущества: значительная достоверность; невозможно обмануть фото/видео; постоянная деятельность в любых условиях освещения.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Гибридные способы с интеграцией ИИ

Задействуют комбинацию программируемых методов + аппаратную обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие продукты, например кабура и Google Pixel Face Unlock новейших поколений, объединяют фронтальную камеру c ИК датчиком движения Soli Radar для защиты от подделок руками/масками/видеоэкранами чужих устройств.

Образцы эксплуатации разнообразных техник

• iPhone модели X/11/12/13/14 применяют только аппаратное трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition впервые представил аналог Face ID в ряду Android.
• Samsung Galaxy S10 модель/S20 поддерживают как программное обеспечение 2D распознавание по изображению фронтальной камерой, так и датчик ириса глаза.
• Huawei Mate20 Pro задействует набор из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Трудности защиты и ложные тревоги

Несмотря на впечатляющий успехи технологий за последние лет, совершенных системы пока не существует:

1. Вероятность подвоха: Доступные мобильники просто открываются четкой снимком пользователя либо видеозаписью с экрана другого устройства.
2. Идентичные близняшки: Даже самые совершенные системы могут спутать между однояйцевыми близнецами либо родственниками с очень аналогичной внешностью.
3. Изменения внешнего вида: Резкое утрата веса/увеличение массы тела, пластические операции либо травмы в некоторых случаях необходимы для повторной регистрации биометрии.
4. Условия фотографирования: Яркая засветка солнцем или глубокая темнота могут снизить верность определения признаков.

Ниже некоторые советов по надёжному использованию:

• Для критически важных операций всегда внедряйте дополнительную аутентификацию;
• Не активируйте функцию “Разблокировка по лицу” на недорогих аппаратах без ИК-сенсоров;
• Систематически апгрейдите ПО телефона для защиты от актуальных атак;
• Включайте настройку “Требовать раскрытых глаз” там, где она доступна.

Где также находится применение технологии помимо мобильных телефонов?

Пускай основная мысль этой работы касается в частности смартфонам и планшетам, следует отметить прочих направлениях внедрения технологии:

• Контроль прохода в деловых центрах и жилых домах;
• Платёжные аппараты банков (“Face Pay”);
• Цифровые удостоверения личности нового поколения;
• Установки видеонаблюдения муниципальных сервисов;
• Автоматизирование отслеживания присутствия учебных заведений/университетов;
• Авторизация юзеров компьютеров/ноутбуков.

Например: В столичном метро уже проверяется система оплаты проезда по лицу (“Face Pay”) — достаточно пройти через барьер без пластика или мобильника! Схожие инициативы реализуются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом изменяется технология сегодня?

Всякий год возникают новые идеи для повышения уровня работы систем распознавания лиц:

1. Увеличивается чёткость сенсорных устройств — чем больше информации фиксируется видеокамерой/датчиками глубины, тем меньше шанс ошибки;
2. Совершенствуются нейронные сети — передовые конструкции типа MobileNetV3 позволяют быстро адаптироваться к новым чертам вида пользователя прямо на устройстве без отправки данных в облако.
3. Улучшаются методы антиспуфинга — теперь смартфоны способны различать настоящие движущиеся облики от неподвижных снимков/масок по микроскопическим микродвижениям.
4. Интеграция со интеллектуальными приборами — интеллектуальные часы могут самостоятельно блокировать мобильный телефон, если владелец ушёл далеко.
5. Возникают комбинированные системы — к примеру объединяющие голосовую идентификацию + физиономию + пальцевой отпечаток.

Итак, какие направления в особенности актуальны в данный момент:

1) Миниатюризация компонентов

Компании стараются уменьшить размер отверстия (“чёлки”) под сенсоры на экране за счёт встраивания компактных ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработывание прямо на девайсе

Для улучшения приватности всё более обработки данных выполняется локально без пересылки информации во дополнительный облачный услугу.

3) Унификация норм

Гугл активно продвигает норму BiometricPrompt API, с целью чтобы подобные площадки, вроде cabura, и каждые Android-программы могли работать с всеми формами биометрии единообразно.

Что решить сегодня?

В случае если тебе необходима наивысшая защита данных, подбирайте флагманские аппараты со встроенным ИК-проектором или ToF-датчиком глубины.

• iPhone всех существующих последних версий
• Huawei Companion/Series P серии
• Xiaomi Professional
• Vivo X серии
• Oppo Find Х линейки.

Если финансы ограничен – лучше выбирать обычным методам безопасности (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в cabura, применять только как дополнительную возможность удобства.

Каким способом улучшить практичность работы опции?

Есть несколько советов для тех, кто уже использует функцию распознавания лица:

1. Регулярно обновляйте свою фотографию-шаблон, если значительно изменяется внешность.
2. Не упускайте из виду очищать линзу передней камеры – разводы могут снизить четкость!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам включает фотоаппарат когда вы берёте его в руки.
4. Во время регистрационного процесса пытайтесь удерживать лицевую часть прямо впереди объектива исключая сильного наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отвели взгляд от дисплея.

Будущее прогресса технологии

В скоро наступающие периоды можно ожидать развития полностью дистанционных способов опознания персоны сразу по нескольким биометрическим данным параметрам одновременно: физиономия + речь + манера ходьбы + манипуляции руками!

Также предполагается возникновение новых методов защиты личной информации – к примеру, переменное изменение диджитал образца после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из очень интересных техник нашего эпохи! Она обеспечивает интеракцию со смартфоном проще чем до этого, и такие приложения, как кабура казино, могут существенно оптимизировать ваш пользовательский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы понимаете, как устроена эта система внутри, – будете в состоянии более осмысленно подбирать свой следующий устройство!