Как работает идентификация лиц в смартфонах

Для чего мы останавливаемся на разлочивание по лицу

В прошлые времена идентификация физиономий является одной из самых распространённых возможностей для открытия умных телефонов. Еще пару лет ранее большинство пользователей обходились PIN-кодами, ключами доступа или сканерами отпечатков пальцев. Но при появлением подобных технологий, как cabura, нам достаточно лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Какой аспект делает эту конкретную особенность очень нужной? Во-первых, это удобно: не нужно запоминать сложные пароли или находить правильный палец в тьме. Кроме того, это оперативно: современные программы узнают лицо буквально за мгновение. В-третьих, это ощущение футуризма — как будто в фильмах про cabura разведчиков.

Впрочем за такой кажущейся легкостью таится полный вселенная трудных технологий и инженерных решений. Давайте разобраться, как точно функционирует распознавание лиц в актуальных смартфонах, какие применяются методы, насколько они защищены и что нас ожидает в будущем.

Короткая хроника прогресса техники

Распознавание лиц как методика присутствует уже более 50 лет. Начальные эксперименты автоматического изучения лиц были осуществлены еще в 1960-х годы в лабораториях США. Тогда вычислительные машины умели лишь выделять очертания головы и вычислять расстояния между зрачками и губами на монохромных изображениях.

Начальные бизнес системы возникли в 90-х, но они были несовершенны: работали медленно и нередко ошибались. Только с развитием нейронных сетей и таких систем, как кабура, сильных мобильных чипов идентификация лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с надёжным трёхмерным распознаванием лица. За этим последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали интегрировать личные решения.

Ключевые шаги действия устройства распознавания

Процесс идентификации лица можно ориентировочно разделить на несколько ключевых этапов:

1. Обнаружение лица — аппарат определяет существование людского образа в кадре.
2. Определение особенностей — система изучает контуры облика: очертания глаз, обонятельного органа, уст, расположение надбровных дуг.
3. Построение шаблона — создаётся неповторимый электронный отпечаток (faceprint) на основе определённых признаков.
4. Сравнение со эталоном — сформированный модель сверяется со записанной при регистрации биометрической информацией владельца.
5. Принятие выбора — если сходство достаточно высокое, смартфон разблокируется.

Всякий из этих стадий требует специальных методов и улучшений для скорой работы прямо на устройстве.

Технические элементы: что прячется внутри

Обычная передняя камера.

Наиболее простой способ распознавания облика задействует только переднюю камеру мобильного устройства. Данный подход внедрён во многих бюджетных вариантах Android-девайсов.

Преимущества:

• Не нуждается в требует дополнительных датчиков.
• Оперативно функционирует при хорошем освещённости.

Слабые стороны:

• Несложно обмануть фотографией или роликом.
• Неправильно функционирует при плохом свете или нестандартных углах обзора.

ИК фотокамера и пунктирный проекционный аппарат

Более усовершенствованные системы, такие как кабура, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология составляет базу Face ID от Apple.

Как это функционирует:

• Точечный проекционный прибор показывает на физиономию использующего невидимую решетку из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 точек).
• Инфракрасная камера регистрирует изменение формы этой сетки по поверхности лица.
• Получается 3D глубинная карта глубины, что практически невозможна для подделки типичной фотографией или маскировкой.

Достоинства

• Надёжная функционирование даже в полной темноте.
• Высокая сопротивляемость к подделкам.
• Точность распознавания более 99%.

Добавочные сенсоры

В определённых аппаратах применяются также экстра датчики: ToF (Time-of-Flight), которые измеряют период распространения луча до цели и обратно; RGB-датчики дальности; специальные оптические лидары для создания более аккуратной 3D-модели физиономии.

Эти разработки применяются в основном во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: искуственный разум в исполнении

Текущие системы идентификации физиономий немыслимы при отсутствии применения искусственного интеллекта и машинного обучения. Именно вследствие таким технологиям, как кабура, гаджет в состоянии распознавать пользователя даже при трансформациях облика: новая стрижка, растительность на лице, оптика или грим не становятся препятствием для деблокировки.

Обнаружение лиц

На стартовом стадии алгоритм необходимо мгновенно обнаружить образ лица в пределах полного снимка с камеры. Для данной цели применяются последовательные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые “обучены” распознавать человеческие лица среди множества других объектов.

Пример: процесс MTCNN способен находить физиономию даже в случае частичном закрытии (например, платком или ладонью).

Идентификация ключевых моментов

После обнаружения лица устройство, такая как кабура, определяет местоположение основных точек: кончики глаз, кончик носа, контуры губ и так далее. Часто используется от 68 до 128 главных маркеров на лице.

Данное требуется для выравнивания изображения: если пользователь удерживает телефон под наклоном, или склонил голову, программа “выпрямляет” картинку до нормального состояния для последующего изучения.

Построение биометрического идентификатора шаблона

Далее нейросеть строит уплотненное числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 чисел с плавающей запятой.

Этот образец весьма трудно подделать: он не сохраняет непосредственно картинку пользователя, а лишь уникальные характеристики его внешности, что делает его оптимальным для таких платформ, как кабура казино.

Сравнительный анализ и принятие выбора

Если юзер желает разблокировать телефон взглядом, механизм воспроизводит все описанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает заданный уровень (обычно больше 99%), телефон, как и платформа кабура казино, разблокируется; если нет — доступ блокируется.

Привыкание к трансформациям внешнего вида

Увлекательная характеристика современных системы — способность самостоятельного обучения. Если ты часто разблокируете телефон с обновленной прической или очками, программа постепенно обновляет эталонный модель вашего облика для повышения точности работы без ухудшения безопасности.

Охрана биометрических данных данных.

Большинство пользователи боятся хранить свои био-идентификационные данные на смартфоне из-за угрозы утечки данных или хакерской атаки. Иные организации, вроде кабура казино, предлагают решения для повышения защиты сведений юзеров.

• Локальное сбережение: Большинство устройств записывает биометрические образцы исключительно в пределах безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не оставляют устройство и закрыты в том числе производителю.

• Шифрование: Все данные хранятся только в кодированном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Приложения третьих девелоперов не обладают непосредственного возможности доступа к биометрическим; они могут лишь запрашивать факт верификации идентичности через системный API.

Следует отметить важную подробность: в случае, если кто-либо достанет физический доступ к вашему телефону (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество компании внедряют систему защиты от “слепого” разблокирования — например, просят открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие имеются виды идентификации лиц на изображениях?

Сегодня можно различить три главных способа к осуществлению этой функции:

Программируемое плоское идентификация

Эксплуатируется только передняя камера без дополнительных датчиков дистанции. Такой подход встречается наиболее часто в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота реализации; низкая стоимость; скоростная функционирование при качественном свете.
Минусы: легко ввести в заблуждение снимком; ненадежная работа ночью; недостаточная охрана.

Оборудование для 3D оцифровка

Задействует ИК видеокамеру + проектор точек + датчики глубины (Face ID от Apple; подобные решения у Huawei Mate).
Достоинства: высокая достоверность; нельзя подделать фото/видео; устойчивая функционирование в любых условиях освещения.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Гибридные подходы с дополнением ИИ

Используют комбинацию программных методов + техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие продукты, как кабура и Google Pixel Face Unlock последних версий, сочетают фронталку c ИК сенсором мобильности Soli Radar для предотвращения от подделок руками/масками/видеоэкранами посторонних устройств.

Примеры эксплуатации разнообразных методов

• iPhone серии X/11/12/13/14 задействуют только физическое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition впервые внедрил подобие Face ID в ряду Android.
• Samsung Galaxy S10/S20 обеспечивают как программное двухмерное идентификацию по изображению фронтальной камерой, так и сканер глазного ириса.
• Huawei Mate20 Pro применяет систему из ИК-подсветки + Dot Projector + ToF-сенсор

Проблемы защиты и ложные срабатывания

Несмотря на замечательный развитие инноваций за прошедшие лет, совершенных систем пока не существует:

1. Вероятность подвоха: Бюджетные смартфоны легко доступны высококачественной снимком пользователя или видео с дисплея иного гаджета.
2. Идентичные близнецы: Даже самые безупречные механизмы могут перепутать между монозиготными близнецами либо родичами с очень схожей внешностью.
3. Изменения внешности: Стремительное утрата веса/набор веса, косметические процедуры или повреждения в некоторых случаях требуют перерегистрации биометрии.
4. Условия записи: Интенсивная освещённость солнечным светом или же глубокая затенение могут уменьшить верность идентификации признаков.

Здесь пара подсказок по защищённому эксплуатации:

• Для значимых операций всегда используйте дополнительную аутентификацию;
• Не активируйте опцию “Разблокировка по лицу” на недорогих аппаратах без ИК-сенсоров;
• Систематически обновляйте прошивку программное обеспечение мобильного устройства для обеспечения безопасности от современных угроз;
• Включайте настройку “Требовать раскрытых глаз” в тех местах, где она доступна.

В каких местах также находится применение технологии кроме смартфонов?

Несмотря на то, что тема этой работы посвящена конкретно смартфонам и планшетам, необходимо сказать о других сферах применения технологии:

• Мониторинг доступа в деловых центрах и резиденциях;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Цифровые паспорта современного поколения;
• Комплексы видеомониторинга муниципальных подразделений;
• Автоматизация отслеживания посещаемости школ/вузов;
• Авторизация пользователей персональных компьютеров/ноутбуков.

Например: В столичном метро уже тестируется система оплаты проезда по лицу (“Face Pay”) — нужно лишь пройти через барьер без пластика или мобильника! Аналогичные проекты реализуются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Как трансформируется техпроцесс в нынешнее время?

Всякий годик появляются свежие мысли для улучшения уровня работы систем распознавания лиц:

1. Увеличивается чёткость сенсоров — чем больше информации фиксируется фотоаппаратом/датчиками глубины, тем меньше шанс ошибки;
2. Улучшаются нейросети — современные конструкции вида MobileNetV3 дают возможность скоростно осваивать дополнительным характеристикам внешности обладателя напрямую на гаджете без пересылки информации в облачное хранилище.
3. Улучшаются способы антиспуфинга — теперь мобильные устройства могут распознавать настоящие движущиеся лица от неподвижных снимков/маскировок по незаметным микродвижениям.
4. Взаимодействие со смарт-гаджетами — умные часы могут авто блокировать смартфон, если пользователь удалился на значительное расстояние.
5. Появляются смешанные системы — например комбинирующие голосовую идентификацию + физиономию + пальцевой отпечаток.

Вот, которые тенденции очень актуальны в данный момент:

1) Уменьшение деталей

Компании стараются сократить габариты выреза (“чёлки”) для датчики на экране за счёт внедрения компактных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Переработка прямо на аппарате

Для улучшения приватности всё более расчётов происходит локально без пересылки данных во дополнительный облачный сервис.

3) Унификация стандартов

Google интенсивно пропагандирует норму BiometricPrompt API, чтобы такие площадки, вроде cabura, и все Android-программы были совместимы с любыми видами биометрии единообразно.

Какое решить на сегодня?

В случае если вам важна максимальная безопасность информации, выбирайте флагманские аппараты с вмонтированным ИК-проектором либо ToF-датчиком глубины.

• iPhone всех актуальных поколений
• Huawei Companion/P Series ряда
• Mix Professional
• Vivo X модели
• Oppo Обнаружить Икс серий.

Если финансы скромен – лучше предпочесть классическим методам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в cabura, задействовать только как второстепенную возможность удобства.

Каким образом повысить практичность работы функции?

Есть пара лайфхаков для людей, кто уже использует функцию распознавания лица:

1. Периодически обновляйте свою фото-шаблон, если кардинально трансформируется внешность.
2. Не пренебрегайте протирать линзу передней камеры – загрязнения могут снизить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам запускает фотоаппарат когда вы берёте его в руки.
4. При регистрационного процесса старайтесь удерживать голову ровно впереди камеры без сильного наклона головы.
5. Используйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отвели взгляд от дисплея.

Будущее развития инноваций

В скоро наступающие годы можно предполагать появления полностью безконтактных способов опознания индивидуума сразу по нескольким биометрическим данным параметрам одновременно: лицо + голос + походка + манипуляции руками!

Также вероятно развитие новых методов обеспечения личной информации – например, изменяющееся корректировка электронного образца после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – единственная из очень интересных техник нашего периода! Она обеспечивает общение со мобильным устройством комфортнее чем когда-либо прежде, и такие программы, как кабура казино, могут значительно улучшить ваш опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы знаете, как устроена эта система в деталях, – сумеете осознаннее определять свой очередной девайс!