Каким образом действует идентификация лиц в смартфонах

Почему мы останавливаемся на разлочивание по лицу

В последние времена определение лиц стало одной из самых популярных опций для деблокировки мобильных телефонов. Лишь пару годков тому назад большинство пользователей довольствовались пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением подобных технологий, как Вулкан Платинум, нам достаточно просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Что превращает эту функцию настолько популярной? Во-первых, это удобно: не нужно удерживать в памяти замысловатые пароли или отыскивать нужный палец в мраке. Кроме того, это мгновенно: современные программы идентифицируют лицо практически за мгновения ока. В-третьих, это чувство футуристичности — как будто в фильмах про вулкан платинум зеркало шпионов.

Тем не менее за этой кажущейся простотой прячется весь вселенная трудных техник и инженерных концепций. Попробуем разобраться, как точно работает фейсканирование в современных гаджетах, какие бывают способы, насколько они безопасны и что нас ожидает в будущем.

Сжатая повествование прогресса технологии

Идентификация лиц как технология существует уже более 50 годов. Первые попытки машинного анализа лица были осуществлены еще в 1960-х годы в научных учреждениях США. Тогда ЭВМ способны были лишь обозначать очертания головы и определять дистанции между глазами и ртом на монохромных снимках.

Первые бизнес установки появились в 90-х, но они были несовершенны: функционировали медленно и нередко ошибались. Только с эволюцией искусственных сетей и таких площадок, как Vulkan Platinum, высокопроизводительных мобильных процессоров идентификация лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с надёжным трёхмерным сканированием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и прочие начали интегрировать свои разработки.

Ключевые этапы функционирования системы идентификации

Процесс распознавания лица можно условно поделить на несколько важных этапов:

1. Идентификация лица — аппарат выявляет наличие людского лица в снимке.
2. Извлечение особенностей — механизм исследует контуры облика: конфигурацию глаз, обонятельного органа, губ, положение бровей.
3. Построение шаблона — создаётся особенный цифровой отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со образцом — сформированный шаблон сравнивается со сохранённой при регистрации биометрической информацией владельца.
5. Принятие выбора — если совпадение достаточно высокое, смартфон деблокируется.

Всякий из этих этапов запрашивает индивидуальных алгоритмов и улучшений для оперативной работы непосредственно на девайсе.

Технические составляющие: что находится внутри

Обычная селфи камера.

Простейший несложный метод идентификации лица применяет исключительно переднюю видеокамеру мобильного устройства. Подобный способ внедрён во различных доступных моделях Android-устройств.

Положительные стороны:

• Необходимо требует дополнительных сенсоров.
• Оперативно функционирует при достаточном свете.

Минусы:

• Просто обмануть изображением или видео.
• Неудачно функционирует при слабом освещении или необычных ракурсах.

ИК фотокамера и пунктирный проектор

Более совершенные системы, такие как Vulkan Platinum, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс лежит в основе Face ID от Apple.

Каким способом это действует:

• Точечный проекционный прибор показывает на физиономию пользователя невидимую структуру из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 меток).
• ИК камера фиксирует деформацию этой решетки по плоскости физиономии.
• Формируется 3D карта глубины глубины, что почти что неосуществима для имитации стандартной фото или маской.

Преимущества

• Надёжная функционирование даже в полной неосвещённости.
• Высокая защита к имитациям.
• Точность распознавания выше 99%.

Дополнительные датчики

В отдельных аппаратах применяются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые фиксируют период прохождения света до предмета и обратно; RGB-датчики дальности; специальные оптические лидары для построения более аккуратной 3D-модели лица.

Эти разработки встречаются чаще всего во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: синтетический разум в работе

Современные устройства распознавания лиц немыслимы без эксплуатации ИИ и machine learning. Именно вследствие таким технологиям, как Vulkan Platinum, устройство способно узнавать пользователя даже при трансформациях внешности: новая укладка, щетина, очки или грим не становятся препятствием для разблокировки.

Распознавание лиц

В начальном стадии программа должна оперативно распознать ликовое изображение внутри всего снимка с камеры. Для этой задачи применяются каскадные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые натренированы идентифицировать лиц человека среди множества других объектов.

Пример: процесс MTCNN способен обнаруживать облик даже в случае частичном перекрытии (например, шалью или ладонью).

Определение важных моментов

После распознавания лица устройство, такая как Vulkan Platinum, определяет положение основных точек: уголки глаз, конец носа, края губ и так далее. Как правило применяется от 68 до 128 основных меток на лице.

Это необходимо для стабилизации визуала: если пользователь держит телефон под углом, или повернул голову, программа исправляет изображение до нормального состояния для дальнейшего анализа.

Формирование биометрического идентификатора образца

Далее искусственная сеть строит компактное математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ лица длиной от 128 до 512 вещественных чисел.

Такой шаблон весьма сложно подделать: он не удерживает само картинку юзера, а лишь исключительные черты его внешности, что делает его оптимальным для таких площадок, как Вулкан Казино Платинум.

Сравнительный анализ и принятие решения

Если человек желает разблокировать телефон глазами, система воспроизводит все описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный порог (обычно превышает 99%), телефон, как и платформа Вулкан Казино Платинум, разблокируется; если нет — доступ не предоставляется.

Привыкание к трансформациям внешнего вида

Занимательная характеристика современных систем — способность самообучения. Если вы часто открываете мобильное устройство с свежей укладкой или оптикой, программа постепенно освежает основной шаблон вашего лица для повышения точности работы без ухудшения безопасности.

Охрана биометрических данных информации.

Большинство клиенты опасаются хранить свои биометрические данные на телефоне из-за угрозы утечки информации или хакерской атаки. Некоторые компании, вроде Вулкан Казино Платинум, предоставляют варианты для увеличения безопасности данных юзеров.

• Локальное сохранение: Преимущественно устройств записывает биометрические образцы только внутрь безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не покидают аппарат и не доступны включая изготовителю.

• Шифрование: Все данные сохраняются только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Приложения сторонних девелоперов не обладают непосредственного возможности доступа к биометрическим данным; они могут лишь запрашивать подтверждение подтверждения личности через системный API.

Необходимо подчеркнуть значимую деталь: в случае, если кто-либо получит физический доступ к вашему телефону (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество производители внедряют меры безопасности от неосознанного разблокирования — в частности, просят открыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают виды определения лиц?

В настоящее время можно определить 3 основных способа к выполнению этой функции:

Программируемое двухмерное идентификация

Применяется только лицевая видеокамера без дополнительных датчиков глубины. Такой способ используется чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность осуществления; умеренная цена; оперативная деятельность при хорошем освещении.
Минусы: просто обмануть фотографией; нестабильная деятельность ночью; низкая безопасность.

Техническое 3D оцифровка

Применяет инфракрасную видеокамеру + проектор пикселей + датчики глубины (Face ID от Apple; подобные технологии у Huawei Mate).
Достоинства: большая надёжность; не получится подделать фото/видео; устойчивая деятельность в любых условиях освещения.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные методы с дополнением ИИ

Применяют комбинацию программируемых методов + техническую обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например Vulkan Platinum и Google Pixel Face Unlock новейших версий, комбинируют фронталку c инфракрасным датчиком движения Soli Radar для предотвращения от фальсификаций жестами/масками/видеодисплеями посторонних устройств.

Иллюстрации применения разных техник

• iPhone серии X/11/12/13/14 используют только техническое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition первый раз внедрил аналог Face ID в ряду Android.
• Samsung Galaxy S10 версия/S20 имеют как софтверное двухмерное распознавание по фото фронталкой, так и сенсор ириса глаза.
• Huawei Mate20 Pro использует набор из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Трудности безопасности и ложные сигналы

Несмотря на замечательный развитие техники за недавние годы, идеальных системы пока не наблюдается:

1. Вероятность подвоха: Доступные телефоны легко доступны четкой изображением пользователя либо роликом с экрана другого устройства.
2. Идентичные близняшки: Даже самые совершенные устройства могут перепутать между однояйцевыми близнецами либо родичами с очень аналогичной внешностью.
3. Метаморфозы облика: Резкое снижение веса/набор веса, косметические процедуры или травмы порой требуют перерегистрации биометрических данных.
4. Условия съёмки: Яркая подсветка солнцем или же интенсивная темнота могут понизить верность распознавания признаков.

Вот пара советов по безопасному использованию:

• Для значимых операций всегда применяйте двухфакторную аутентификацию;
• Не включайте опцию “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
• Регулярно апгрейдите ПО смартфона для обеспечения безопасности от актуальных атак;
• Включайте настройку “Требовать открытых глаз” везде, где она имеется.

Где также находится применение технологии помимо мобильных телефонов?

Хотя основная мысль нашей работы посвящена в частности портативным гаджетам, необходимо сказать о прочих направлениях внедрения технологии:

• Контроль прохода в деловых центрах и жилых домах;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Электронные идентификационные документы современного образца;
• Системы видеоконтроля муниципальных подразделений;
• Автоматизирование отслеживания явки учебных заведений/университетов;
• Авторизация юзеров персональных компьютеров/ноутбуков.

Например: В московском метро уже испытывается система платежа проезда по лицу (“Face Pay”) — нужно лишь пройти через барьер без карты или телефона! Аналогичные программы осуществляются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Как изменяется технический процесс в наше время?

Всякий годик проявляются современные концепции для повышения стандарта функционирования систем идентификации лиц:

1. Увеличивается детализация датчиков — чем больше деталей фиксируется фотоаппаратом/глубинными сенсорами, тем меньше шанс неточности;
2. Совершенствуются нейросети — передовые архитектуры типа MobileNetV3 дают возможность оперативно обучаться дополнительным особенностям вида владельца непосредственно на девайсе без отправки данных в облако.
3. Улучшаются технологии антиспуфинга — теперь мобильные устройства способны различать настоящие движущиеся облики от неподвижных фотографий/маскировок по мельчайшим движениям кожи.
4. Синхронизация со смарт-гаджетами — умные часы могут авто закрыть доступ к телефон, если владелец удалился на значительное расстояние.
5. Проявляются смешанные механизмы — к примеру объединяющие аудио идентификацию + физиономию + отпечаток пальца.

Вот, которые тенденции в особенности востребованы сейчас:

1) Миниатюризация компонентов

Производители намереваются минимизировать размер прорези (“чёлки”) для датчики на дисплее за счёт внедрения компактных ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на устройстве

Для увеличения личной безопасности всё больше обработки данных осуществляется на месте без пересылки данных во внешний облачный услугу.

3) Стандартизация регламентов

Гугл энергично продвигает эталон BiometricPrompt API, чтобы подобные платформы, например как Вулкан Платинум, и все Android-аппы были совместимы с различными типами биометрии унифицированно.

Какое выбрать на сегодня?

Когда тебе нужна максимальная сохранность данных, выбирайте флагманские аппараты с интегрированным ИК-излучателем или же ToF-датчиком глубины.

• iPhone всех существующих актуальных моделей
• Huawei Partner/P ряда
• Mix Expert
• Vivo X линейки
• Oppo Find X линейки.

Если бюджет ограничен – лучше предпочесть обычным средствам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в Вулкан Платинум, применять только как дополнительную опцию удобства.

Каким способом увеличить практичность работы возможности?

Есть несколько советов для тех, кто уже использует разблокировку по лицу:

1. Регулярно обновляйте свою изображение-шаблон, если кардинально изменяется внешность.
2. Не пренебрегайте протирать линзу фронтальной камеры – разводы могут уменьшить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате мобильник сам включает фотоаппарат как только вы поднимаете его.
4. Во время регистрации старайтесь держать лицо прямо перед камеры не допуская значительного наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отвернулись от дисплея.

Будущее прогресса инноваций

В предстоящие годы можно ожидать появления полностью безконтактных способов идентификации индивидуума сразу по нескольким биометрическим данным параметрам одновременно: физиономия + речь + шаги + манипуляции руками!

Также возможно появление новых методов защиты личной информации – например, динамическое изменение диджитал шаблона после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – одна из наиболее увлекательных техник нашего эпохи! Она предоставляет общение со смартфоном удобнее чем когда-либо прежде, и такие приложения, как Вулкан Казино Платинум, могут значительно оптимизировать ваш опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы знаете, как работает эта система внутри, – будете в состоянии вдумчиво выбирать свой будущий устройство!