Каким способом работает распознавание лицевых образов в мобильных устройствах

Для чего мы предпочитаем разблокирование по лицу

В прошлые времена определение лиц стало одной из самых популярных возможностей для разблокировки смартфонов. Лишь пару годов тому назад основная часть юзеров удовлетворялись пин-кодами, паролями или датчиками отпечатков пальцев. Но с появлением подобных технологий, как Вулкан Платинум, нам вполне лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Какой аспект обуславливает эту конкретную особенность настолько популярной? Прежде всего, это удобно: не нужно запоминать сложные пароли или искать верный палец в мраке. Во-вторых, это мгновенно: современные системы идентифицируют лицо практически за мгновения ока. В-третью очередь, это впечатление футуристичности — словно в фильмах про казино Вулкан шпионов.

Впрочем за этой на первый взгляд легкостью скрывается целый вселенная сложных технологий и инженерных концепций. Попробуем исследовать, как точно действует идентификация по лицу в новейших гаджетах, какие существуют методы, насколько они безопасны и что нас ожидает в будущем.

Короткая история развития инноваций

Распознавание лиц как техника присутствует уже более 50 лет. Начальные эксперименты автоматического анализа облика были осуществлены еще в 1960-х годах в лабораториях США. Тогда ЭВМ способны были лишь обозначать контуры черепа и определять промежутки между зрачками и устами на монохромных изображениях.

Первые бизнес системы появились в 90-х, но они были далеки от совершенства: действовали неспешно и нередко ошибались. Только с прогрессом искусственных сетей и таких платформ, как Vulkan Platinum, высокопроизводительных мобильных микросхем распознавание лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным идентификацией лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и другие стали внедрять свои решения.

Ключевые шаги работы устройства распознавания

Процесс идентификации лица можно ориентировочно разделить на несколько основных этапов:

1. Обнаружение лиц — устройство распознает существование людского лица в изображении.
2. Определение характеристик — алгоритм анализирует контуры облика: очертания зрительных органов, носа, губ, позицию надбровных дуг.
3. Построение модели — создаётся особенный электронный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с стандартом — сформированный образец сверяется со записанной при внесении биометрической информацией владельца.
5. Принятие выбора — если совпадение достаточно высокое, смартфон деблокируется.

Каждый из этих стадий нуждается в специальных методов и улучшений для скорой работы прямо на устройстве.

Технические компоненты: что находится в их недрах

Типичная передняя камера.

Простейший несложный способ определения облика использует только лицевую камеру смартфона смартфона. Данный способ осуществлён во различных доступных версиях Android-устройств.

Положительные стороны:

• Не нуждается в нуждается в дополнительных датчиков.
• Быстро работает при качественном освещённости.

Отрицательные стороны:

• Несложно ввести в заблуждение изображением или видео.
• Неправильно функционирует при слабом свете или нестандартных углах обзора.

Инфракрасная фотокамера и точечный проектор

Более совершенные системы, такие как Vulkan Platinum, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология составляет базу Face ID от Apple.

Каким способом это действует:

• Точечный проекционный прибор проецирует на лицо использующего невидимую решетку из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 точек).
• ИК устройство записывает искривление этой сетки по поверхности лица.
• Получается 3D карта глубины глубины, что почти неосуществима для имитации типичной снимком или маскировкой.

Плюсы

• Надёжная функционирование даже в полной темноте.
• Большая сопротивляемость к подделкам.
• Точность распознавания свыше 99%.

Добавочные сенсорные устройства

В определённых устройствах используются также дополнительные датчики: ToF (Time-of-Flight), которые определяют время прохождения света до объекта и обратно; RGB-датчики глубины; специальные световые дальномеры для формирования более детализированной 3D-модели лица.

Эти инновации применяются в основном во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: синтетический ум на работе

Современные механизмы распознавания лиц неосуществимы в отсутствие применения artificial intelligence и машинного обучения. Именно благодаря таким разработкам, как Vulkan Platinum, аппарат может идентифицировать пользователя даже при изменениях внешнего вида: новая стрижка, растительность на лице, оптика или косметика не становятся помехой для открытия.

Распознавание лица

При начальном этапе система должна быстро распознать ликовое изображение внутри целого снимка с камеры. Для этой задачи задействуются многоуровневые классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые подготовлены находить человеческие лица среди множества других объектов.

Пример: метод MTCNN в состоянии обнаруживать лицо даже с неполном перекрытии (например, платком или рукой).

Идентификация основных точек

После распознавания лица устройство, такая как Vulkan Platinum, вычисляет положение основных точек: края глаз, кончик носа, контуры губ и так далее. Часто задействуется от 68 до 128 ключевых точек на лицевой области.

Это действие необходимо для стабилизации визуала: если человек держит смартфон под углом, или наклонил голову, программа “выпрямляет” изображение до нормального состояния для последующего изучения.

Построение биометрического идентификатора модели

Далее нейросеть строит сжатое числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след внешности длиной от 128 до 512 вещественных чисел.

Этот формат очень трудно сфальсифицировать: он не хранит непосредственно картинку юзера, а лишь особенные особенности его вида, что делает его оптимальным для таких систем, как Вулкан Казино Платинум.

Сравнительный анализ и вынесение выбора

Если юзер хочет открыть смартфон взором, программа повторяет все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый границу (обычно выше 99%), телефон, как и платформа Вулкан Казино Платинум, разблокируется; если нет — доступ запрещается.

Привыкание к метаморфозам внешнего вида

Занимательная особенность нынешних системы — возможность самообучения. Если вы постоянно доступаете к смартфон с свежей прической или очками, программа постепенно освежает основной образец вашего внешности для повышения точности работы без ухудшения безопасности.

Охрана биометрии данных.

Многие клиенты беспокоятся сохранять свои биометрические идентификационные данные на смартфоне из-за угрозы потери данных или взлома устройства. Иные фирмы, например Вулкан Казино Платинум, предлагают варианты для повышения безопасности информации юзеров.

• Локальное хранение: Основная часть аппаратов записывает био-идентификационные шаблоны только в пределах защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не покидают гаджет и недоступны в том числе изготовителю.

• Шифрование: Все данные сберегаются только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция приложений: Программы сторонних разработчиков не обладают непосредственного доступа к биометрическим данным; они могут лишь запрашивать подтверждение верификации идентичности через системный API.

Стоит отметить значимую подробность: если кто-либо получит доступ к вашему телефону физически (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество компании реализуют систему защиты от “слепого” разблокирования — в частности, требуют раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют категории идентификации лиц на изображениях?

Сегодня можно выделить выделить три главных метода к осуществлению этой функции:

Софтверное двухмерное определение

Применяется только передняя видеокамера без вспомогательных сенсоров глубины. Этот подход используется чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость воплощения; умеренная затраты; быстрая работа при достаточном свете.
Минусы: просто обмануть снимком; неустойчивая функционирование ночью; недостаточная защищенность.

Аппаратное 3D сканирование

Задействует инфракрасную камеру + проектор точек + сенсоры глубины (Face ID от Apple; подобные технологии у Huawei Mate).
Достоинства: большая достоверность; не получится подделать изображение/видеозапись; стабильная работа при любом освещении.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные способы с ИИ-дополнением

Используют комбинацию программных методов + аппаратную обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные товары, например Vulkan Platinum и Google Pixel Face Unlock современных поколений, сочетают фронтальную камеру c ИК сенсором мобильности Soli Radar для защиты от фальсификаций жестами/масками/видеоэкранами посторонних устройств.

Примеры эксплуатации различных техник

• iPhone серии X/11/12/13/14 используют только аппаратное трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз предложил аналог Face ID среди Android.
• Samsung Galaxy S10 версия/S20 имеют как софтверное 2D определение по снимку фронтальной камерой, так и датчик глазного ириса.
• Huawei Mate20 Pro задействует набор из ИК-инфракрасного света + Dot Projector + ToF-датчик

Трудности безопасности и ошибочные тревоги

Несмотря на замечательный успехи техники за последние годы, совершенных систем пока не имеется:

1. Вероятность подвоха: Доступные телефоны просто “разблокируются” качественной фотографией хозяина либо роликом с экрана другого устройства.
2. Идентичные двойняшки: Даже самые совершенные устройства могут спутать между однояйцевыми близнецами либо родичами с очень аналогичной внешностью.
3. Метаморфозы внешности: Резкое снижение веса/увеличение массы тела, косметические процедуры либо повреждения иногда необходимы для перерегистрации биометрии.
4. Условия записи: Яркая освещённость солнечным светом или же интенсивная темнота могут уменьшить верность идентификации признаков.

Здесь несколько рекомендаций по надёжному применению:

• Для критически важных операций всегда внедряйте дополнительную аутентификацию;
• Не включайте возможность “Разблокировка по лицу” на бюджетных моделях без ИК-сенсоров;
• Постоянно обновляйте прошивку смартфона для предотвращения угроз от современных угроз;
• Включайте опцию “Требовать открытых глаз” везде, где она есть.

В каких местах дополнительно применяется технологии помимо мобильных телефонов?

Несмотря на то, что тема нашей работы сосредоточена на конкретно портативным гаджетам, необходимо сказать о альтернативных областях использования технологии:

• Контроль входа в рабочих помещениях и резиденциях;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Электронные паспорта современного поколения;
• Установки видеонаблюдения муниципальных служб;
• Автоматизирование регистрации посещаемости учебных заведений/вузов;
• Аутентификация юзеров персональных компьютеров/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по фейсу (“Face Pay”) — хватит пройти через турникет без карты или телефона! Схожие программы реализуются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким образом изменяется технология в наше время?

Всякий годик появляются свежие идеи для повышения качества деятельности систем распознавания лиц:

1. Увеличивается детализация сенсоров — чем больше элементов фиксируется камерой/глубинными сенсорами, тем меньше вероятность погрешности;
2. Совершенствуются искусственные интеллекты — современные структуры вида MobileNetV3 обеспечивают возможность оперативно обучаться свежим особенностям вида обладателя прямо на устройстве без пересылки информации в облачное хранилище.
3. Развиваются методы антиспуфинга — теперь смартфоны могут распознавать подлинные анимированные облики от неподвижных снимков/масок по незаметным движениям кожи.
4. Взаимодействие со умными устройствами — смарт-часы могут авто закрыть доступ к мобильный телефон, если пользователь удалился на значительное расстояние.
5. Возникают смешанные механизмы — например совмещающие аудио опознание + облик + пальцевой отпечаток.

Итак, которые тенденции очень востребованы на сегодняшний день:

1) Уменьшение деталей

Изготовители намереваются минимизировать величину отверстия (“чёлки”) для сенсоры на экране за счёт внедрения миниатюрных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Переработка прямо на устройстве

Для улучшения приватности всё более обработки данных осуществляется локально без передачи данных во дополнительный облачный услугу.

3) Стандартизация норм

Гугл энергично пропагандирует эталон BiometricPrompt API, с целью чтобы подобные площадки, как Вулкан Платинум, и все Android-аппы могли работать с различными типами биометрии стандартизированно.

Что подобрать на сегодня?

Когда тебе нужна максимальная защита информации, подбирайте передовые устройства с вмонтированным ИК-излучателем либо ToF-сенсором глубины.

• iPhone каждого актуальных моделей
• Huawei Partner/P Series ряда
• Mix Professional
• Vivo X серии
• Оппо Find Х серии.

Если средства невелик – лучше отдавать предпочтение обычным методам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в Вулкан Платинум, использовать только как дополнительную опцию комфорта.

Каким образом увеличить практичность использования возможности?

Есть несколько хитростей для людей, кто уже использует разблокировку по лицу:

1. Периодически обновляйте свою фотографию-шаблон, если сильно меняется внешность.
2. Не забывайте очищать объектив передней камеры – загрязнения могут понизить точность!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам включает камеру когда вы поднимаете его.
4. При регистрации старайтесь держать лицо прямо напротив объектива не допуская сильного наклона головы.
5. Используйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отвели взгляд от экрана.

Будущее развития техники

В ближайшие периоды можно предвкушать развития полностью дистанционных способов идентификации индивидуума сразу по нескольким биометрическим параметрам одновременно: физиономия + речь + шаги + манипуляции руками!

Также возможно развитие новых подходов обеспечения конфиденциальности – скажем, динамическое изменение электронного шаблона после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – единственная из очень увлекательных техник нашего времени! Она обеспечивает общение со телефоном удобнее чем раньше, и такие программы, как Вулкан Казино Платинум, могут существенно улучшить ваш юзерский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы понимаете, как работает эта методика внутри, – сможете более осмысленно определять свой очередной девайс!