Как работает определение лиц в смартфонах

Почему мы предпочитаем разлочивание по фейсу

В последние годы распознавание лиц превратилось в одной из наиболее востребованных функций для разблокировки смартфонов. Еще несколько годков назад основная часть использующих обходились пин-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением таких технологий, например Вулкан 24, нам достаточно лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Какая вещь превращает данную функцию такой востребованной? Для начала, это удобно: не нужно удерживать в памяти трудные пароли или находить правильный палец в тьме. Также, это мгновенно: современные алгоритмы распознают лицо практически за мгновение. В-третью очередь, это чувство футуризма — словно в кинофильмах про вулкан автомат агентов.

Однако за данной видимой простотой таится целый вселенная комплексных технологий и инженерных концепций. Попробуем исследовать, как конкретно действует распознавание лиц в современных смартфонах, какие существуют способы, насколько они надёжны и что нас предстоит.

Краткая повествование развития инноваций

Идентификация лиц как техника имеется уже более 50 лет. Изначальные эксперименты автоматического исследования облика были осуществлены еще в 1960-х годах в исследовательских центрах США. Тогда вычислительные машины умели лишь определять очертания лица и определять расстояния между зрачками и ртом на черно-белых снимках.

Изначальные бизнес системы появились в 1990-х годах, но они были неидеальны: действовали неспешно и часто давали сбои. Только с развитием синтетических сетей и таких платформ, как Вулкан 24 Казино, сильных мобильных микросхем определение лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с достоверным трёхмерным сканированием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и прочие начали внедрять собственные разработки.

Ключевые стадии работы системы идентификации

Процесс распознавания лица можно примерно разделить на несколько основных этапов:

1. Распознавание лица — камера распознает существование людского образа в изображении.
2. Выделение особенностей — алгоритм изучает черты лица: очертания зрительных органов, обонятельного органа, уст, позицию бровей.
3. Построение модели — создаётся уникальный цифровой отпечаток (faceprint) на основе определённых признаков.
4. Сравнение со стандартом — созданный модель сравнивается со зафиксированной при учёте биометрической информацией владельца.
5. Принятие решения — если совпадение достаточно высокое, смартфон разблокируется.

Любой из указанных шагов требует специальных методов и усовершенствований для быстрой работы непосредственно на девайсе.

Железные компоненты: что скрыто в их недрах

Стандартная фронтальная камера.

Наиболее несложный вариант определения физиономии применяет исключительно фронтальную камеру смартфона смартфона. Подобный способ осуществлён во многих недорогих версиях Android-девайсов.

Положительные стороны:

• Не нуждается в потребляет дополнительные датчиков.
• Оперативно действует при достаточном освещённости.

Слабые стороны:

• Несложно обмануть изображением или видеозаписью.
• Неправильно функционирует при слабом свете или нестандартных углах обзора.

Инфракрасная фотокамера и пунктирный проектор

Более усовершенствованные системы, такие как Вулкан 24 Казино, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика составляет базу Face ID от Apple.

Каким образом это функционирует:

• Точечный проектор отображает на лицо пользователя невидимую сетку из тысяч инфракрасных точек (например, Face ID задействует около 30 000 точек).
• ИК устройство фиксирует изменение формы данной решетки по поверхности физиономии.
• Получается трёхмерная глубинная карта глубины, что почти что невозможна для подделки стандартной фото или маскировкой.

Преимущества

• Надёжная функционирование даже в полной тьме.
• Высокая устойчивость к фальсификациям.
• Точность идентификации более 99%.

Дополнительные сенсорные устройства

В некоторых аппаратах используются также вспомогательные датчики: ToF (Time-of-Flight), которые фиксируют период распространения луча до предмета и обратно; Цветные-датчики дальности; специальные лазерные лидары для создания более точной 3D-модели физиономии.

Эти технологии встречаются наиболее часто во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные методы: синтетический интеллект в действии

Нынешние устройства идентификации лиц невозможны при отсутствии применения artificial intelligence и machine learning. Именно вследствие таким разработкам, как Вулкан 24 Казино, устройство способно распознавать юзера даже при метаморфозах внешности: новая стрижка, щетина, очки или косметика не становятся барьером для деблокировки.

Обнаружение лица

На начальном шаге алгоритм обязана оперативно найти ликовое изображение внутри всего кадра камеры. Для этого задействуются каскадные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые натренированы распознавать лица людей среди множества других объектов.

Пример: алгоритм MTCNN может обнаруживать физиономию даже при частичном перекрытии (например, шалью или рукой).

Выделение основных аспектов

После распознавания лица система, такая как Вулкан 24 Казино, устанавливает местоположение ключевых точек: края глаз, конец носа, границы губ и так далее. Как правило задействуется от 68 до 128 ключевых меток на лице.

Данное требуется для стабилизации изображения: если юзер держит мобильник под наклоном, или повернул голову, программа “выпрямляет” картинку до стандартного положения для последующего изучения.

Построение биометрии шаблона

Далее искусственная сеть строит сжатое математическое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след лица длиной от 128 до 512 вещественных чисел.

Данный формат очень затруднительно сфальсифицировать: он не хранит непосредственно фото пользователя, а лишь особенные характеристики его вида, что делает его совершенным для таких платформ, как Vulkan24.

Сравнительный анализ и принятие выбора

В случае, когда юзер желает разлочить смартфон глазами, механизм воспроизводит все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный уровень (обычно превышает 99%), телефон, как и платформа Vulkan24, открывается; если нет — доступ блокируется.

Привыкание к трансформациям внешнего вида

Занимательная характеристика актуальных систем — способность самостоятельного обучения. Если ты регулярно разблокируете смартфон с новой прической или оптикой, программа постепенно обновляет основной модель вашего облика для улучшения точности функционирования без снижения уровня безопасности.

Охрана биометрических данных информации.

Большинство клиенты опасаются держать свои биометрические данные на телефоне из-за риска потери данных или взлома устройства. Некоторые компании, такие как Vulkan24, предлагают варианты для улучшения безопасности информации юзеров.

• Локальное сохранение: Большинство устройств записывает био-идентификационные модели только в пределах защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не выходят из устройство и не доступны включая создателю.

• Шифрование: Все сведения сберегаются только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Программы третьих разработчиков не имеют прямого доступа к биометрическим данным; они могут лишь требовать подтверждение подтверждения личности через системный API.

Необходимо подчеркнуть существенную особенность: в случае, если кто-либо получит физический доступ к вашему телефону (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество компании осуществляют систему защиты от автоматического разблокирования — например, требуют разомкнуть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют типы идентификации лиц на изображениях?

Сегодня можно выделить выделить три главных метода к осуществлению этой функции:

Программное двухмерное определение

Эксплуатируется только фронтальная камера без вспомогательных датчиков дистанции. Подобный способ наблюдается обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота воплощения; низкая стоимость; оперативная деятельность при хорошем освещении.
Минусы: просто обмануть снимком; неустойчивая деятельность ночью; низкая охрана.

Техническое объёмное сканирование

Применяет инфракрасную видеокамеру + проекционный модуль пикселей + датчики дистанции (Face ID у Apple; подобные решения у Huawei Mate).
Преимущества: высокая надёжность; нельзя подделать изображение/видеозапись; постоянная деятельность в любых условиях освещения.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Смешанные подходы с ИИ-дополнением

Задействуют комбинацию программных методов + аппаратную обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, как Вулкан 24 Казино и Google Pixel Face Unlock новейших поколений, комбинируют фронтальную камеру c ИК сенсором мобильности Soli Radar для защиты от фальсификаций жестами/масками/видеоэкранами посторонних устройств.

Образцы применения разных способов

• iPhone серии X/11/12/13/14 используют только аппаратное трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз предложил эквивалент Face ID в числе Android.
• Samsung Galaxy S10 версия/S20 имеют как программное обеспечение двухмерное определение по изображению фронталкой, так и сенсор глазного ириса.
• Huawei Mate20 Pro задействует комплекс из ИК-подсветки + Dot Projector + ToF-сенсор

Проблемы защиты и ложные сигналы

Несмотря на поразительный прогресс технологий за недавние годы, безупречных системы пока не существует:

1. Возможность мошенничества: Доступные телефоны без труда открываются качественной снимком хозяина или же роликом с экрана другого устройства.
2. Идентичные близняшки: Даже самые совершенные системы могут спутать между монозиготными близнецами либо родственниками с очень похожей внешностью.
3. Метаморфозы внешности: Внезапное снижение веса/увеличение массы тела, косметические процедуры либо травмы порой необходимы для обновления данных биометрии.
4. Условия съёмки: Интенсивная освещённость солнечным светом или же интенсивная темнота могут уменьшить верность идентификации признаков.

Ниже некоторые советов для защищённому применению:

• Для важных операций всегда используйте двухэтапную аутентификацию;
• Не запускайте опцию “Разблокировка по лицу” на бюджетных устройствах без ИК-сенсоров;
• Постоянно апгрейдите прошивку мобильного устройства для обеспечения безопасности от новых видов атак;
• Включайте настройку “Требовать раскрытых глаз” в тех местах, где она есть.

В каких местах ещё применяется технология за исключением смартфонов?

Несмотря на то, что основная мысль нашей статьи касается конкретно смартфонам и планшетам, стоит упомянуть о прочих направлениях внедрения технологии:

• Контроль прохода в деловых центрах и многоквартирных зданиях;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Электронные паспорта нового типа;
• Комплексы видеоконтроля городских подразделений;
• Механизация отслеживания присутствия образовательных учреждений/университетов;
• Авторизация юзеров ПК/ноутбуков.

Например: В городском метро уже испытывается система оплаты проезда по фейсу (“Face Pay”) — достаточно пройти через турникет без карты или мобильника! Аналогичные программы осуществляются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Как меняется технология сегодня?

Каждый год проявляются свежие концепции для повышения уровня функционирования систем лицевого распознавания:

1. Увеличивается чёткость сенсорных устройств — чем больше элементов фиксируется фотоаппаратом/глубинными сенсорами, тем меньше риск погрешности;
2. Совершенствуются нейросети — передовые структуры типа MobileNetV3 дают возможность быстро адаптироваться к новым особенностям вида владельца прямо на устройстве без отправки данных в облако.
3. Совершенствуются способы антиспуфинга — теперь смартфоны умеют распознавать реальные живые лица от неподвижных снимков/маскировок по мельчайшим движениям кожи.
4. Интеграция со интеллектуальными приборами — смарт-часы могут авто заблокировать смартфон, если пользователь отошёл далеко.
5. Проявляются гибридные устройства — например совмещающие аудио аутентификацию + физиономию + дактилоскопический след.

Вот, которые тенденции особенно востребованы сейчас:

1) Сокращение элементов

Производители стараются уменьшить габариты выреза (“чёлки”) для датчики на экране за счёт встраивания компактных ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Обработывание прямо на аппарате

Для улучшения конфиденциальности всё более расчётов происходит локально без пересылки информации во внешний облачный сервис.

3) Стандартизация регламентов

Гугл интенсивно пропагандирует норму BiometricPrompt API, для того чтобы подобные платформы, как Вулкан 24, и каждые Android-приложения могли взаимодействовать с любыми видами биометрии стандартизированно.

Что решить сегодня?

Когда вам всем необходима предельная безопасность данных, выбирайте топовые модели с интегрированным ИК-излучателем или ToF-датчиком глубины.

• iPhone каждого актуальных версий
• Huawei Companion/P Series ряда
• Mi Pro
• Vivo X серии
• Оппо Обнаружить Икс серий.

Если средства невелик – лучше отдавать предпочтение классическим средствам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в Вулкан 24, использовать только как второстепенную возможность удобства.

Каким образом увеличить практичность функционирования функции?

Есть пара советов для тех, кто уже использует функцию распознавания лица:

1. Периодически обновляйте свою фото-шаблон, если значительно трансформируется облик.
2. Не пренебрегайте протирать объектив передней камеры – разводы могут понизить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате мобильник сам включает камеру если вы поднимаете его.
4. При регистрации пытайтесь держать лицевую часть неподвижно напротив объектива без резкого наклона головы.
5. Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отворачиваетесь от экрана.

Возможности прогресса технологии

В скоро наступающие времена можно предполагать развития полностью безконтактных способов распознавания персоны сразу по нескольким биометрическим параметрам одновременно: лицо + звучание + манера ходьбы + жесты рук!

Также вероятно возникновение современных способов защиты личной информации – скажем, динамическое модификация цифрового паттерна после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – одна из самых увлекательных инноваций нашего периода! Она обеспечивает интеракцию со смартфоном удобнее чем раньше, и такие приложения, как Vulkan24, могут в разы оптимизировать ваш юзерский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы понимаете, как функционирует эта технология изнутри, – будете в состоянии вдумчиво выбирать свой будущий девайс!