Каким образом работает определение лиц в мобильных устройствах

Для чего мы предпочитаем разблокирование по фейсу

В прошлые времена распознавание лиц превратилось в одной из наиболее востребованных возможностей для разблокировки смартфонов. Еще несколько годков назад большинство юзеров обходились пин-кодами, паролями или сканерами отпечатков пальцев. Но при появлением таких технологий, например Вулкан Платинум, нам достаточно просто взглянуть на экран — и устройство тут же узнает своего владельца.

Какая вещь превращает данную функцию такой востребованной? Для начала, это удобно: не нужно запоминать трудные пароли или искать правильный палец в мраке. Во-вторых, это оперативно: современные системы идентифицируют лицо буквально за мгновение. В-третью очередь, это ощущение футуристичности — будто в кинолентах про вулкан платинум разведчиков.

Однако за этой кажущейся простотой прячется целый универсум комплексных технологий и инженерных концепций. Позвольте нам понять, как именно работает распознавание лиц в новейших гаджетах, какие применяются способы, насколько они защищены и что нас предстоит.

Сжатая повествование развития техники

Идентификация лиц как техника присутствует уже более пятидесяти лет. Начальные попытки машинного изучения облика были осуществлены еще в 1960-х годах в исследовательских центрах США. Тогда компьютеры способны были лишь обозначать контуры черепа и определять расстояния между очами и губами на монохромных изображениях.

Изначальные бизнес установки возникли в девяностых годах, но они были далеки от совершенства: действовали неспешно и часто ошибались. Только с эволюцией нейронных сетей и таких площадок, как Vulkan Platinum, сильных мобильных процессоров идентификация лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным распознаванием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и другие начали внедрять свои решения.

Ключевые стадии работы системы идентификации

Процесс идентификации лица можно ориентировочно поделить на несколько ключевых этапов:

Обнаружение лица — аппарат определяет существование человеческого образа в изображении.
Определение характеристик — механизм анализирует особенности облика: форму глаз, носа, губ, позицию бровей.
Построение модели — создаётся неповторимый цифровой отпечаток (faceprint) на основе определённых признаков.
Сравнение со стандартом — полученный образец сопоставляется со зафиксированной при регистрации биометрической информацией владельца.
Принятие решения — если соответствие достаточно высокое, смартфон открывается.

Каждый из указанных этапов запрашивает специальных процедур и усовершенствований для скорой работы прямо на устройстве.

Технические компоненты: что скрыто в их недрах

Стандартная селфи камера.

Самый простой легкий метод определения лица задействует исключительно переднюю камеру смартфона смартфона. Подобный метод реализован во многих недорогих версиях Android-устройств.

Плюсы:

Не требует дополнительные сенсоров.
Оперативно функционирует при хорошем свете.

Отрицательные стороны:

Просто одурачить фотографией или видео.
Плохо действует при низком свете или нестандартных ракурсах.

ИК камера и точечный проекционный аппарат

Более усовершенствованные системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика является основой Face ID от Apple.

Каким способом это функционирует:

Точечный проектор проецирует на лицо пользователя невидимую сетку из тысяч инфракрасных меток (например, Face ID применяет около 30 000 меток).
Инфракрасная камера фиксирует деформацию этой сетки по плоскости лица.
Формируется трехмерная карта глубины, что почти невозможна для подделки типичной фотографией или маской.

Плюсы

Надёжная деятельность даже в полной тьме.
Большая сопротивляемость к имитациям.
Точность идентификации свыше 99%.

Дополнительные сенсоры

В отдельных аппаратах задействуются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые фиксируют период распространения луча до цели и обратно; RGB-датчики глубины; специальные оптические дальномеры для построения более аккуратной 3D-модели физиономии.

Эти инновации используются чаще всего во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: искусственный ум на исполнении

Современные системы опознания физиономий неосуществимы в отсутствие применения artificial intelligence и machine learning. Именно вследствие таким инновациям, как Vulkan Platinum, устройство в состоянии идентифицировать юзера даже при метаморфозах облика: новая стрижка, растительность на лице, линзы или грим не становятся барьером для разблокировки.

Детектирование лиц

На первом шаге система обязана мгновенно обнаружить лицо среди полного снимка с камеры. Для данной цели задействуются многоуровневые классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые “обучены” идентифицировать человеческие лица среди множества других объектов.

Пример: метод MTCNN может обнаруживать лицо даже с частичном закрытии (например, шарфом или ладонью).

Выделение важных точек

После обнаружения лица механизм, такая как Vulkan Platinum, определяет местоположение основных точек: края глаз, верхушка носа, края губ и так далее. Как правило используется от 68 до 128 основных меток на лицевой области.

Данное необходимо для стабилизации визуала: если юзер удерживает смартфон под наклоненным, или повернул головку, программа “выпрямляет” изображение до обычного угла для дальнейшего анализа.

Построение биометрии шаблона

Далее искусственная сеть строит уплотненное математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ лица длиной от 128 до 512 чисел с плавающей запятой.

Такой образец крайне сложно имитировать: он не хранит непосредственно картинку пользователя, а лишь особенные характеристики его внешности, что делает его идеальным для таких систем, как Вулкан Казино Платинум.

Сравнительный анализ и осуществление решения

В случае, когда юзер намеревается разблокировать смартфон глазами, система повторяет все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный уровень (обычно превышает 99%), телефон, как и платформа Вулкан Казино Платинум, разблокируется; если нет — доступ блокируется.

Адаптация к метаморфозам внешнего вида

Увлекательная черта современных систем — способность самообучения. Если вы регулярно разблокируете смартфон с обновленной прической или очками, система постепенно освежает эталонный шаблон вашего лица для повышения точности работы без снижения уровня безопасности.

Охрана биометрии данных.

Множество пользователи боятся сохранять свои биометрические идентификационные данные на смартфоне из-за вероятности утечки информации или хакерской атаки. Иные компании, такие как Вулкан Казино Платинум, предлагают методы для повышения сохранности сведений юзеров.

Локальное сохранение: Основная часть девайсов сохраняет биометричные образцы лишь внутрь защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Они всегда не выходят из устройство и не доступны в том числе изготовителю.
Шифрование: Все сведения хранятся только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция программ: Приложения сторонних разработчиков не обладают непосредственного возможности доступа к биометрическим данным; они могут лишь запрашивать подтверждение подтверждения личности через системный API.

Стоит упомянуть важную особенность: если кто-то сможет получить физический доступ к вашему телефону (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство производители внедряют меры безопасности от автоматического разблокирования — например, требуют открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются виды распознавания лиц на изображениях?

На сегодняшний день можно выделить определить три ключевых подхода к реализации этой операции:

Софтверное плоское идентификация

Эксплуатируется только фронтальная видеокамера без вспомогательных сенсоров глубины. Этот метод используется наиболее часто в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность реализации; низкая затраты; скоростная деятельность при хорошем освещении.
Минусы: легко обмануть снимком; нестабильная работа ночью; низкая безопасность.

Аппаратное объёмное сканирование

Использует ИК видеокамеру + проектор точек + сенсоры дистанции (Face ID от Apple; подобные технологии у Huawei Mate).
Достоинства: значительная достоверность; нельзя подделать изображение/видеозапись; стабильная работа при любом освещении.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Смешанные методы с ИИ-дополнением

Применяют комбинацию программируемых методов + аппаратную обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие товары, как Vulkan Platinum и Google Pixel Face Unlock новейших поколений, объединяют фронтальную камеру c инфракрасным датчиком мобильности Soli Radar для защиты от подделок жестами/масками/видеодисплеями чужих устройств.

Примеры применения различных методов

iPhone линейки X/11/12/13/14 задействуют только техническое трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition первый раз представил эквивалент Face ID в ряду Android.
Samsung Galaxy S10/S20 имеют как программное обеспечение двухмерное идентификацию по изображению фронталкой, так и сканер глазного ириса.
Huawei Mate20 Pro использует систему из ИК-подсветки + Dot Projector + ToF-датчик

Трудности охраны и ошибочные тревоги

Несмотря на поразительный прогресс инноваций за последние годы, идеальных систем пока не имеется:

Возможность обмана: Бюджетные телефоны без труда “разблокируются” четкой изображением владельца либо видеозаписью с экрана другого устройства.
Идентичные близнецы: Даже самые совершенные механизмы могут ошибиться между монозиготными близнецами либо родственниками с очень схожей внешностью.
Трансформации облика: Резкое похудение/увеличение массы тела, хирургические вмешательства либо повреждения порой необходимы для перерегистрации биометрии.
Условия записи: Сильная освещённость солнцем или глубокая темнота могут понизить верность распознавания признаков.

Вот пара советов для надёжному использованию:

Для важных операций всегда используйте дополнительную аутентификацию;
Не включайте возможность “Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
Регулярно обновляйте прошивку телефона для обеспечения безопасности от новых видов атак;
Включайте опцию “Требовать распахнутых глаз” там, где она есть.

В каких местах ещё используется технологии помимо смартфонов?

Несмотря на то, что основная мысль данной публикации касается в частности портативным гаджетам, стоит упомянуть о прочих направлениях внедрения технологии:

Мониторинг входа в деловых центрах и резиденциях;
Платёжные устройства банков (“Face Pay”);
Виртуальные идентификационные документы современного поколения;
Системы видеонаблюдения городских служб;
Механизация регистрации посещаемости учебных заведений/университетов;
Авторизация пользователей ПК/ноутбуков.

Например: В московском метро уже испытывается система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без карты или телефона! Похожие программы реализуются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом трансформируется технология сегодня?

Каждый годик проявляются свежие мысли для улучшения стандарта работы систем идентификации лиц:

Увеличивается разрешение датчиков — чем больше элементов фиксируется фотоаппаратом/глубинными сенсорами, тем меньше риск неточности;
Улучшаются нейросети — передовые структуры типа MobileNetV3 дают возможность оперативно адаптироваться к свежим характеристикам вида обладателя прямо на устройстве без отправки данных в облако.
Совершенствуются методы антиспуфинга — теперь телефоны способны различать реальные анимированные лица от неподвижных фото/масок по мельчайшим микродвижениям.
Синхронизация со смарт-гаджетами — интеллектуальные часы могут автоматически заблокировать смартфон, если обладатель ушёл далеко.
Проявляются комбинированные устройства — в частности комбинирующие речевую опознание + физиономию + дактилоскопический след.

Итак, какие направления в особенности популярны на сегодняшний день:

1) Уменьшение деталей

Изготовители пытаются уменьшить габариты выреза (“чёлки”) под сенсоры на дисплее за счёт встраивания компактных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на устройстве

Для повышения конфиденциальности всё более обработки данных осуществляется внутри устройства без отправки данных во внешний облачный услугу.

3) Унификация стандартов

Google энергично продвигает эталон BiometricPrompt API, для того чтобы такие системы, как Вулкан Платинум, и все Android-программы могли взаимодействовать с всеми формами биометрии стандартизированно.

Что выбрать на сегодня?

Если вам всем необходима предельная защита информации, выбирайте флагманские устройства с вмонтированным ИК-излучателем либо ToF-датчиком глубины.

iPhone всех новейших моделей
Huawei Partner/Series P ряда
Xiaomi Expert
Vivo X модели
Oppo Обнаружить Икс серий.

Если финансы ограничен – лучше предпочесть классическим средствам защиты (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в Вулкан Платинум, применять только как опциональную возможность удобства.

Как повысить удобство работы опции?

Есть некоторые хитростей для людей, кто уже использует функцию распознавания лица:

Периодически обновляйте свою фото-шаблон, если значительно изменяется облик.
Не забывайте очищать линзу фронтальной камеры – разводы могут снизить четкость!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам включает фотоаппарат как только вы поднимаете его.
Во время регистрационного процесса старайтесь держать лицевую часть ровно напротив видеоустройства без сильного наклона головы.
Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отвернулись от дисплея.

Будущее развития инноваций

В ближайшие годы можно предвкушать возникновения полностью дистанционных способов распознавания индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: лицо + речь + походка + движения рук!

Также предполагается появление новых способов обеспечения личной информации – например, изменяющееся корректировка диджитал шаблона после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – единственная из очень интересных технологий нашего периода! Она обеспечивает взаимодействие со мобильным устройством удобнее чем до этого, и такие приложения, как Вулкан Казино Платинум, могут значительно повысить ваш юзерский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы знаете, как работает эта система в деталях, – сможете более осмысленно подбирать свой следующий девайс!