Каким способом действует распознавание лиц в смартфонах

Для чего мы предпочитаем разблокирование по фейсу

В недавние годы распознавание физиономий превратилось в одной из самых популярных опций для открытия умных телефонов. Всего некоторые годов тому назад основная часть юзеров удовлетворялись пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но при появлением таких технологий, как Вулкан Платинум, нам достаточно лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Какой аспект обуславливает эту особенность такой востребованной? Прежде всего, это комфортно: не нужно запоминать сложные пароли или искать нужный палец в темноте. Также, это оперативно: современные алгоритмы узнают лицо буквально за мгновения ока. В-третьих, это чувство футуристичности — будто в кинофильмах про вулкан платинум зеркало агентов.

Однако за данной на первый взгляд несложностью прячется целый универсум комплексных техник и инженерных концепций. Позвольте нам разобраться, как конкретно действует фейсканирование в новейших смартфонах, какие существуют способы, насколько они надёжны и что нас предстоит.

Короткая история развития инноваций

Идентификация лиц как техника присутствует уже более 50 годов. Первые попытки машинного анализа лиц были предприняты еще в 1960-х годы в лабораториях США. Тогда ЭВМ могли лишь выделять очертания черепа и вычислять дистанции между зрачками и губами на ахроматических снимках.

Изначальные бизнес системы появились в девяностых годах, но они были несовершенны: действовали неспешно и часто давали сбои. Только с эволюцией синтетических сетей и таких систем, как Vulkan Platinum, мощных мобильных чипов определение лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным идентификацией лица. За этим последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали интегрировать свои решения.

Ключевые стадии действия устройства идентификации

Процесс определения лица можно ориентировочно разделить на несколько основных этапов:

1. Распознавание лиц — аппарат определяет существование гуманного лица в снимке.
2. Извлечение признаков — система исследует черты физиономии: очертания зрительных органов, носа, уст, расположение бровей.
3. Построение структуры — создаётся уникальный электронный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с образцом — сформированный модель сравнивается с зафиксированной при внесении биометрической сведениями владельца.
5. Принятие выбора — если сходство достаточно существенное, смартфон открывается.

Любой из этих стадий запрашивает особых процедур и оптимизаций для быстрой работы прямо на устройстве.

Аппаратные элементы: что прячется внутри них

Типичная передняя камера.

Простейший несложный вариант распознавания физиономии применяет исключительно лицевую камеру мобильного устройства. Подобный способ реализован во многих недорогих моделях Android-устройств.

Сильные стороны:

• Необходимо потребляет дополнительных сенсоров.
• Оперативно функционирует при качественном освещённости.

Слабые стороны:

• Несложно обмануть снимком или видео.
• Неудачно работает при плохом освещённости или необычных ракурсах.

Инфракрасная фотокамера и пунктирный проектор

Более усовершенствованные системы, такие как Vulkan Platinum, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика лежит в основе Face ID от Apple.

Каким способом это работает:

• Точечный устройство проекции проецирует на облик использующего невидимую сетку из тысяч инфракрасных меток (например, Face ID применяет около 30 000 меток).
• ИК устройство записывает деформацию этой сетки по поверхности лица.
• Получается трёхмерная карта глубины, которая практически невозможна для имитации обычной снимком или маскировкой.

Преимущества

• Надёжная работа даже в полной темноте.
• Большая устойчивость к имитациям.
• Точность распознавания свыше 99%.

Добавочные сенсоры

В некоторых аппаратах применяются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые определяют время движения луча до предмета и обратно; RGB-датчики глубины; специальные световые дальномеры для построения более аккуратной 3D-модели лица.

Эти инновации используются в основном во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: искуственный интеллект на исполнении

Современные механизмы опознания лиц невозможны без использования искусственного интеллекта и машинного обучения. Именно из-за таким инновациям, как Vulkan Platinum, аппарат способно узнавать пользователя даже при трансформациях внешнего вида: новая укладка, борода, оптика или косметика не становятся барьером для открытия.

Распознавание физиономии

В первом стадии программа необходимо оперативно найти ликовое изображение в пределах целого изображения с камеры. Для этого используются каскадные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые подготовлены идентифицировать лиц человека среди множества других объектов.

Пример: алгоритм MTCNN может распознавать лицо даже в случае частичном перекрытии (например, платком или рукой).

Определение основных моментов

После обнаружения лица механизм, такая как Vulkan Platinum, устанавливает положение главных точек: кончики глаз, кончик носа, контуры губ и так далее. Часто задействуется от 68 до 128 основных точек на лицевой области.

Это действие требуется для выравнивания изображения: если юзер удерживает телефон под наклоном, или наклонил головку, программа исправляет изображение до нормального состояния для дальнейшего анализа.

Создание биометрического идентификатора модели

Далее нейросеть строит сжатое математическое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 вещественных чисел.

Этот шаблон крайне затруднительно подделать: он не удерживает само фото юзера, а лишь исключительные характеристики его внешности, что делает его оптимальным для таких систем, как Вулкан Казино Платинум.

Сопоставление и вынесение выбора

Если юзер желает разлочить смартфон взором, механизм осуществляет все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый уровень (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, открывается; если нет — доступ запрещается.

Привыкание к изменениям облика

Занимательная особенность актуальных системы — способность самообучения. Если вы часто доступаете к мобильное устройство с свежей прической или оптикой, программа постепенно освежает эталонный образец вашего лица для улучшения точности функционирования без ухудшения безопасности.

Охрана биометрических данных данных.

Множество пользователи беспокоятся держать свои биометрические данные на смартфоне из-за вероятности утечки информации или взлома гаджета. Определенные компании, вроде Вулкан Казино Платинум, предоставляют методы для повышения сохранности сведений клиентов.

• Локальное сбережение: Основная часть аппаратов хранит биометричные модели исключительно внутрь безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не выходят из аппарат и недоступны даже изготовителю.

• Шифрование: Все сведения хранятся только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Программы внешних разработчиков не обладают прямого доступа к биометрическим данным; они могут лишь запрашивать факт подтверждения личности через системный API.

Следует подчеркнуть существенную особенность: если кто-либо достанет доступ к вашему телефону физически (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство производители внедряют систему защиты от “слепого” разблокирования — в частности, требуют разомкнуть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются типы идентификации лиц?

Сегодня можно определить выделить 3 ключевых способа к реализации этой задачи:

Программное 2D идентификация

Применяется только лицевая видеокамера без дополнительных детекторов глубины. Такой способ наблюдается наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота воплощения; умеренная стоимость; оперативная работа при качественном освещении.
Минусы: несложно обмануть фотографией; неустойчивая деятельность ночью; недостаточная безопасность.

Аппаратное 3D сканирование

Применяет ИК видеокамеру + проектор пикселей + сенсоры глубины (Face ID от Apple; аналогичные технологии у Huawei Mate).
Достоинства: значительная надежность; не получится подделать изображение/видеозапись; устойчивая функционирование при любом освещении.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные способы с ИИ-дополнением

Используют комбинацию программных методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие продукты, как Vulkan Platinum и Google Pixel Face Unlock современных версий, сочетают фронтальную камеру c ИК датчиком мобильности Soli Radar для предотвращения от подделок жестами/масками/видеодисплеями посторонних устройств.

Примеры использования различных способов

• iPhone модели X/11/12/13/14 используют только техническое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition впервые предложил аналог Face ID среди Android.
• Samsung Galaxy S10 версия/S20 имеют как программное обеспечение плоское идентификацию по снимку фронтальной камерой, так и датчик глазного ириса.
• Huawei Mate20 Pro использует систему из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Вопросы защиты и ложные срабатывания

Несмотря на впечатляющий прогресс инноваций за недавние лет, безупречных механизмов пока не наблюдается:

1. Возможность подвоха: Бюджетные мобильники просто доступны качественной изображением хозяина или роликом с экрана другого устройства.
2. Идентичные близнецы: Даже самые совершенные устройства могут спутать между однояйцевыми близнецами либо семьями с очень похожей внешностью.
3. Изменения внешности: Резкое снижение веса/увеличение массы тела, хирургические вмешательства или травмы в некоторых случаях необходимы для перерегистрации биометрии.
4. Условия записи: Сильная засветка солнечным светом или же плотная тень могут снизить верность идентификации признаков.

Вот несколько советов для защищённому эксплуатации:

• Для значимых операций всегда используйте дополнительную аутентификацию;
• Не активируйте возможность “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
• Постоянно обновляйте прошивку прошивку смартфона для обеспечения безопасности от новых видов атак;
• Включайте настройку “Требовать раскрытых глаз” везде, где она есть.

В каких местах ещё находится применение технология за исключением смартфонов?

Несмотря на то, что основная мысль нашей работы касается в частности смартфонам и планшетам, необходимо сказать о других сферах применения технологии:

• Мониторинг доступа в деловых центрах и жилых домах;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Виртуальные паспорта современного поколения;
• Установки видеонаблюдения городских сервисов;
• Автоматизация отслеживания посещаемости школ/вузов;
• Аутентификация участников компьютеров/ноутбуков.

Например: В московском метро уже проверяется система платежа проезда по лицу (“Face Pay”) — нужно лишь пройти через турникет без пластика или телефона! Похожие программы развиваются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким образом трансформируется технический процесс сегодня?

Всякий год возникают новые концепции для повышения качества работы систем распознавания лиц:

1. Увеличивается разрешение сенсоров — чем больше информации фиксируется фотоаппаратом/датчиками глубины, тем меньше риск неточности;
2. Совершенствуются нейросети — новейшие конструкции модели MobileNetV3 дают возможность быстро обучаться новым чертам облика пользователя прямо на устройстве без пересылки информации в облачное хранилище.
3. Улучшаются способы антиспуфинга — теперь телефоны способны различать подлинные анимированные облики от статичных снимков/масок по незаметным микродвижениям.
4. Взаимодействие со смарт-гаджетами — умные часы могут самостоятельно закрыть доступ к мобильный телефон, если владелец отошёл далеко.
5. Появляются комбинированные механизмы — в частности объединяющие голосовую идентификацию + облик + пальцевой отпечаток.

Здесь, которые тренды особенно востребованы сейчас:

1) Миниатюризация компонентов

Производители пытаются уменьшить размер отверстия (“чёлки”) под датчики на экране за счёт интеграции миниатюрных ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Переработка прямо на аппарате

Для улучшения личной безопасности всё больше вычислений выполняется локально без передачи данных во дополнительный облачный услугу.

3) Унификация норм

Google интенсивно продвигает стандарт BiometricPrompt API, чтобы аналогичные площадки, например как Вулкан Платинум, и любые Android-программы могли работать с всеми формами биометрии единообразно.

Какое выбрать сегодня?

В случае если вам важна максимальная защита информации, остановите выбор на передовые аппараты с интегрированным ИК-излучателем или же ToF-датчиком глубины.

• iPhone всех новейших моделей
• Huawei Partner/Series P серии
• Xiaomi Professional
• Vivo X серии
• Oppo Find Икс серий.

Если финансы невелик – лучше предпочесть обычным средствам защиты (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в Вулкан Платинум, применять только как дополнительную опцию удобства.

Как повысить удобство функционирования опции?

Есть несколько советов для тех, кто уже использует разблокировку через лицо:

1. Часто меняйте свою фото-шаблон, если кардинально изменяется облик.
2. Не упускайте из виду чистить линзу передней камеры – загрязнения могут уменьшить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам запускает камеру когда вы поднимаете его.
4. Во время регистрации пытайтесь сохранять лицевую часть ровно впереди камеры не допуская резкого наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отвернулись от экрана.

Возможности развития инноваций

В скоро наступающие времена можно предполагать развития полностью бесконтактных способов опознания индивидуума сразу по нескольким биометрическим данным параметрам одновременно: лицо + звучание + походка + манипуляции руками!

Также вероятно возникновение новых методов обеспечения личной информации – например, динамическое корректировка электронного образца после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – единственная из самых интересных инноваций нашего периода! Она делает взаимодействие со мобильным устройством проще чем когда-либо прежде, и такие аппы, как Вулкан Казино Платинум, могут в разы оптимизировать ваш юзерский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы понимаете, как устроена эта технология в деталях, – сумеете более осмысленно выбирать свой очередной гаджет!