Каким образом действует распознавание лиц в телефонах

Зачем мы останавливаемся на разблокирование по фейсу

В недавние времена идентификация лиц превратилось в одной из наиболее востребованных функций для разблокировки умных телефонов. Еще некоторые годков назад основная часть использующих обходились пин-кодами, паролями или сканерами отпечатков пальцев. Но с появлением таких технологий, например Вулкан Платинум, нам достаточно лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какой аспект обуславливает эту функцию очень нужной? Для начала, это практично: не нужно запоминать трудные пароли или искать нужный палец в мраке. Также, это быстро: современные алгоритмы узнают лицо практически за доли секунды. В-третью очередь, это впечатление футуризма — словно в фильмах про вулкан платинум зеркало разведчиков.

Впрочем за этой кажущейся простотой прячется полный мир комплексных технологий и инженерных концепций. Позвольте нам понять, как точно работает идентификация по лицу в современных смартфонах, какие применяются способы, насколько они безопасны и что нас ожидает в будущем.

Короткая история эволюции техники

Идентификация лиц как технология существует уже более 50 годов. Изначальные попытки автоматического исследования лица были сделаны еще в 1960-х годы в лабораториях США. Тогда вычислительные машины способны были лишь обозначать контуры головы и измерять расстояния между зрачками и устами на ахроматических изображениях.

Первые бизнес системы возникли в 90-х, но они были далеки от совершенства: действовали неспешно и часто ошибались. Только с прогрессом искусственных сетей и таких площадок, как Vulkan Platinum, мощных мобильных чипов распознавание лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным распознаванием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали интегрировать личные решения.

Ключевые этапы работы устройства распознавания

Процесс определения лица можно условно разделить на несколько ключевых этапов:

1. Распознавание лиц — камера определяет присутствие гуманного образа в снимке.
2. Выделение характеристик — механизм изучает особенности лица: конфигурацию глаз, обонятельного органа, уст, расположение надбровных дуг.
3. Построение шаблона — создаётся неповторимый электронный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со эталоном — полученный модель сверяется со сохранённой при регистрации биометрической данными владельца.
5. Принятие определения — если соответствие достаточно существенное, смартфон открывается.

Каждый из указанных этапов запрашивает специальных методов и улучшений для оперативной работы прямо на устройстве.

Железные компоненты: что находится в их недрах

Обычная селфи камера.

Самый простой метод определения лица задействует лишь лицевую видеокамеру смартфона. Подобный способ осуществлён во многочисленных недорогих вариантах Android-устройств.

Положительные стороны:

• Не нуждается в нуждается в дополнительные сенсоров.
• Шустро функционирует при качественном свете.

Отрицательные стороны:

• Легко одурачить снимком или видеозаписью.
• Неправильно функционирует при плохом свете или непривычных ракурсах.

ИК камера и пунктирный проектор

Более продвинутые системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика является основой Face ID от Apple.

Каким образом это действует:

• Точечный проекционный прибор отображает на облик использующего невидимую структуру из тысяч инфракрасных точек (например, Face ID задействует около 30 000 точек).
• ИК камера регистрирует изменение формы данной решетки по плоскости лица.
• Формируется трёхмерная карта глубинности, что почти неосуществима для подделки стандартной фотографией или маскировкой.

Преимущества

• Надёжная работа даже в полной темноте.
• Сильная сопротивляемость к подделкам.
• Точность распознавания более 99%.

Дополнительные датчики

В отдельных устройствах используются также экстра датчики: ToF (Time-of-Flight), которые измеряют время распространения света до предмета и обратно; RGB-датчики глубины; специальные лазерные лидары для формирования более аккуратной 3D-модели физиономии.

Эти инновации применяются в основном во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искуственный ум в действии

Современные устройства опознания лиц немыслимы в отсутствие использования artificial intelligence и machine learning. Именно благодаря таким технологиям, как Vulkan Platinum, гаджет может распознавать юзера даже при трансформациях внешнего вида: новая причёска, растительность на лице, линзы или макияж не становятся барьером для разблокировки.

Детектирование лица

При первом шаге система обязана мгновенно обнаружить ликовое изображение в пределах полного снимка с камеры. Для этой задачи применяются каскадные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые “обучены” находить лиц человека среди множества других объектов.

Пример: метод MTCNN может распознавать лицо даже с неполном перекрытии (например, платком или рукой).

Идентификация ключевых моментов

После идентификации лица устройство, такая как Vulkan Platinum, вычисляет положение основных точек: уголки глаз, верхушка носа, края губ и так далее. Как правило задействуется от 68 до 128 главных маркеров на лице.

Это необходимо для стабилизации картинки: если человек держит мобильник под наклоном, или наклонил головку, программа “выпрямляет” картинку до нормального состояния для дальнейшего анализа.

Построение биометрического модели

Далее нейронная сеть строит компактное математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой след внешности длиной от 128 до 512 флоатов.

Данный формат крайне затруднительно подделать: он не сохраняет само картинку пользователя, а лишь уникальные характеристики его облика, что делает его оптимальным для таких площадок, как Вулкан Казино Платинум.

Сопоставление и принятие решения

Когда пользователь хочет разлочить мобильник взглядом, система осуществляет все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает заданный уровень (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, разблокируется; если нет — доступ не предоставляется.

Приспособление к трансформациям облика

Занимательная характеристика актуальных системы — способность самообучения. Если ты часто открываете телефон с свежей укладкой или очками, алгоритм постепенно освежает основной модель вашего лица для повышения точности работы без ухудшения безопасности.

Безопасность биометрических данных.

Множество клиенты опасаются сохранять свои биометрические данные на смартфоне из-за вероятности утечки данных или взлома гаджета. Иные фирмы, например Вулкан Казино Платинум, предлагают методы для увеличения сохранности информации пользователей.

• Локальное сбережение: Большинство аппаратов хранит биометрические шаблоны лишь внутрь защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не выходят из гаджет и закрыты даже создателю.

• Шифрование: Все сведения хранятся только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Приложения внешних разработчиков не имеют непосредственного доступа к биометрическим данным; они могут лишь требовать подтверждение верификации идентичности через системный API.

Следует подчеркнуть значимую особенность: если кто-либо достанет физический доступ к вашему телефону (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество компании реализуют меры безопасности от неосознанного разблокирования — в частности, заставляют открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают виды определения лиц на изображениях?

На сегодняшний день можно выделить определить 3 главных метода к реализации этой функции:

Программируемое 2D определение

Применяется только фронтальная камера без экстра датчиков глубины. Этот метод используется обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность реализации; умеренная цена; оперативная функционирование при качественном свете.
Минусы: легко обмануть фотографией; неустойчивая деятельность ночью; низкая защищенность.

Аппаратное 3D сканирование

Задействует ИК камеру + проекционный модуль точек + датчики глубины (Face ID от Apple; аналогичные решения у Huawei Mate).
Достоинства: значительная надежность; нельзя исказить фото/видео; устойчивая работа в любых условиях освещения.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные подходы с дополнением ИИ

Применяют комбинацию программируемых методов + техническую обработку + постобработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие изделия, например Vulkan Platinum и Google Pixel Face Unlock последних поколений, комбинируют фронтальную камеру c инфракрасным датчиком движения Soli Radar для предотвращения от подделок жестами/масками/видеодисплеями посторонних устройств.

Образцы использования разных техник

• iPhone линейки X/11/12/13/14 применяют только техническое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition первый раз предложил аналог Face ID в ряду Android.
• Samsung Galaxy S10 модель/S20 поддерживают как программное обеспечение 2D определение по изображению фронтальной камерой, так и сенсор радужки глаза.
• Huawei Mate20 Pro задействует набор из ИК-освещения + Dot Projector + ToF-датчик

Трудности безопасности и ложные срабатывания

Несмотря на поразительный развитие технологий за прошедшие годы, совершенных систем пока не наблюдается:

1. Возможность обмана: Недорогие мобильники легко доступны высококачественной снимком пользователя или же роликом с дисплея иного гаджета.
2. Идентичные близнецы: Даже самые совершенные устройства могут спутать между монозиготными близнецами либо родичами с очень похожей внешностью.
3. Трансформации внешнего вида: Стремительное утрата веса/набор веса, пластические операции или повреждения иногда необходимы для обновления данных биометрии.
4. Условия фотографирования: Сильная засветка солнечным светом либо плотная темнота могут снизить верность определения признаков.

Здесь несколько рекомендаций для безопасному эксплуатации:

• Для важных операций всегда внедряйте двухфакторную аутентификацию;
• Не включайте опцию “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
• Регулярно апгрейдите ПО мобильного устройства для защиты от современных угроз;
• Включайте функцию “Требовать раскрытых глаз” везде, где она есть.

В каких местах ещё применяется технологии помимо смартфонов?

Хотя тема этой работы касается в частности мобильным устройствам, необходимо сказать о других сферах применения технологии:

• Контроль прохода в рабочих помещениях и жилых домах;
• Платёжные устройства финансовых учреждений (“Face Pay”);
• Цифровые удостоверения личности нового поколения;
• Системы видеомониторинга муниципальных служб;
• Механизация отслеживания явки учебных заведений/вузов;
• Аутентификация пользователей персональных компьютеров/ноутбуков.

Например: В городском метро уже тестируется система платежа проезда по фейсу (“Face Pay”) — хватит пройти через турникет без карты или телефона! Схожие проекты реализуются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Как изменяется технология сегодня?

Каждый годочек появляются новые мысли для повышения качества функционирования систем лицевого распознавания:

1. Увеличивается чёткость сенсорных устройств — чем больше элементов фиксируется фотоаппаратом/датчиками глубины, тем меньше вероятность ошибки;
2. Совершенствуются нейросети — современные архитектуры модели MobileNetV3 дают возможность быстро адаптироваться к новым чертам внешности обладателя напрямую на гаджете без отправки данных в облако.
3. Улучшаются способы антиспуфинга — теперь телефоны умеют распознавать настоящие движущиеся лица от фиксированных снимков/маскировок по незаметным движениям кожи.
4. Интеграция со смарт-гаджетами — смарт-часы могут автоматически заблокировать смартфон, если пользователь отошёл далеко.
5. Проявляются смешанные системы — к примеру комбинирующие аудио аутентификацию + облик + дактилоскопический след.

Вот, которые направления особенно востребованы в данный момент:

1) Миниатюризация компонентов

Изготовители намереваются минимизировать габариты выреза (“чёлки”) под сенсоры на экране за счёт интеграции маленьких ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на аппарате

Для улучшения личной безопасности всё более вычислений выполняется на месте без пересылки данных во сторонний облачный услугу.

3) Унификация стандартов

Google энергично продвигает стандарт BiometricPrompt API, чтобы подобные системы, вроде Вулкан Платинум, и все Android-аппы могли работать с любыми видами биометрии стандартизированно.

Что решить на сегодня?

Когда вам необходима наивысшая защита информации, выбирайте передовые устройства с вмонтированным ИК-излучателем или же ToF-датчиком глубины.

• iPhone всех существующих новейших моделей
• Huawei Mate/P Series ряда
• Mi Expert
• Vivo X серии
• Оппо Find Икс серий.

Если финансы скромен – лучше отдавать предпочтение обычным средствам защиты (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в Вулкан Платинум, использовать только как второстепенную опцию комфорта.

Каким способом улучшить удобство использования функции?

Есть несколько лайфхаков для пользователей, кто уже пользуется функцию распознавания лица:

1. Регулярно обновляйте свою фото-шаблон, если сильно трансформируется внешность.
2. Не забывайте очищать объектив передней камеры – пятна могут снизить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам активирует фотоаппарат когда вы берёте его в руки.
4. Во время регистрационного процесса пытайтесь удерживать лицо ровно впереди камеры не допуская значительного наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отворачиваетесь от дисплея.

Возможности эволюции технологии

В предстоящие времена можно предполагать возникновения полностью дистанционных способов идентификации человека сразу по нескольким биометрическим характеристикам параметрам одновременно: лицо + речь + шаги + манипуляции руками!

Также вероятно развитие новых методов охраны личной информации – скажем, изменяющееся модификация цифрового шаблона после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – единственная из очень интересных техник нашего эпохи! Она предоставляет общение со телефоном проще чем до этого, и такие программы, как Вулкан Казино Платинум, могут в разы улучшить ваш опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы понимаете, как работает эта система внутри, – сумеете более осмысленно подбирать свой следующий устройство!