Каким образом работает идентификация лиц в мобильных устройствах

Почему мы выбираем разблокировку по лицу

В недавние времена определение лиц превратилось в одной из наиболее востребованных опций для деблокировки смартфонов. Лишь пару годов назад основная часть юзеров довольствовались пин-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением подобных технологий, например вулкан россия, нам достаточно лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Что превращает эту конкретную возможность очень нужной? Во-первых, это практично: не нужно удерживать в памяти трудные пароли или искать правильный палец в темноте. Во-вторых, это быстро: современные алгоритмы распознают лицо практически за доли секунды. В-третьем пункте, это ощущение футуристичности — словно в кинофильмах про vulkan russia шпионов.

Однако за этой видимой несложностью прячется полный мир трудных методов и инженерных концепций. Позвольте нам понять, как конкретно действует идентификация по лицу в современных мобильных телефонах, какие применяются технологии, насколько они защищены и что нас ждёт впереди.

Краткая хроника эволюции инноваций

Распознавание лиц как методика существует уже более 50 лет. Начальные пробы автоматизированного изучения лиц были осуществлены еще в 1960-х годы в исследовательских центрах США. Тогда компьютеры способны были лишь определять очертания головы и определять дистанции между глазами и ртом на ахроматических фотографиях.

Первые коммерческие системы возникли в 1990-х годах, но они были несовершенны: действовали неспешно и нередко ошибались. Только с эволюцией синтетических сетей и таких площадок, как вулкан россии, высокопроизводительных мобильных микросхем идентификация лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным идентификацией лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали внедрять свои решения.

Ключевые шаги функционирования системы идентификации

Процесс распознавания лица можно примерно разделить на несколько ключевых этапов:

Идентификация лица — устройство выявляет существование человеческого образа в изображении.
Определение особенностей — система изучает особенности физиономии: форму глаз, носа, уст, положение надбровных дуг.
Построение структуры — создаётся неповторимый виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение с образцом — сформированный модель сопоставляется со зафиксированной при внесении биометрической сведениями владельца.
Принятие решения — если совпадение достаточно высокое, смартфон разблокируется.

Каждый из этих стадий нуждается в индивидуальных процедур и улучшений для скорой работы прямо на устройстве.

Аппаратные элементы: что находится внутри них

Стандартная селфи камера.

Наиболее легкий способ идентификации физиономии применяет лишь лицевую камеру смартфона мобильного устройства. Данный способ осуществлён во различных доступных моделях Android-девайсов.

Достоинства:

Необходимо нуждается в дополнительные сенсоров.
Оперативно действует при хорошем освещении.

Слабые стороны:

Несложно обмануть фотографией или видео.
Неудачно работает при плохом освещённости или нестандартных ракурсах.

Инфракрасная фотокамера и точечный проектор

Более продвинутые системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология является основой Face ID от Apple.

Каким способом это работает:

Точечный проекционный прибор проецирует на физиономию юзера невидимую решетку из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 меток).
Инфракрасная устройство регистрирует деформацию этой решетки по плоскости лица.
Создаётся трехмерная карта глубины глубинности, которая почти неподвластна для подделки типичной фотографией или маскировкой.

Достоинства

Надёжная функционирование даже в полной тьме.
Большая устойчивость к фальсификациям.
Точность определения выше 99%.

Добавочные сенсорные устройства

В некоторых аппаратах используются также экстра сенсоры: ToF (Time-of-Flight), которые измеряют время движения луча до объекта и обратно; Трехцветные-датчики дальности; специальные оптические лидары для формирования более точной 3D-модели физиономии.

Эти инновации встречаются чаще всего во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искуственный ум на действии

Современные механизмы распознавания лиц немыслимы без использования ИИ и машинного обучения. Именно из-за таким разработкам, как вулкан россии, гаджет может распознавать владельца даже при трансформациях внешности: новая причёска, щетина, оптика или грим не становятся барьером для открытия.

Обнаружение физиономии

При первом стадии система должна мгновенно распознать лицо среди полного кадра с камеры. Для данной цели задействуются многоуровневые классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые натренированы находить лица людей среди множества других объектов.

Пример: метод MTCNN в состоянии находить облик даже в случае частичном перекрытии (например, шалью или ладонью).

Определение важных аспектов

После идентификации лица механизм, такая как вулкан россии, вычисляет местоположение главных точек: уголки глаз, верхушка носа, контуры губ и так далее. Обычно используется от 68 до 128 ключевых меток на лице.

Это требуется для стабилизации визуала: если юзер держит телефон под наклоненным, или склонил голову, программа корректирует картинку до стандартного положения для последующего изучения.

Создание биометрического шаблона

Далее искусственная сеть строит уплотненное математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 чисел с плавающей запятой.

Этот шаблон крайне затруднительно подделать: он не сохраняет непосредственно картинку пользователя, а лишь уникальные черты его вида, что делает его оптимальным для таких платформ, как vulkan russia.

Сопоставление и принятие выбора

Если человек желает открыть телефон взором, система осуществляет все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый границу (обычно больше 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ блокируется.

Привыкание к метаморфозам внешности

Интересная характеристика современных системы — возможность самостоятельного обучения. Если вы постоянно разблокируете телефон с свежей укладкой или очками, система постепенно модернизирует базовый модель вашего облика для повышения точности работы без ухудшения безопасности.

Защита биометрических данных.

Большинство клиенты боятся хранить свои биометрические данные на смартфоне из-за риска потери данных или взлома гаджета. Некоторые компании, вроде vulkan russia, предлагают методы для повышения сохранности информации клиентов.

Локальное хранение: Преимущественно девайсов сохраняет биометрические образцы исключительно внутрь безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они никогда не покидают устройство и не доступны в том числе изготовителю.
Шифрование: Все данные сберегаются только в кодированном виде с использованием современных криптографических алгоритмов AES256.
Изоляция программ: Программы сторонних девелоперов не имеют прямого доступа к биометрическим данным; они могут лишь требовать подтверждение верификации идентичности через системный API.

Стоит упомянуть важную деталь: в случае, если кто-либо получит физический доступ к вашему телефону (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие изготовители реализуют защиту от неосознанного разблокирования — например, требуют открыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются виды идентификации лиц?

Сегодня можно выделить различить три основных метода к выполнению этой функции:

Программное двухмерное идентификация

Применяется только передняя видеокамера без дополнительных детекторов дистанции. Такой подход наблюдается чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота осуществления; умеренная затраты; скоростная работа при достаточном освещении.
Минусы: легко обмануть фотографией; нестабильная деятельность ночью; слабая охрана.

Аппаратное 3D сканирование

Применяет ИК камеру + проектор точек + сенсоры дистанции (Face ID от Apple; аналогичные технологии у Huawei Mate).
Достоинства: высокая надежность; нельзя подделать изображение/видеозапись; стабильная функционирование в любых условиях освещения.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Гибридные подходы с дополнением ИИ

Используют комбинацию софтверных методов + аппаратно-техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные товары, например вулкан россии и Google Pixel Face Unlock современных версий, сочетают фронталку c инфракрасным датчиком мобильности Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями посторонних устройств.

Иллюстрации применения различных способов

iPhone модели X/11/12/13/14 задействуют только аппаратное трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition впервые предложил эквивалент Face ID в числе Android.
Samsung Galaxy S10 версия/S20 имеют как программное плоское идентификацию по изображению фронталкой, так и датчик радужки глаза.
Huawei Mate20 Pro задействует комплекс из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Вопросы охраны и ложные срабатывания

Несмотря на поразительный успехи техники за недавние годы, безупречных механизмов пока не имеется:

Шанс мошенничества: Бюджетные смартфоны легко “разблокируются” четкой снимком пользователя или же роликом с дисплея иного гаджета.
Идентичные близнецы: Даже самые совершенные механизмы могут перепутать между монозиготными близнецами либо родственниками с очень схожей внешностью.
Изменения облика: Резкое снижение веса/увеличение массы тела, хирургические вмешательства либо повреждения порой необходимы для повторной регистрации биометрии.
Условия записи: Яркая засветка солнцем или интенсивная тень могут понизить верность определения признаков.

Вот некоторые советов по защищённому эксплуатации:

Для значимых операций всегда используйте двухфакторную аутентификацию;
Не активируйте опцию “Разблокировка по лицу” на бюджетных моделях без ИК-сенсоров;
Систематически обновляйте прошивку программное обеспечение мобильного устройства для обеспечения безопасности от современных угроз;
Включайте функцию “Требовать распахнутых глаз” в тех местах, где она доступна.

В каких областях также используется технология помимо мобильных телефонов?

Несмотря на то, что предмет нашей публикации сосредоточена на именно мобильным устройствам, необходимо сказать о других сферах применения технологии:

Мониторинг входа в рабочих помещениях и жилых домах;
Платёжные аппараты банков (“Face Pay”);
Электронные идентификационные документы нового образца;
Системы видеоконтроля городских сервисов;
Механизация отслеживания посещаемости образовательных учреждений/вузов;
Аутентификация юзеров компьютеров/ноутбуков.

Например: В городском метро уже тестируется система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через турникет без пластика или телефона! Похожие инициативы реализуются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом трансформируется технология сегодня?

Любой годочек появляются современные идеи для усовершенствования стандарта функционирования систем распознавания лиц:

Увеличивается чёткость сенсоров — чем больше элементов фиксируется видеокамерой/датчиками глубины, тем меньше шанс погрешности;
Совершенствуются искусственные интеллекты — современные структуры типа MobileNetV3 дают возможность быстро осваивать свежим особенностям облика владельца прямо на устройстве без пересылки информации в облачное хранилище.
Развиваются технологии антиспуфинга — теперь мобильные устройства умеют отличать подлинные живые лица от неподвижных фотографий/масок по незаметным движениям кожи.
Взаимодействие со смарт-гаджетами — интеллектуальные часы могут авто блокировать мобильный телефон, если пользователь удалился на значительное расстояние.
Возникают смешанные устройства — к примеру совмещающие аудио аутентификацию + физиономию + пальцевой отпечаток.

Итак, какие тренды очень актуальны на сегодняшний день:

1) Сокращение компонентов

Изготовители пытаются минимизировать размер прорези (“чёлки”) под сенсоры на дисплее за счёт внедрения миниатюрных ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработка прямо на аппарате

Для увеличения конфиденциальности всё более вычислений осуществляется внутри устройства без отправки данных во внешний облачный сервис.

3) Унификация регламентов

Гугл энергично продвигает норму BiometricPrompt API, с целью чтобы аналогичные платформы, например как вулкан россия, и все Android-приложения были совместимы с всеми формами биометрии унифицированно.

Какое решить на сегодня?

Когда вам всем необходима максимальная сохранность информации, остановите выбор на топовые устройства с вмонтированным ИК-проектором или ToF-сенсором глубины.

iPhone всех актуальных моделей
Huawei Partner/Series P ряда
Mix Expert
Vivo X линейки
Oppo Обнаружить Х серии.

Если финансы ограничен – лучше предпочесть классическим методам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в вулкан россия, использовать только как дополнительную возможность комфорта.

Как повысить удобство функционирования возможности?

Есть некоторые хитростей для пользователей, кто уже пользуется разблокировку через лицо:

Часто обновляйте свою фотографию-шаблон, если кардинально меняется внешний вид.
Не упускайте из виду очищать объектив передней камеры – загрязнения могут снизить точность!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам включает камеру когда вы берёте его в руки.
При регистрационного процесса пытайтесь удерживать лицо ровно перед камеры без резкого наклона головы.
Используйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отвернулись от дисплея.

Будущее эволюции инноваций

В предстоящие годы можно предвкушать появления полностью бесконтактных способов опознания индивидуума сразу по нескольким биометрическим параметрам одновременно: облик + звучание + походка + жесты рук!

Также возможно появление современных способов охраны приватности – к примеру, динамическое корректировка электронного образца после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень интересных технологий нашего эпохи! Она предоставляет интеракцию со мобильным устройством проще чем до этого, и такие программы, как vulkan russia, могут существенно оптимизировать ваш опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы знаете, как функционирует эта методика в деталях, – сумеете более осмысленно выбирать свой очередной девайс!