Каким образом действует распознавание лицевых образов в смартфонах

Зачем мы выбираем разблокирование по фейсу

В прошлые времена определение лиц превратилось в одной из самых распространённых функций для деблокировки смартфонов. Всего пару годков назад основная масса использующих довольствовались пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но с появлением подобных технологий, например вулкан россия, нам вполне просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Что обуславливает данную функцию настолько популярной? Прежде всего, это комфортно: не нужно помнить замысловатые пароли или находить правильный палец в темноте. Кроме того, это оперативно: современные алгоритмы идентифицируют лицо практически за мгновение. В-третью очередь, это ощущение футуристичности — будто в кинофильмах про вулкан автомат шпионов.

Тем не менее за такой кажущейся легкостью таится целый универсум сложных техник и инженерных решений. Попробуем исследовать, как точно функционирует идентификация по лицу в актуальных гаджетах, какие бывают технологии, насколько они защищены и что нас ждёт впереди.

Краткая повествование эволюции техники

Распознавание лиц как технология присутствует уже более 50 лет. Первые эксперименты автоматизированного исследования облика были осуществлены еще в 1960-х годы в лабораториях США. Тогда вычислительные машины умели лишь обозначать контуры головы и определять дистанции между очами и ртом на ахроматических изображениях.

Начальные торговые платформы появились в девяностых годах, но они были неидеальны: действовали неспешно и нередко ошибались. Только с развитием искусственных сетей и таких систем, как вулкан россии, сильных мобильных чипов распознавание лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с надёжным трёхмерным распознаванием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и другие стали внедрять собственные решения.

Основные шаги работы механизма определения

Процесс распознавания лица можно условно разделить на несколько основных этапов:

1. Обнаружение лица — камера выявляет существование человеческого образа в кадре.
2. Определение признаков — система анализирует контуры облика: форму глаз, обонятельного органа, губ, расположение надбровных дуг.
3. Построение структуры — создаётся уникальный электронный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с стандартом — созданный шаблон сверяется со зафиксированной при внесении биометрической данными владельца.
5. Принятие определения — если сходство достаточно значительное, смартфон деблокируется.

Всякий из указанных шагов нуждается в особых алгоритмов и улучшений для скорой работы непосредственно на девайсе.

Железные составляющие: что прячется в их недрах

Типичная селфи камера.

Самый простой способ идентификации физиономии использует исключительно лицевую камеру смартфона смартфона. Такой подход осуществлён во многочисленных бюджетных версиях Android-девайсов.

Сильные стороны:

• Не нуждается в требует внешних сенсоров.
• Оперативно действует при качественном освещённости.

Недостатки:

• Несложно одурачить снимком или роликом.
• Плохо работает при плохом свете или нестандартных углах обзора.

Инфракрасная камера и пунктирный проектор

Более усовершенствованные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология является основой Face ID от Apple.

Каким способом это работает:

• Точечный устройство проекции показывает на облик использующего невидимую решетку из тысяч инфракрасных меток (например, Face ID задействует около 30 000 пятен).
• Инфракрасная устройство регистрирует искривление данной сетки по плоскости лица.
• Получается трехмерная карта глубинности, которая почти неосуществима для подделки стандартной фотографией или маской.

Выигрыши

• Надёжная деятельность даже в полной тьме.
• Сильная сопротивляемость к фальсификациям.
• Точность определения более 99%.

Дополнительные сенсоры

В отдельных устройствах применяются также дополнительные сенсоры: ToF (Time-of-Flight), которые фиксируют период распространения луча до предмета и обратно; Трехцветные-датчики дальности; специальные лазерные лидары для формирования более точной 3D-модели лица.

Эти технологии встречаются в основном во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: синтетический разум на действии

Современные системы опознания лиц немыслимы в отсутствие использования ИИ и machine learning. Именно вследствие таким разработкам, как вулкан россии, устройство может распознавать юзера даже при трансформациях внешности: новая причёска, щетина, оптика или косметика не становятся препятствием для деблокировки.

Распознавание физиономии

В первом шаге алгоритм должна мгновенно распознать образ лица внутри всего изображения с камеры. Для этой задачи используются каскадные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые “обучены” распознавать лица людей среди множества других объектов.

Пример: алгоритм MTCNN может распознавать физиономию даже в случае частичном закрытии (например, платком или рукой).

Идентификация ключевых точек

После обнаружения лица устройство, такая как вулкан россии, вычисляет расположение основных точек: кончики глаз, конец носа, контуры губ и так далее. Обычно применяется от 68 до 128 ключевых маркеров на лицевой поверхности.

Это действие необходимо для нормализации изображения: если юзер держит телефон под наклоненным, или повернул голову, программа корректирует изображение до обычного угла для последующего изучения.

Создание биометрического идентификатора образца

Далее искусственная сеть строит компактное числовое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 флоатов.

Этот шаблон весьма трудно сфальсифицировать: он не хранит непосредственно изображение пользователя, а лишь особенные черты его вида, что делает его оптимальным для таких площадок, как vulkan russia.

Сопоставление и принятие выбора

Когда человек желает открыть мобильник взором, программа воспроизводит все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый границу (обычно превышает 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ не предоставляется.

Приспособление к метаморфозам внешнего вида

Занимательная характеристика актуальных систем — возможность самообучения. Если вы часто доступаете к телефон с свежей прической или очками, алгоритм постепенно модернизирует основной модель вашего внешности для повышения точности работы без снижения уровня безопасности.

Защита биометрических данных информации.

Многие клиенты боятся сохранять свои био-идентификационные данные на смартфоне из-за вероятности потери данных или взлома устройства. Некоторые организации, такие как vulkan russia, предлагают методы для повышения сохранности сведений пользователей.

• Локальное хранение: Большинство устройств записывает био-идентификационные шаблоны исключительно внутрь защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не покидают устройство и не доступны даже производителю.

• Шифрование: Все информация сберегаются только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Приложения внешних разработчиков не обладают непосредственного доступа к биометрическим; они могут лишь требовать факт подтверждения идентичности через системный API.

Необходимо отметить существенную деталь: если кто-то сможет получить физический доступ к вашему телефону (например, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество производители реализуют систему защиты от автоматического разблокирования — например, просят разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются виды определения лиц на изображениях?

Сегодня можно выделить определить 3 основных подхода к осуществлению этой операции:

Софтверное 2D распознавание

Применяется только фронтальная видеокамера без дополнительных детекторов глубины. Этот способ используется обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: простота реализации; низкая затраты; оперативная деятельность при достаточном освещении.
Минусы: несложно одурачить снимком; неустойчивая работа ночью; слабая защищенность.

Оборудование для объёмное сканирование

Задействует ИК видеокамеру + проектор точек + сенсоры глубины (Face ID от Apple; подобные технологии у Huawei Mate).
Достоинства: значительная надёжность; не получится обмануть фото/видео; устойчивая функционирование при любом освещении.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Смешанные методы с интеграцией ИИ

Применяют комбинацию программируемых методов + аппаратно-техническую обработку + постобработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, как вулкан россии и Google Pixel Face Unlock последних поколений, комбинируют фронталку c инфракрасным датчиком мобильности Soli Radar для предотвращения от фальсификаций жестами/масками/видеоэкранами посторонних устройств.

Образцы применения различных методов

• iPhone линейки X/11/12/13/14 задействуют только аппаратное трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition впервые предложил аналог Face ID в ряду Android.
• Samsung Galaxy S10 версия/S20 поддерживают как программное обеспечение плоское распознавание по снимку фронталкой, так и сенсор ириса глаза.
• Huawei Mate20 Pro использует набор из ИК-инфракрасного света + Dot Projector + ToF-датчик

Трудности защиты и ложные сигналы

Несмотря на замечательный развитие технологий за недавние годы, идеальных системы пока не существует:

1. Шанс мошенничества: Доступные мобильники легко открываются качественной изображением пользователя или видеозаписью с дисплея иного гаджета.
2. Идентичные близнецы: Даже самые совершенные системы могут спутать между однояйцевыми близнецами либо семьями с очень аналогичной внешностью.
3. Изменения внешности: Стремительное похудение/увеличение массы тела, косметические процедуры или повреждения порой необходимы для повторной регистрации биометрических данных.
4. Условия съёмки: Яркая подсветка солнцем либо глубокая темнота могут снизить точность распознавания признаков.

Вот пара рекомендаций по надёжному эксплуатации:

• Для значимых операций всегда применяйте двухфакторную аутентификацию;
• Не активируйте опцию “Разблокировка по лицу” на недорогих моделях без ИК-сенсоров;
• Постоянно апгрейдите ПО смартфона для обеспечения безопасности от актуальных атак;
• Включайте настройку “Требовать открытых глаз” там, где она имеется.

В каких областях ещё применяется технологии кроме мобильных телефонов?

Несмотря на то, что тема этой статьи касается в частности мобильным устройствам, следует отметить других сферах применения технологии:

• Управление прохода в офисах и жилых домах;
• Платёжные аппараты банков (“Face Pay”);
• Электронные паспорта современного поколения;
• Комплексы видеомониторинга городских сервисов;
• Автоматизирование отслеживания явки школ/вузов;
• Вход участников компьютеров/ноутбуков.

Например: В городском метро уже проверяется система оплаты проезда по фейсу (“Face Pay”) — хватит пройти через турникет без пластика или телефона! Похожие инициативы развиваются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом меняется технология в наше время?

Каждый годик возникают свежие концепции для усовершенствования уровня работы систем распознавания лиц:

1. Увеличивается чёткость датчиков — чем больше элементов фиксируется видеокамерой/глубинными сенсорами, тем меньше шанс неточности;
2. Развиваются нейросети — передовые архитектуры типа MobileNetV3 обеспечивают возможность скоростно обучаться свежим характеристикам вида владельца непосредственно на девайсе без отправки данных в облако.
3. Совершенствуются технологии антиспуфинга — теперь смартфоны могут различать настоящие живые лица от неподвижных фото/маскировок по незаметным движениям кожи.
4. Взаимодействие со интеллектуальными приборами — умные часы могут авто блокировать смартфон, если обладатель удалился на значительное расстояние.
5. Возникают комбинированные устройства — в частности совмещающие голосовую опознание + облик + пальцевой отпечаток.

Итак, какие направления в особенности популярны в данный момент:

1) Уменьшение элементов

Изготовители стараются минимизировать габариты выреза (“чёлки”) для датчики на дисплее за счёт встраивания компактных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Переработка прямо на девайсе

Для повышения конфиденциальности всё более вычислений выполняется локально без отправки данных во сторонний облачный услугу.

3) Упорядочивание норм

Google активно продвигает стандарт BiometricPrompt API, с целью чтобы такие площадки, вроде вулкан россия, и все Android-программы могли работать с всеми формами биометрии унифицированно.

Какое выбрать сегодня?

Если вам всем необходима наивысшая защита информации, выбирайте передовые аппараты со встроенным ИК-излучателем или ToF-датчиком глубины.

• iPhone каждого последних версий
• Huawei Partner/Series P серии
• Mix Expert
• Vivo X модели
• Oppo Обнаружить Икс серии.

Если финансы невелик – лучше предпочесть классическим способам защиты (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в вулкан россия, использовать только как дополнительную возможность комфорта.

Каким способом улучшить удобство работы функции?

Есть несколько советов для людей, кто уже использует разблокировку по лицу:

1. Часто меняйте свою фото-шаблон, если значительно трансформируется внешний вид.
2. Не упускайте из виду протирать объектив передней камеры – разводы могут понизить четкость!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам запускает камеру когда вы поднимаете его.
4. При регистрации постарайтесь удерживать лицевую часть прямо напротив камеры без значительного наклона головы.
5. Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвернулись от экрана.

Перспективы эволюции технологии

В ближайшие годы можно предполагать появления полностью бесконтактных способов опознания человека сразу по нескольким биометрическим параметрам одновременно: облик + звучание + шаги + движения рук!

Также предполагается появление свежих способов защиты личной информации – например, переменное модификация диджитал образца после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень захватывающих технологий нашего времени! Она предоставляет интеракцию со смартфоном удобнее чем раньше, и такие программы, как vulkan russia, могут значительно улучшить ваш юзерский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы понимаете, как работает эта методика в деталях, – будете в состоянии осознаннее выбирать свой очередной устройство!