Каким способом работает распознавание лиц в телефонах

Почему мы предпочитаем разблокировку по лицу

В недавние времена определение лиц является одной из самых распространённых опций для открытия мобильных телефонов. Лишь некоторые годков тому назад основная масса юзеров удовлетворялись пин-кодами, паролями или сканерами отпечатков пальцев. Но с появлением подобных технологий, например cabura, нам вполне лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Какой аспект делает данную особенность настолько популярной? Для начала, это практично: не нужно запоминать сложные пароли или отыскивать верный палец в тьме. Также, это мгновенно: современные системы идентифицируют лицо буквально за доли секунды. В-третьем пункте, это впечатление футуризма — как будто в кинофильмах про cabura агентов.

Однако за данной на первый взгляд простотой скрывается полный вселенная трудных техник и инженерных концепций. Попробуем исследовать, как точно функционирует идентификация по лицу в современных мобильных телефонах, какие применяются методы, насколько они защищены и что нас ожидает в будущем.

Краткая хроника эволюции техники

Идентификация лиц как техника существует уже более 50 лет. Первые попытки автоматизированного анализа лица были осуществлены еще в 1960-х годах в лабораториях США. Тогда вычислительные машины умели лишь определять очертания головы и определять дистанции между очами и устами на черно-белых снимках.

Начальные бизнес платформы возникли в девяностых годах, но они были далеки от совершенства: функционировали медленно и часто давали сбои. Только с прогрессом синтетических сетей и таких систем, как кабура, сильных мобильных чипов идентификация лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным распознаванием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие стали интегрировать свои решения.

Основные этапы работы механизма идентификации

Процесс идентификации лица можно ориентировочно сегментировать на несколько ключевых этапов:

1. Идентификация лица — камера выявляет присутствие гуманного лица в кадре.
2. Извлечение характеристик — алгоритм анализирует контуры физиономии: очертания глаз, носа, губ, положение бровей.
3. Построение модели — создаётся особенный электронный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с эталоном — созданный образец сопоставляется со сохранённой при регистрации биометрической сведениями владельца.
5. Принятие выбора — если сходство достаточно высокое, смартфон открывается.

Каждый из данных шагов нуждается в специальных алгоритмов и улучшений для быстрой работы непосредственно на девайсе.

Технические составляющие: что находится внутри

Стандартная передняя камера.

Простейший несложный вариант идентификации облика использует лишь переднюю камеру смартфона смартфона. Данный способ внедрён во многочисленных недорогих вариантах Android-устройств.

Достоинства:

• Не требует дополнительных датчиков.
• Быстро функционирует при качественном свете.

Отрицательные стороны:

• Несложно одурачить фотографией или видео.
• Неудачно работает при слабом свете или нестандартных точках зрения.

Инфракрасная камера и пунктирный проекционный аппарат

Более усовершенствованные системы, такие как кабура, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология составляет базу Face ID от Apple.

Каким способом это работает:

• Точечный проектор отображает на облик использующего невидимую сетку из тысяч инфракрасных меток (например, Face ID задействует около 30 000 точек).
• ИК устройство фиксирует деформацию этой решетки по плоскости лица.
• Формируется трехмерная глубинная карта глубинности, что почти что невозможна для фальсификации стандартной снимком или маской.

Достоинства

• Надёжная деятельность даже в полной тьме.
• Высокая сопротивляемость к фальсификациям.
• Точность идентификации более 99%.

Дополнительные сенсорные устройства

В отдельных устройствах задействуются также экстра датчики: ToF (Time-of-Flight), которые определяют период движения луча до цели и обратно; Цветные-датчики глубины; специальные оптические измерители расстояния для построения более аккуратной 3D-модели лица.

Эти разработки применяются наиболее часто во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: синтетический разум в работе

Нынешние механизмы распознавания лиц немыслимы без использования искусственного интеллекта и machine learning. Именно вследствие таким разработкам, как кабура, аппарат может идентифицировать юзера даже при трансформациях внешности: новая причёска, борода, очки или косметика не становятся помехой для открытия.

Детектирование лиц

При начальном шаге алгоритм необходимо быстро обнаружить ликовое изображение внутри всего изображения с камеры. Для этого используются последовательные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые натренированы распознавать человеческие лица среди множества других объектов.

Пример: процесс MTCNN в состоянии находить лицо даже при частичном закрытии (например, платком или ладонью).

Идентификация основных моментов

После распознавания лица устройство, такая как кабура, устанавливает расположение главных точек: кончики глаз, конец носа, границы губ и так далее. Как правило задействуется от 68 до 128 основных маркеров на лице.

Это необходимо для выравнивания картинки: если пользователь удерживает телефон под углом, или наклонил головку, программа “выпрямляет” изображение до обычного угла для последующего изучения.

Построение биометрического идентификатора образца

Далее нейросеть строит сжатое математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой след внешности длиной от 128 до 512 флоатов.

Этот образец очень сложно сфальсифицировать: он не удерживает непосредственно фото пользователя, а лишь исключительные особенности его облика, что делает его оптимальным для таких площадок, как кабура казино.

Сопоставление и осуществление заключения

В случае, когда человек желает разблокировать телефон взглядом, механизм воспроизводит все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый уровень (обычно больше 99%), телефон, как и платформа кабура казино, разблокируется; если нет — доступ не предоставляется.

Привыкание к изменениям внешнего вида

Интересная характеристика современных системы — возможность самообучения. Если ты постоянно разблокируете мобильное устройство с обновленной прической или очками, алгоритм постепенно освежает эталонный модель вашего лица для повышения точности работы без снижения уровня безопасности.

Безопасность биометрии информации.

Многие юзеры боятся хранить свои биометрические идентификационные данные на мобильном устройстве из-за риска потери данных или взлома устройства. Некоторые компании, например кабура казино, предоставляют методы для увеличения защиты информации пользователей.

• Локальное сохранение: Большинство девайсов записывает био-идентификационные шаблоны лишь в пределах безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не оставляют аппарат и недоступны даже изготовителю.

• Шифрование: Все информация хранятся только в шифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Приложения сторонних разработчиков не имеют прямого возможности доступа к биометрическим; они могут лишь требовать подтверждение подтверждения личности через системный API.

Следует подчеркнуть значимую подробность: в случае, если какой-то человек получит физический доступ к вашему телефону (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество компании реализуют систему защиты от неосознанного разблокирования — к примеру, заставляют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют виды распознавания лиц на изображениях?

Сегодня можно выделить 3 ключевых способа к осуществлению этой задачи:

Софтверное двухмерное определение

Используется только лицевая камера без вспомогательных сенсоров дистанции. Такой метод наблюдается наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность реализации; минимальная цена; оперативная функционирование при достаточном освещении.
Минусы: несложно ввести в заблуждение снимком; ненадежная функционирование ночью; низкая охрана.

Оборудование для 3D сканирование

Применяет ИК камеру + проектор точек + датчики глубины (Face ID от Apple; подобные решения у Huawei Mate).
Достоинства: значительная достоверность; не получится исказить фото/видео; устойчивая деятельность при любом освещении.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Гибридные методы с ИИ-дополнением

Используют комбинацию программных методов + аппаратную обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, как кабура и Google Pixel Face Unlock последних поколений, комбинируют фронтальную камеру c ИК сенсором движения Soli Radar для защиты от подделок жестами/масками/видеодисплеями посторонних устройств.

Примеры эксплуатации разнообразных способов

• iPhone серии X/11/12/13/14 задействуют только техническое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition в первый раз внедрил подобие Face ID в числе Android.
• Samsung Galaxy S10/S20 поддерживают как программное обеспечение двухмерное определение по изображению фронтальной камерой, так и датчик ириса глаза.
• Huawei Mate20 Pro использует комплекс из ИК-подсветки + Dot Projector + ToF-сенсор

Трудности охраны и ложные сигналы

Несмотря на поразительный успехи технологий за недавние лет, идеальных системы пока не существует:

1. Вероятность подвоха: Недорогие телефоны просто доступны высококачественной фотографией хозяина или видео с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые идеальные устройства могут ошибиться между монозиготными близнецами либо родственниками с очень похожей внешностью.
3. Изменения внешности: Резкое похудение/увеличение массы тела, хирургические вмешательства либо повреждения в некоторых случаях необходимы для перерегистрации биометрических данных.
4. Условия записи: Сильная освещённость солнечным светом или плотная темнота могут уменьшить точность распознавания признаков.

Здесь некоторые советов для безопасному эксплуатации:

• Для важных операций всегда внедряйте двухэтапную аутентификацию;
• Не запускайте функцию “Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
• Регулярно апгрейдите прошивку телефона для предотвращения угроз от современных угроз;
• Включайте настройку “Требовать распахнутых глаз” там, где она имеется.

Где дополнительно находится применение технологии помимо смартфонов?

Хотя тема нашей публикации сосредоточена на в частности смартфонам и планшетам, необходимо сказать о альтернативных областях использования технологии:

• Контроль входа в офисах и многоквартирных зданиях;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Электронные идентификационные документы нового образца;
• Установки видеоконтроля городских служб;
• Механизация регистрации посещаемости школ/вузов;
• Авторизация пользователей компьютеров/ноутбуков.

Например: В столичном метро уже проверяется система платежа проезда по фейсу (“Face Pay”) — нужно лишь пройти через барьер без пластика или мобильника! Схожие проекты развиваются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как меняется техпроцесс сегодня?

Любой годочек проявляются свежие мысли для улучшения уровня работы систем лицевого распознавания:

1. Увеличивается разрешение сенсорных устройств — чем больше деталей фиксируется камерой/глубинными сенсорами, тем меньше вероятность ошибки;
2. Улучшаются нейронные сети — современные конструкции вида MobileNetV3 дают возможность скоростно обучаться дополнительным чертам внешности пользователя непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Совершенствуются технологии антиспуфинга — теперь мобильные устройства способны различать подлинные движущиеся лица от фиксированных фото/маскировок по незаметным микродвижениям.
4. Взаимодействие со умными устройствами — интеллектуальные часы могут автоматически закрыть доступ к телефон, если владелец ушёл далеко.
5. Появляются гибридные устройства — в частности комбинирующие аудио опознание + облик + пальцевой отпечаток.

Итак, какие тенденции очень актуальны сейчас:

1) Миниатюризация элементов

Компании пытаются минимизировать габариты отверстия (“чёлки”) для датчики на дисплее за счёт интеграции миниатюрных ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработка прямо на устройстве

Для улучшения конфиденциальности всё более расчётов выполняется локально без пересылки данных во дополнительный облачный услугу.

3) Унификация регламентов

Google энергично продвигает эталон BiometricPrompt API, с целью чтобы подобные площадки, как cabura, и каждые Android-программы были совместимы с всеми формами биометрии унифицированно.

Какое выбрать сегодня?

В случае если тебе важна максимальная сохранность информации, подбирайте флагманские модели со встроенным ИК-проектором либо ToF-сенсором глубины.

• iPhone всех актуальных поколений
• Huawei Partner/P Series ряда
• Mi Pro
• Vivo X линейки
• Оппо Обнаружить Х серий.

Если средства скромен – лучше отдавать предпочтение традиционным способам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в cabura, использовать только как второстепенную возможность комфорта.

Каким способом увеличить комфорт работы опции?

Есть некоторые советов для людей, кто уже применяет разблокировку по лицу:

1. Регулярно обновляйте свою фотографию-шаблон, если сильно меняется облик.
2. Не пренебрегайте очищать линзу фронтальной камеры – загрязнения могут снизить четкость!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам запускает фотоаппарат если вы берёте его в руки.
4. В процессе регистрации постарайтесь сохранять лицевую часть прямо напротив видеоустройства не допуская значительного наклона головы.
5. Используйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отвернулись от дисплея.

Перспективы прогресса технологии

В скоро наступающие годы можно ожидать появления полностью безконтактных способов распознавания человека сразу по нескольким биометрическим параметрам одновременно: физиономия + голос + шаги + манипуляции руками!

Также возможно развитие новых способов охраны конфиденциальности – к примеру, переменное корректировка диджитал образца после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – единственная из очень захватывающих техник нашего эпохи! Она делает интеракцию со телефоном проще чем раньше, и такие аппы, как кабура казино, могут в разы улучшить ваш опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы понимаете, как устроена эта технология изнутри, – сумеете осознаннее подбирать свой будущий устройство!