Как работает идентификация лиц в телефонах

Почему мы предпочитаем разблокировку по лицу

В недавние времена идентификация лиц превратилось в одной из самых распространённых функций для открытия смартфонов. Лишь некоторые годков тому назад большинство использующих удовлетворялись PIN-кодами, паролями или датчиками отпечатков пальцев. Но при появлением подобных технологий, например вулкан россия, нам вполне просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какая вещь делает эту конкретную функцию такой востребованной? Во-первых, это комфортно: не нужно запоминать трудные пароли или находить нужный палец в тьме. Кроме того, это оперативно: современные системы узнают лицо буквально за доли секунды. В-третьем пункте, это чувство футуризма — словно в кинолентах про вулкан автомат агентов.

Тем не менее за такой кажущейся простотой прячется целый вселенная комплексных технологий и инженерных концепций. Позвольте нам понять, как точно действует идентификация по лицу в новейших гаджетах, какие бывают способы, насколько они защищены и что нас ожидает в будущем.

Короткая хроника прогресса инноваций

Идентификация лиц как техника существует уже более 50 годов. Начальные попытки автоматического исследования лиц были предприняты еще в 1960-х годах в научных учреждениях США. Тогда компьютеры могли лишь выделять контуры лица и измерять промежутки между очами и ртом на черно-белых изображениях.

Изначальные коммерческие платформы появились в 1990-х годах, но они были несовершенны: действовали неспешно и часто давали сбои. Только с прогрессом искусственных сетей и таких площадок, как вулкан россии, высокопроизводительных мобильных чипов идентификация лиц стало по-настоящему массовым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным сканированием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали интегрировать собственные решения.

Ключевые стадии функционирования механизма распознавания

Процесс определения лица можно условно разделить на несколько основных этапов:

1. Идентификация лица — устройство определяет присутствие гуманного лица в снимке.
2. Определение особенностей — система анализирует особенности лица: очертания зрительных органов, обонятельного органа, уст, позицию надбровных дуг.
3. Построение структуры — создаётся уникальный цифровой отпечаток (faceprint) на основе определённых признаков.
4. Сравнение со образцом — сформированный образец сверяется со сохранённой при регистрации биометрической информацией владельца.
5. Принятие выбора — если соответствие достаточно значительное, смартфон деблокируется.

Каждый из указанных шагов запрашивает особых методов и улучшений для оперативной работы прямо на устройстве.

Аппаратные элементы: что скрыто в их недрах

Типичная селфи камера.

Самый простой метод определения облика использует только лицевую камеру смартфона. Такой метод реализован во многих доступных вариантах Android-устройств.

Сильные стороны:

• Не нуждается в нуждается в внешних сенсоров.
• Быстро действует при хорошем освещении.

Слабые стороны:

• Несложно ввести в заблуждение снимком или роликом.
• Неправильно действует при низком освещённости или необычных точках зрения.

Инфракрасная фотокамера и пунктирный проекционный аппарат

Более продвинутые системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология составляет базу Face ID от Apple.

Каким образом это действует:

• Точечный проектор показывает на лицо пользователя невидимую структуру из тысяч инфракрасных точек (например, Face ID использует около 30 000 точек).
• Инфракрасная устройство записывает деформацию этой сетки по поверхности физиономии.
• Получается трёхмерная глубинная карта глубинности, которая почти что неподвластна для имитации типичной фото или маской.

Плюсы

• Надёжная функционирование даже в полной неосвещённости.
• Сильная устойчивость к фальсификациям.
• Точность идентификации выше 99%.

Добавочные сенсоры

В отдельных устройствах используются также дополнительные датчики: ToF (Time-of-Flight), которые определяют время распространения луча до объекта и обратно; Трехцветные-датчики глубины; специальные оптические лидары для создания более аккуратной 3D-модели лица.

Эти инновации используются наиболее часто во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: искуственный ум в исполнении

Современные системы идентификации лиц немыслимы в отсутствие использования artificial intelligence и machine learning. Именно благодаря таким технологиям, как вулкан россии, устройство может узнавать юзера даже при метаморфозах внешности: новая укладка, борода, очки или макияж не становятся барьером для открытия.

Распознавание лица

На первом этапе алгоритм обязана оперативно обнаружить образ лица среди полного кадра с камеры. Для этой задачи задействуются последовательные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые подготовлены идентифицировать человеческие лица среди множества других объектов.

Пример: процесс MTCNN способен обнаруживать облик даже с частичном закрытии (например, платком или рукой).

Определение ключевых точек

После распознавания лица устройство, такая как вулкан россии, определяет положение главных точек: края глаз, кончик носа, края губ и так далее. Часто используется от 68 до 128 главных точек на лицевой области.

Это требуется для выравнивания визуала: если пользователь находится с смартфон под наклоном, или повернул головку, программа корректирует изображение до стандартного положения для дальнейшего анализа.

Построение биометрического идентификатора шаблона

Далее нейронная сеть строит уплотненное цифровое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой образ лица длиной от 128 до 512 вещественных чисел.

Такой образец крайне трудно подделать: он не удерживает само картинку юзера, а лишь исключительные особенности его внешности, что делает его совершенным для таких платформ, как vulkan russia.

Сравнение и принятие заключения

Если человек намеревается разлочить мобильник взором, механизм воспроизводит все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый порог (обычно превышает 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ блокируется.

Приспособление к изменениям облика

Интересная особенность современных систем — способность самообучения. Если вы постоянно открываете телефон с обновленной укладкой или оптикой, алгоритм постепенно модернизирует эталонный шаблон вашего внешности для повышения точности работы без снижения уровня безопасности.

Защита биометрии информации.

Многие клиенты опасаются хранить свои биометрические данные на телефоне из-за угрозы потери данных или взлома гаджета. Иные компании, вроде vulkan russia, предлагают решения для увеличения сохранности данных клиентов.

• Локальное сохранение: Большинство аппаратов сохраняет био-идентификационные шаблоны исключительно внутри безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Они никогда не покидают гаджет и не доступны включая создателю.

• Шифрование: Все информация хранятся только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Программы третьих девелоперов не имеют прямого возможности доступа к биометрическим данным; они могут лишь требовать подтверждение подтверждения идентичности через системный API.

Стоит упомянуть существенную подробность: в случае, если кто-то достанет физический доступ к вашему телефону (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество компании осуществляют защиту от неосознанного разблокирования — например, заставляют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают типы распознавания лиц на изображениях?

В настоящее время можно выделить различить 3 основных подхода к осуществлению этой операции:

Софтверное 2D распознавание

Используется только лицевая видеокамера без вспомогательных сенсоров глубины. Такой метод наблюдается обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность воплощения; минимальная затраты; скоростная деятельность при качественном свете.
Минусы: просто ввести в заблуждение фотографией; нестабильная деятельность ночью; недостаточная защищенность.

Техническое 3D сканирование

Задействует инфракрасную видеокамеру + проектор пикселей + сенсоры глубины (Face ID у Apple; подобные технологии у Huawei Mate).
Достоинства: высокая надежность; нельзя подделать изображение/видеозапись; устойчивая работа в любых условиях освещения.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Гибридные методы с ИИ-дополнением

Задействуют комбинацию программируемых методов + аппаратно-техническую обработку + постобработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например вулкан россии и Google Pixel Face Unlock современных поколений, комбинируют фронтальную камеру c ИК сенсором мобильности Soli Radar для защиты от подделок руками/масками/видеодисплеями посторонних устройств.

Образцы применения разных способов

• iPhone модели X/11/12/13/14 задействуют только техническое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз предложил подобие Face ID среди Android.
• Samsung Galaxy S10 версия/S20 имеют как софтверное двухмерное определение по изображению селфи-камерой, так и сенсор ириса глаза.
• Huawei Mate20 Pro задействует набор из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Проблемы охраны и неверные сигналы

Несмотря на замечательный успехи техники за недавние годы, совершенных системы пока не имеется:

1. Шанс подвоха: Недорогие мобильники легко открываются качественной фотографией владельца или видеозаписью с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые совершенные механизмы могут перепутать между монозиготными близнецами либо родичами с очень схожей внешностью.
3. Трансформации внешности: Внезапное утрата веса/набор веса, хирургические вмешательства или повреждения порой необходимы для перерегистрации биометрии.
4. Условия записи: Сильная засветка солнечным светом либо глубокая тень могут снизить точность определения признаков.

Ниже несколько рекомендаций для надёжному эксплуатации:

• Для критически важных операций всегда применяйте двухфакторную аутентификацию;
• Не включайте функцию “Разблокировка по лицу” на недорогих моделях без ИК-сенсоров;
• Систематически обновляйте прошивку ПО мобильного устройства для защиты от актуальных атак;
• Включайте опцию “Требовать раскрытых глаз” в тех местах, где она доступна.

В каких местах ещё применяется технологии за исключением смартфонов?

Пускай основная мысль данной статьи сосредоточена на именно портативным гаджетам, необходимо сказать о альтернативных областях использования технологии:

• Контроль прохода в офисах и резиденциях;
• Платёжные терминалы банков (“Face Pay”);
• Виртуальные удостоверения личности последнего поколения;
• Системы видеоконтроля городских служб;
• Автоматизирование регистрации присутствия школ/вузов;
• Авторизация пользователей ПК/ноутбуков.

Например: В столичном метро уже испытывается система оплаты проезда по фейсу (“Face Pay”) — хватит пройти через барьер без карты или телефона! Схожие программы развиваются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Как меняется технология в нынешнее время?

Каждый год проявляются свежие мысли для улучшения стандарта работы систем распознавания лиц:

1. Увеличивается разрешение датчиков — чем больше информации фиксируется камерой/глубинными сенсорами, тем меньше шанс ошибки;
2. Развиваются нейронные сети — новейшие структуры вида MobileNetV3 позволяют скоростно обучаться дополнительным характеристикам внешности обладателя непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Развиваются методы антиспуфинга — теперь телефоны могут различать реальные анимированные лица от неподвижных фотографий/маскировок по незаметным движениям кожи.
4. Интеграция со интеллектуальными приборами — интеллектуальные часы могут самостоятельно заблокировать смартфон, если пользователь удалился на значительное расстояние.
5. Появляются гибридные механизмы — например комбинирующие аудио идентификацию + физиономию + пальцевой отпечаток.

Здесь, те направления очень популярны на сегодняшний день:

1) Миниатюризация элементов

Компании стараются минимизировать размер выреза (“чёлки”) для сенсоры на дисплее за счёт интеграции миниатюрных ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработка прямо на устройстве

Для увеличения приватности всё более обработки данных происходит локально без пересылки информации во сторонний облачный услугу.

3) Упорядочивание норм

Гугл активно продвигает эталон BiometricPrompt API, с целью чтобы подобные системы, например как вулкан россия, и любые Android-аппы могли работать с всеми формами биометрии унифицированно.

Что выбрать на сегодня?

В случае если тебе нужна максимальная защита данных, выбирайте топовые устройства с вмонтированным ИК-проектором или же ToF-датчиком глубины.

• iPhone всех актуальных версий
• Huawei Companion/P серии
• Mix Expert
• Vivo X модели
• Oppo Найти X серий.

Если средства скромен – лучше отдавать предпочтение традиционным способам защиты (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в вулкан россия, применять только как второстепенную опцию комфорта.

Как повысить практичность использования функции?

Есть пара хитростей для людей, кто уже пользуется разблокировку через лицо:

1. Регулярно меняйте свою фотографию-шаблон, если сильно изменяется внешность.
2. Не упускайте из виду чистить линзу фронтальной камеры – разводы могут уменьшить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам запускает камеру если вы берёте его в руки.
4. Во время регистрационного процесса постарайтесь удерживать голову неподвижно напротив объектива без значительного наклона головы.
5. Используйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвернулись от дисплея.

Перспективы прогресса инноваций

В предстоящие годы можно ожидать появления полностью бесконтактных способов идентификации индивидуума сразу по нескольким биометрическим параметрам одновременно: облик + речь + походка + движения рук!

Также предполагается появление современных методов обеспечения приватности – скажем, изменяющееся изменение цифрового паттерна после каждой успешной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – единственная из наиболее увлекательных техник нашего времени! Она предоставляет интеракцию со мобильным устройством комфортнее чем раньше, и такие программы, как vulkan russia, могут в разы оптимизировать ваш юзерский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы понимаете, как устроена эта технология внутри, – сможете более осмысленно подбирать свой очередной девайс!