Каким способом работает идентификация лиц в телефонах
Зачем мы предпочитаем разблокирование по лицу
В последние времена определение физиономий является одной из самых популярных возможностей для открытия мобильных телефонов. Всего несколько годков тому назад основная часть юзеров обходились пин-кодами, паролями или датчиками отпечатков пальцев. Но с появлением подобных технологий, как вулкан россия, нам достаточно просто взглянуть на экран — и аппарат тут же узнает своего владельца.
Что превращает эту функцию настолько популярной? Во-первых, это практично: не нужно помнить замысловатые пароли или искать нужный палец в темноте. Также, это оперативно: современные программы узнают лицо практически за мгновение. В-третьих, это ощущение будущего — как будто в кинофильмах про вулкан автомат агентов.
Впрочем за этой кажущейся несложностью таится целый мир комплексных технологий и инженерных концепций. Позвольте нам исследовать, как точно действует распознавание лиц в актуальных гаджетах, какие бывают методы, насколько они надёжны и что нас предстоит.
Краткая хроника развития техники
Распознавание лиц как техника присутствует уже более пятидесяти годов. Первые попытки автоматического исследования облика были предприняты еще в 1960-х годы в научных учреждениях США. Тогда ЭВМ способны были лишь выделять силуэты лица и определять дистанции между глазами и ртом на ахроматических фотографиях.
Изначальные торговые установки стали доступны в девяностых годах, но они были несовершенны: работали медленно и часто давали сбои. Только с прогрессом нейронных сетей и таких систем, как вулкан россии, мощных мобильных микросхем распознавание лиц стало по-настоящему широко распространённым явлением.
В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным распознаванием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали внедрять личные разработки.
Главные этапы функционирования механизма идентификации
Процесс идентификации лица можно примерно поделить на несколько важных этапов:
- Распознавание лица — аппарат определяет существование человеческого образа в кадре.
- Определение характеристик — механизм анализирует особенности лица: очертания зрительных органов, носа, губ, положение надбровных дуг.
- Построение шаблона — создаётся особенный виртуальный отпечаток (faceprint) на основе выделенных признаков.
- Сравнение со эталоном — полученный шаблон сверяется с записанной при внесении биометрической сведениями владельца.
- Принятие выбора — если сходство достаточно существенное, смартфон открывается.
Всякий из данных шагов требует специальных алгоритмов и улучшений для быстрой работы прямо на устройстве.
Технические элементы: что прячется внутри
Стандартная селфи камера.
Самый простой простой вариант идентификации физиономии использует исключительно переднюю камеру смартфона. Такой способ осуществлён во многочисленных недорогих вариантах Android-девайсов.
Преимущества:
- Не нуждается в потребляет дополнительные сенсоров.
- Быстро действует при качественном освещении.
Минусы:
- Легко ввести в заблуждение фотографией или роликом.
- Неудачно работает при плохом свете или нестандартных углах обзора.
ИК камера и точечный проектор
Более продвинутые системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика является основой Face ID от Apple.
Каким образом это работает:
- Точечный проекционный прибор отображает на физиономию юзера невидимую структуру из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 пятен).
- Инфракрасная устройство фиксирует изменение формы данной сетки по плоскости физиономии.
- Создаётся трёхмерная карта глубины глубинности, что практически неподвластна для фальсификации стандартной фотографией или маской.
Выигрыши
- Надёжная работа даже в полной тьме.
- Высокая защита к имитациям.
- Точность распознавания выше 99%.
Добавочные сенсоры
В некоторых аппаратах применяются также экстра сенсоры: ToF (Time-of-Flight), которые измеряют период прохождения луча до цели и обратно; RGB-датчики дальности; специальные лазерные измерители расстояния для создания более детализированной 3D-модели лица.
Эти технологии встречаются в основном во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).
Софтверные методы: искусственный разум на действии
Нынешние механизмы опознания лиц неосуществимы без эксплуатации ИИ и machine learning. Именно благодаря таким технологиям, как вулкан россии, гаджет может узнавать владельца даже при метаморфозах облика: новая укладка, щетина, очки или косметика не становятся помехой для деблокировки.
Детектирование физиономии
При первом стадии алгоритм необходимо мгновенно обнаружить лицо в пределах всего кадра камеры. Для этого используются последовательные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые подготовлены идентифицировать лица людей среди множества других объектов.
Пример: процесс MTCNN способен обнаруживать облик даже при частичном закрытии (например, платком или ладонью).
Идентификация ключевых точек
После идентификации лица система, такая как вулкан россии, вычисляет положение основных точек: кончики глаз, кончик носа, края губ и так далее. Как правило применяется от 68 до 128 основных меток на лицевой области.
Данное необходимо для выравнивания изображения: если юзер удерживает телефон под наклоненным, или повернул голову, программа “выпрямляет” картинку до обычного угла для последующего изучения.
Формирование биометрического идентификатора шаблона
Далее нейросеть строит уплотненное математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой образ лица длиной от 128 до 512 вещественных чисел.
Такой образец весьма затруднительно подделать: он не удерживает само картинку юзера, а лишь особенные характеристики его вида, что делает его идеальным для таких платформ, как vulkan russia.
Сравнительный анализ и вынесение заключения
Если юзер намеревается разблокировать телефон взором, программа повторяет все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.
Если похожесть превышает заданный границу (обычно превышает 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ не предоставляется.
Адаптация к трансформациям внешнего вида
Занимательная черта современных системы — возможность самостоятельного обучения. Если вы регулярно разблокируете телефон с обновленной прической или оптикой, система постепенно обновляет базовый шаблон вашего внешности для улучшения точности функционирования без снижения уровня безопасности.
Безопасность биометрии информации.
Многие пользователи опасаются сохранять свои биометрические данные на мобильном устройстве из-за риска утечки данных или хакерской атаки. Определенные организации, такие как vulkan russia, предлагают варианты для увеличения защиты данных пользователей.
-
Локальное сохранение: Преимущественно аппаратов записывает биометрические модели исключительно в пределах защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Они никогда не оставляют устройство и не доступны в том числе создателю.
-
Шифрование: Все данные сберегаются только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.
-
Изоляция приложений: Программы внешних девелоперов не обладают непосредственного доступа к биометрическим данным; они могут лишь требовать подтверждение верификации личности через системный API.
Следует упомянуть важную особенность: в случае, если кто-то получит физический доступ к вашему телефону (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство компании внедряют защиту от “слепого” разблокирования — к примеру, просят разомкнуть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.
Какие именно существуют категории определения лиц?
В настоящее время можно определить выделить три главных способа к осуществлению этой задачи:
Программное плоское идентификация
Используется только фронтальная видеокамера без экстра датчиков дистанции. Этот подход наблюдается обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).
Преимущества: несложность реализации; низкая стоимость; быстрая деятельность при достаточном освещении.
Минусы: просто одурачить фотографией; нестабильная работа ночью; слабая безопасность.
Техническое 3D оцифровка
Применяет инфракрасную видеокамеру + проекционный модуль точек + датчики дистанции (Face ID от Apple; аналогичные решения у Huawei Mate).
Плюсы: большая надёжность; не получится обмануть изображение/видеозапись; устойчивая деятельность в любых условиях освещения.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана (“чёлка”)
Смешанные методы с ИИ-дополнением
Используют комбинацию софтверных методов + аппаратную обработку + постобработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, например вулкан россии и Google Pixel Face Unlock последних версий, сочетают фронталку c ИК сенсором движения Soli Radar для предотвращения от подделок руками/масками/видеоэкранами чужих устройств.
Примеры использования разнообразных методов
- iPhone модели X/11/12/13/14 используют только физическое трёхмерное 3D-сканирование
- Xiaomi Mi8 Explorer Edition в первый раз представил подобие Face ID в ряду Android.
- Samsung Galaxy S10 версия/S20 имеют как программное обеспечение двухмерное идентификацию по изображению селфи-камерой, так и датчик радужки глаза.
- Huawei Mate20 Pro задействует комплекс из ИК-инфракрасного света + Dot Projector + ToF-датчик
Проблемы защиты и ложные срабатывания
Несмотря на поразительный успехи техники за недавние годы, идеальных системы пока не имеется:
- Шанс обмана: Доступные смартфоны без труда “разблокируются” четкой снимком владельца либо видео с дисплея иного гаджета.
- Идентичные близняшки: Даже самые идеальные механизмы могут ошибиться между монозиготными близнецами либо семьями с очень похожей внешностью.
- Метаморфозы внешнего вида: Резкое утрата веса/набор веса, пластические операции либо травмы иногда требуют повторной регистрации биометрии.
- Условия записи: Сильная освещённость солнцем или же плотная затенение могут уменьшить аккуратность определения признаков.
Вот несколько рекомендаций по защищённому эксплуатации:
- Для значимых операций всегда внедряйте двухфакторную аутентификацию;
- Не активируйте функцию “Разблокировка по лицу” на бюджетных моделях без ИК-сенсоров;
- Регулярно апгрейдите прошивку мобильного устройства для защиты от актуальных атак;
- Включайте настройку “Требовать распахнутых глаз” в тех местах, где она имеется.
В каких местах дополнительно применяется технология кроме смартфонов?
Хотя тема этой публикации посвящена в частности смартфонам и планшетам, необходимо сказать о других сферах применения технологии:
- Мониторинг входа в деловых центрах и резиденциях;
- Платёжные устройства банков (“Face Pay”);
- Виртуальные удостоверения личности нового типа;
- Комплексы видеонаблюдения городских сервисов;
- Механизация регистрации присутствия школ/университетов;
- Аутентификация пользователей персональных компьютеров/ноутбуков.
Например: В столичном метро уже испытывается система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без карты или телефона! Схожие проекты реализуются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.
Каким образом меняется технология сегодня?
Всякий год появляются современные идеи для улучшения стандарта функционирования систем распознавания лиц:
- Увеличивается детализация датчиков — чем больше информации фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность погрешности;
- Развиваются нейросети — передовые структуры модели MobileNetV3 обеспечивают возможность быстро обучаться дополнительным чертам облика обладателя прямо на устройстве без отправки данных в облако.
- Развиваются технологии антиспуфинга — теперь смартфоны способны различать реальные живые лица от неподвижных снимков/маскировок по мельчайшим микродвижениям.
- Интеграция со смарт-гаджетами — интеллектуальные часы могут самостоятельно заблокировать телефон, если пользователь отошёл далеко.
- Появляются гибридные механизмы — к примеру объединяющие голосовую идентификацию + физиономию + дактилоскопический след.
Здесь, те тренды особенно востребованы в данный момент:
1) Миниатюризация элементов
Компании пытаются сократить величину выреза (“чёлки”) под сенсоры на экране за счёт внедрения маленьких ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.
2) Переработка прямо на аппарате
Для улучшения приватности всё более расчётов происходит на месте без отправки информации во сторонний облачный услугу.
3) Стандартизация норм
Гугл энергично продвигает стандарт BiometricPrompt API, с целью чтобы такие платформы, например как вулкан россия, и любые Android-программы могли работать с различными типами биометрии единообразно.
Что выбрать на сегодня?
Если вам важна наивысшая сохранность информации, выбирайте передовые устройства с интегрированным ИК-излучателем или же ToF-сенсором глубины.
- iPhone всех новейших поколений
- Huawei Companion/P Series серии
- Xiaomi Pro
- Vivo X линейки
- Оппо Обнаружить Х серии.
Если финансы невелик – лучше отдавать предпочтение традиционным способам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в вулкан россия, задействовать только как опциональную опцию комфорта.
Каким образом увеличить комфорт работы функции?
Есть пара хитростей для людей, кто уже пользуется функцию распознавания лица:
- Периодически обновляйте свою фотографию-шаблон, если значительно меняется облик.
- Не пренебрегайте протирать объектив передней камеры – разводы могут понизить точность!
- Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам запускает камеру если вы берёте его в руки.
- При записи постарайтесь удерживать голову неподвижно перед камеры без резкого наклона головы.
- Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отвели взгляд от экрана.
Возможности эволюции техники
В скоро наступающие годы можно предполагать возникновения полностью безконтактных способов распознавания человека сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + звучание + походка + движения рук!
Также вероятно появление современных способов обеспечения личной информации – например, переменное модификация диджитал паттерна после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.
Идентификация лиц – одна из наиболее захватывающих технологий нашего эпохи! Она делает общение со мобильным устройством комфортнее чем до этого, и такие аппы, как vulkan russia, могут значительно улучшить ваш опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.
Теперь, когда вы осведомлены, как устроена эта система в деталях, – сможете вдумчиво выбирать свой очередной устройство!
