Как работает идентификация лицевых образов в смартфонах
Почему мы предпочитаем разблокировку по фейсу
В последние годы распознавание лиц стало одной из самых популярных опций для разблокировки умных телефонов. Еще пару лет ранее основная масса пользователей удовлетворялись пин-кодами, паролями или сканерами отпечатков пальцев. Но при появлением таких технологий, например admiral x, нам достаточно лишь взглянуть на экран — и устройство тут же узнает своего владельца.
Какой аспект обуславливает эту функцию настолько популярной? Прежде всего, это комфортно: не нужно удерживать в памяти сложные пароли или находить верный палец в темноте. Кроме того, это оперативно: современные алгоритмы распознают лицо практически за доли секунды. В-третьем пункте, это ощущение будущего — словно в кинолентах про адмирал х официальный сайт шпионов.
Однако за этой на первый взгляд несложностью таится весь мир сложных техник и инженерных разработок. Попробуем разобраться, как именно функционирует идентификация по лицу в новейших смартфонах, какие существуют технологии, насколько они защищены и что нас ожидает в будущем.
Краткая хроника развития инноваций
Идентификация лиц как техника существует уже более пятидесяти годов. Изначальные попытки автоматического анализа облика были предприняты еще в 1960-х годах в лабораториях США. Тогда ЭВМ могли лишь определять контуры черепа и вычислять дистанции между очами и устами на ахроматических снимках.
Первые торговые установки стали доступны в 90-х, но они были несовершенны: функционировали медленно и нередко ошибались. Только с эволюцией синтетических сетей и таких систем, как адмирал х, мощных мобильных микросхем определение лиц стало по-настоящему массовым явлением.
В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным идентификацией лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и другие начали внедрять личные решения.
Главные этапы работы системы распознавания
Процесс идентификации лица можно примерно поделить на несколько основных этапов:
- Обнаружение лиц — аппарат определяет существование гуманного лица в кадре.
- Выделение характеристик — система изучает черты физиономии: форму глаз, носа, губ, положение надбровных дуг.
- Построение модели — создаётся неповторимый электронный отпечаток (faceprint) на основе определённых признаков.
- Сравнение со эталоном — сформированный шаблон сопоставляется со зафиксированной при регистрации биометрической сведениями владельца.
- Принятие выбора — если сходство достаточно существенное, смартфон открывается.
Всякий из указанных стадий нуждается в индивидуальных алгоритмов и улучшений для быстрой работы прямо на устройстве.
Аппаратные элементы: что находится внутри них
Типичная фронтальная камера.
Самый простой простой способ распознавания облика задействует лишь фронтальную видеокамеру смартфона. Данный подход реализован во различных доступных моделях Android-девайсов.
Достоинства:
- Не нуждается в требует внешних сенсоров.
- Оперативно функционирует при качественном свете.
Минусы:
- Легко одурачить фотографией или видеозаписью.
- Неудачно работает при плохом освещённости или непривычных углах обзора.
ИК камера и пунктирный проектор
Более совершенные системы, такие как адмирал х, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс является основой Face ID от Apple.
Каким образом это работает:
- Точечный проектор отображает на физиономию использующего невидимую сетку из тысяч инфракрасных точек (например, Face ID применяет около 30 000 пятен).
- Инфракрасная камера записывает изменение формы данной решетки по поверхности лица.
- Формируется трёхмерная карта глубины, которая почти что неподвластна для фальсификации стандартной фотографией или маской.
Плюсы
- Надёжная работа даже в полной тьме.
- Сильная защита к фальсификациям.
- Точность определения выше 99%.
Дополнительные сенсоры
В некоторых девайсах применяются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые фиксируют время движения света до цели и обратно; Трехцветные-датчики дальности; специальные лазерные дальномеры для создания более детализированной 3D-модели лица.
Эти разработки применяются наиболее часто во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).
Софтверные алгоритмы: искусственный ум на работе
Нынешние механизмы опознания лиц неосуществимы без эксплуатации artificial intelligence и машинного обучения. Именно благодаря таким технологиям, как адмирал х, гаджет может распознавать владельца даже при изменениях внешности: новая укладка, растительность на лице, линзы или макияж не становятся препятствием для открытия.
Распознавание физиономии
На первом этапе алгоритм обязана быстро найти ликовое изображение среди целого снимка камеры. Для этого применяются многоуровневые классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые “обучены” идентифицировать лица людей среди множества других объектов.
Пример: алгоритм MTCNN способен распознавать облик даже при неполном перекрытии (например, шарфом или ладонью).
Определение ключевых моментов
После распознавания лица система, такая как адмирал х, вычисляет положение главных точек: уголки глаз, конец носа, края губ и так далее. Как правило используется от 68 до 128 главных точек на лицевой поверхности.
Это действие нужно для стабилизации изображения: если человек удерживает мобильник под наклоненным, или наклонил голову, программа исправляет картинку до обычного угла для последующего изучения.
Построение биометрии модели
Далее нейронная сеть строит уплотненное цифровое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 чисел с плавающей запятой.
Данный образец крайне затруднительно сфальсифицировать: он не хранит само картинку пользователя, а лишь особенные черты его облика, что делает его оптимальным для таких площадок, как admiral-x.
Сравнение и вынесение решения
В случае, когда человек намеревается открыть смартфон глазами, программа воспроизводит все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.
Если похожесть превышает установленный порог (обычно превышает 99%), телефон, как и платформа admiral-x, открывается; если нет — доступ запрещается.
Адаптация к трансформациям внешности
Занимательная характеристика актуальных системы — способность самообучения. Если ты часто доступаете к мобильное устройство с обновленной прической или очками, алгоритм постепенно освежает эталонный образец вашего лица для повышения точности работы без ухудшения безопасности.
Защита биометрических данных.
Множество юзеры опасаются хранить свои биометрические данные на смартфоне из-за риска утечки информации или взлома устройства. Определенные фирмы, такие как admiral-x, предлагают варианты для улучшения сохранности информации пользователей.
-
Локальное сбережение: Большинство аппаратов сохраняет биометричные образцы только внутри защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Они никогда не оставляют устройство и закрыты в том числе изготовителю.
-
Шифрование: Все информация сохраняются только в кодированном виде с использованием новейших криптографических алгоритмов AES256.
-
Изоляция приложений: Приложения третьих разработчиков не обладают прямого возможности доступа к биометрическим; они могут лишь требовать факт верификации идентичности через системный API.
Стоит отметить существенную особенность: в случае, если какой-то человек сможет получить доступ к вашему телефону физически (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство производители осуществляют защиту от “слепого” разблокирования — в частности, требуют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.
Какие именно бывают категории распознавания лиц?
В настоящее время можно выделить различить три ключевых подхода к осуществлению этой операции:
Софтверное плоское идентификация
Используется только лицевая камера без экстра детекторов глубины. Такой способ встречается обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).
Преимущества: несложность осуществления; умеренная затраты; скоростная деятельность при хорошем свете.
Минусы: просто ввести в заблуждение фотографией; ненадежная деятельность ночью; недостаточная безопасность.
Техническое объёмное сканирование
Задействует инфракрасную видеокамеру + проектор точек + датчики глубины (Face ID у Apple; аналогичные технологии у Huawei Mate).
Достоинства: высокая надёжность; не получится подделать фото/видео; стабильная деятельность в любых условиях освещения.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)
Смешанные методы с интеграцией ИИ
Задействуют комбинацию софтверных методов + аппаратную обработку + постобработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, например адмирал х и Google Pixel Face Unlock новейших версий, объединяют фронтальную камеру c инфракрасным сенсором движения Soli Radar для предотвращения от подделок жестами/масками/видеоэкранами чужих устройств.
Образцы использования различных способов
- iPhone серии X/11/12/13/14 задействуют только техническое трёхмерное сканирование в 3D
- Xiaomi Mi8 Explorer Edition впервые представил эквивалент Face ID в числе Android.
- Samsung Galaxy S10/S20 имеют как софтверное плоское идентификацию по изображению фронталкой, так и сенсор глазного ириса.
- Huawei Mate20 Pro использует систему из ИК-подсветки + Dot Projector + ToF-сенсорный элемент
Проблемы защиты и ложные тревоги
Несмотря на поразительный прогресс инноваций за недавние лет, безупречных систем пока не имеется:
- Возможность мошенничества: Доступные телефоны без труда “разблокируются” качественной снимком хозяина либо роликом с дисплея иного гаджета.
- Идентичные близняшки: Даже самые идеальные механизмы могут ошибиться между монозиготными близнецами либо семьями с очень аналогичной внешностью.
- Изменения облика: Стремительное похудение/набор веса, косметические процедуры или повреждения порой требуют повторной регистрации биометрических данных.
- Условия съёмки: Интенсивная засветка солнечным светом либо плотная темнота могут понизить верность распознавания признаков.
Здесь некоторые рекомендаций для безопасному использованию:
- Для критически важных операций всегда внедряйте двухфакторную аутентификацию;
- Не запускайте функцию “Разблокировка по лицу” на бюджетных устройствах без ИК-сенсоров;
- Постоянно апгрейдите прошивку телефона для предотвращения угроз от современных угроз;
- Включайте настройку “Требовать распахнутых глаз” везде, где она имеется.
В каких областях также находится применение технология помимо смартфонов?
Несмотря на то, что предмет нашей работы касается именно портативным гаджетам, стоит упомянуть о альтернативных областях использования технологии:
- Мониторинг прохода в рабочих помещениях и жилых домах;
- Платёжные терминалы финансовых учреждений (“Face Pay”);
- Цифровые удостоверения личности нового поколения;
- Системы видеонаблюдения муниципальных сервисов;
- Механизация регистрации присутствия школ/университетов;
- Вход пользователей ПК/ноутбуков.
Например: В московском метро уже испытывается система оплаты проезда по фейсу (“Face Pay”) — достаточно пройти через турникет без пластика или мобильника! Схожие программы реализуются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.
Каким образом меняется технология сегодня?
Любой годочек проявляются современные концепции для усовершенствования уровня деятельности систем лицевого распознавания:
- Увеличивается детализация датчиков — чем больше элементов фиксируется фотоаппаратом/датчиками глубины, тем меньше шанс погрешности;
- Улучшаются искусственные интеллекты — передовые структуры типа MobileNetV3 дают возможность оперативно обучаться новым характеристикам облика владельца напрямую на гаджете без пересылки информации в облачное хранилище.
- Улучшаются методы антиспуфинга — теперь телефоны умеют отличать подлинные анимированные лица от фиксированных фото/маскировок по незаметным движениям кожи.
- Интеграция со умными устройствами — интеллектуальные часы могут автоматически закрыть доступ к мобильный телефон, если пользователь ушёл далеко.
- Проявляются гибридные устройства — к примеру совмещающие аудио идентификацию + физиономию + отпечаток пальца.
Вот, которые тенденции очень популярны в данный момент:
1) Сокращение элементов
Производители намереваются уменьшить величину отверстия (“чёлки”) для сенсоры на дисплее за счёт интеграции миниатюрных ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.
2) Обработка прямо на девайсе
Для увеличения личной безопасности всё больше вычислений осуществляется локально без передачи данных во сторонний облачный сервис.
3) Унификация норм
Гугл активно пропагандирует норму BiometricPrompt API, с целью чтобы подобные системы, вроде admiral x, и любые Android-приложения могли работать с различными типами биометрии стандартизированно.
Какое решить на сегодня?
Если вам необходима предельная сохранность данных, подбирайте топовые модели с вмонтированным ИК-излучателем либо ToF-сенсором глубины.
- iPhone каждого новейших версий
- Huawei Partner/P Series линейки
- Xiaomi Expert
- Vivo X линейки
- Оппо Find X серии.
Если бюджет скромен – лучше отдавать предпочтение классическим средствам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в admiral x, использовать только как опциональную опцию комфорта.
Каким способом увеличить удобство функционирования возможности?
Есть несколько лайфхаков для пользователей, кто уже использует функцию распознавания лица:
- Периодически обновляйте свою фото-шаблон, если значительно меняется внешний вид.
- Не пренебрегайте чистить линзу передней камеры – пятна могут уменьшить точность!
- Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – в результате мобильник сам включает камеру когда вы поднимаете его.
- При записи постарайтесь удерживать лицо ровно впереди камеры исключая сильного наклона головы.
- Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отвернулись от экрана.
Будущее прогресса инноваций
В предстоящие времена можно предполагать появления полностью безконтактных способов опознания персоны сразу по нескольким биометрическим параметрам одновременно: облик + речь + походка + манипуляции руками!
Также возможно появление современных подходов обеспечения приватности – скажем, изменяющееся корректировка электронного шаблона после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.
Идентификация лиц – одна из самых увлекательных техник нашего периода! Она делает общение со мобильным устройством проще чем раньше, и такие приложения, как admiral-x, могут существенно оптимизировать ваш юзерский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.
Теперь, раз вы понимаете, как устроена эта система в деталях, – сумеете вдумчиво подбирать свой будущий девайс!
