Как действует распознавание лиц в смартфонах

Для чего мы предпочитаем разблокирование по лицевому распознаванию

В прошлые времена определение лиц является одной из самых распространённых опций для открытия умных телефонов. Лишь пару годов ранее основная часть пользователей удовлетворялись пин-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением таких технологий, как admiral x, нам достаточно лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Какая вещь делает эту конкретную особенность очень нужной? Прежде всего, это практично: не нужно удерживать в памяти сложные пароли или находить верный палец в мраке. Кроме того, это мгновенно: современные алгоритмы распознают лицо практически за доли секунды. В-третью очередь, это чувство футуристичности — словно в кинофильмах про адмирал х официальный сайт агентов.

Тем не менее за этой кажущейся легкостью скрывается полный вселенная сложных технологий и инженерных разработок. Давайте разобраться, как точно функционирует распознавание лиц в актуальных смартфонах, какие применяются способы, насколько они безопасны и что нас ждёт впереди.

Короткая история эволюции инноваций

Идентификация лиц как методика имеется уже более пятидесяти лет. Первые эксперименты автоматического изучения лиц были предприняты еще в 1960-х годы в лабораториях США. Тогда вычислительные машины способны были лишь обозначать очертания головы и вычислять расстояния между глазами и губами на монохромных снимках.

Изначальные коммерческие платформы появились в 1990-х годах, но они были далеки от совершенства: функционировали медленно и часто давали сбои. Только с прогрессом нейронных сетей и таких систем, как адмирал х, сильных мобильных процессоров идентификация лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным сканированием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и прочие начали интегрировать свои решения.

Главные этапы действия механизма определения

Процесс распознавания лица можно примерно сегментировать на несколько основных этапов:

1. Обнаружение лица — аппарат определяет наличие человеческого лица в кадре.
2. Определение характеристик — система изучает черты физиономии: очертания зрительных органов, обонятельного органа, уст, положение надбровных дуг.
3. Построение модели — создаётся уникальный цифровой отпечаток (faceprint) на основе определённых признаков.
4. Сравнение со образцом — сформированный образец сверяется со сохранённой при внесении биометрической данными владельца.
5. Принятие выбора — если совпадение достаточно значительное, смартфон открывается.

Любой из этих шагов требует специальных алгоритмов и усовершенствований для быстрой работы непосредственно на девайсе.

Технические элементы: что прячется в их недрах

Стандартная фронтальная камера.

Самый простой способ определения физиономии применяет исключительно фронтальную камеру смартфона смартфона. Подобный подход внедрён во многих недорогих моделях Android-устройств.

Плюсы:

• Необходимо требует дополнительные датчиков.
• Оперативно работает при качественном свете.

Недостатки:

• Просто ввести в заблуждение фотографией или роликом.
• Неудачно действует при слабом освещённости или непривычных углах обзора.

ИК камера и точечный проекционный аппарат

Более продвинутые системы, такие как адмирал х, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс лежит в основе Face ID от Apple.

Как это функционирует:

• Точечный проектор проецирует на лицо пользователя невидимую структуру из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 точек).
• ИК камера записывает изменение формы данной решетки по плоскости физиономии.
• Получается трехмерная глубинная карта глубинности, которая почти неподвластна для фальсификации типичной снимком или маскировкой.

Плюсы

• Надёжная функционирование даже в полной неосвещённости.
• Сильная устойчивость к фальсификациям.
• Точность распознавания свыше 99%.

Дополнительные сенсоры

В отдельных устройствах применяются также экстра датчики: ToF (Time-of-Flight), которые фиксируют период распространения света до цели и обратно; Цветные-датчики дальности; специальные световые измерители расстояния для построения более аккуратной 3D-модели лица.

Эти инновации применяются в основном во передовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: искусственный интеллект на работе

Современные системы опознания лиц неосуществимы в отсутствие использования искусственного интеллекта и машинного обучения. Именно благодаря таким технологиям, как адмирал х, аппарат в состоянии распознавать владельца даже при изменениях облика: новая причёска, борода, линзы или грим не становятся помехой для разблокировки.

Обнаружение лиц

На стартовом стадии система обязана мгновенно распознать образ лица в пределах целого изображения с камеры. Для данной цели используются каскадные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые подготовлены распознавать лица людей среди множества других объектов.

Пример: алгоритм MTCNN в состоянии находить физиономию даже при неполном перекрытии (например, шарфом или ладонью).

Идентификация ключевых моментов

После обнаружения лица устройство, такая как адмирал х, вычисляет положение главных точек: уголки глаз, верхушка носа, контуры губ и так далее. Часто задействуется от 68 до 128 основных меток на лице.

Данное нужно для нормализации визуала: если пользователь держит мобильник под углом, или наклонил головку, программа корректирует изображение до обычного угла для дальнейшего анализа.

Построение биометрии образца

Далее искусственная сеть строит компактное цифровое представление (« эмбеддинг ») облика пользователя — своеобразный цифровой « отпечаток » лица длиной от 128 до 512 флоатов.

Этот шаблон очень сложно подделать: он не удерживает само картинку пользователя, а лишь уникальные характеристики его облика, что делает его оптимальным для таких систем, как admiral-x.

Сопоставление и осуществление выбора

В случае, когда человек хочет разлочить мобильник взором, программа воспроизводит все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный уровень (обычно превышает 99%), телефон, как и платформа admiral-x, доступен; если нет — доступ запрещается.

Привыкание к метаморфозам внешности

Занимательная черта нынешних системы — способность самообучения. Если вы часто доступаете к телефон с свежей стрижкой или оптикой, алгоритм постепенно модернизирует эталонный модель вашего внешности для улучшения точности функционирования без ухудшения безопасности.

Защита биометрических информации.

Многие юзеры беспокоятся хранить свои биометрические идентификационные данные на телефоне из-за вероятности утечки информации или взлома устройства. Иные организации, такие как admiral-x, предлагают методы для улучшения безопасности сведений пользователей.

• Локальное хранение: Основная часть устройств хранит биометричные шаблоны исключительно внутрь безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Они всегда не оставляют аппарат и закрыты включая создателю.

• Шифрование: Все информация сберегаются только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Программы третьих разработчиков не имеют непосредственного доступа к биометрическим данным; они могут лишь запрашивать факт верификации идентичности через системный API.

Стоит упомянуть существенную особенность: в случае, если какой-то человек получит физический доступ к вашему телефону (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие изготовители внедряют защиту от автоматического разблокирования — в частности, заставляют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются категории определения лиц?

Сегодня можно различить три ключевых метода к выполнению этой операции:

Программное плоское идентификация

Применяется только передняя камера без вспомогательных датчиков дистанции. Этот способ встречается обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота воплощения; минимальная затраты; быстрая функционирование при качественном освещении.
Минусы: легко одурачить снимком; нестабильная функционирование ночью; низкая защищенность.

Оборудование для трёхмерное оцифровка

Применяет ИК видеокамеру + проектор точек + датчики дистанции (Face ID у Apple; подобные решения у Huawei Mate).
Преимущества: значительная надежность; невозможно исказить изображение/видеозапись; постоянная деятельность в любых условиях освещения.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (« чёлка »)

Комбинированные подходы с ИИ-дополнением

Задействуют комбинацию программных методов + аппаратно-техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам (« anti-spoofing »). Например, подобные продукты, например адмирал х и Google Pixel Face Unlock последних версий, объединяют фронталку c инфракрасным датчиком мобильности Soli Radar для предотвращения от подделок жестами/масками/видеоэкранами чужих устройств.

Образцы применения разнообразных способов

• iPhone линейки X/11/12/13/14 задействуют только аппаратное трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition впервые предложил аналог Face ID в числе Android.
• Samsung Galaxy S10 модель/S20 обеспечивают как программное обеспечение 2D распознавание по изображению фронталкой, так и сенсор глазного ириса.
• Huawei Mate20 Pro использует систему из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Трудности безопасности и ложные срабатывания

Несмотря на поразительный успехи технологий за прошедшие годы, безупречных систем пока не наблюдается:

1. Шанс обмана: Недорогие мобильники легко « разблокируются » качественной изображением пользователя или же видеозаписью с экрана другого устройства.
2. Идентичные близняшки: Даже самые безупречные устройства могут спутать между однояйцевыми близнецами либо родичами с очень схожей внешностью.
3. Метаморфозы облика: Стремительное похудение/набор веса, косметические процедуры либо травмы иногда необходимы для повторной регистрации биометрии.
4. Условия записи: Интенсивная подсветка солнечным светом или же глубокая тень могут снизить точность распознавания признаков.

Ниже некоторые подсказок для безопасному применению:

• Для значимых операций всегда используйте двухэтапную аутентификацию;
• Не активируйте возможность « Разблокировка по лицу » на бюджетных устройствах без ИК-сенсоров;
• Постоянно обновляйте прошивку ПО телефона для обеспечения безопасности от актуальных атак;
• Включайте функцию « Требовать раскрытых глаз » в тех местах, где она доступна.

Где ещё используется технологии кроме смартфонов?

Хотя основная мысль этой публикации посвящена в частности смартфонам и планшетам, стоит упомянуть о альтернативных областях использования технологии:

• Контроль прохода в рабочих помещениях и жилых домах;
• Платёжные терминалы банков (« Face Pay »);
• Цифровые паспорта последнего образца;
• Комплексы видеонаблюдения городских сервисов;
• Механизация отслеживания явки школ/институтов;
• Вход юзеров персональных компьютеров/ноутбуков.

Например: В городском метро уже проверяется система оплаты проезда по фейсу (« Face Pay ») — хватит пройти через барьер без пластика или телефона! Аналогичные программы реализуются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Как трансформируется технический процесс в нынешнее время?

Всякий годочек проявляются новые концепции для усовершенствования качества функционирования систем идентификации лиц:

1. Увеличивается разрешение сенсорных устройств — чем больше элементов фиксируется фотоаппаратом/датчиками глубины, тем меньше вероятность ошибки;
2. Улучшаются нейронные сети — современные структуры вида MobileNetV3 дают возможность быстро адаптироваться к дополнительным характеристикам вида обладателя прямо на устройстве без отправки данных в облако.
3. Улучшаются способы антиспуфинга — теперь смартфоны способны распознавать настоящие живые облики от фиксированных фото/масок по незаметным микродвижениям.
4. Взаимодействие со смарт-гаджетами — интеллектуальные часы могут авто блокировать телефон, если владелец удалился на значительное расстояние.
5. Появляются смешанные системы — к примеру объединяющие голосовую опознание + физиономию + дактилоскопический след.

Итак, какие тенденции очень актуальны сейчас:

1) Уменьшение элементов

Компании стараются минимизировать размер отверстия (« чёлки ») под датчики на дисплее за счёт встраивания миниатюрных ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Переработка прямо на девайсе

Для улучшения приватности всё более расчётов осуществляется на месте без передачи информации во дополнительный облачный услугу.

3) Унификация стандартов

Google энергично продвигает эталон BiometricPrompt API, чтобы подобные площадки, вроде admiral x, и любые Android-аппы были совместимы с любыми видами биометрии единообразно.

Что решить сегодня?

В случае если вам всем нужна наивысшая безопасность данных, подбирайте передовые устройства с вмонтированным ИК-проектором либо ToF-сенсором глубины.

• iPhone всех существующих новейших моделей
• Huawei Mate/Series P ряда
• Xiaomi Pro
• Vivo X серии
• Оппо Обнаружить Икс линейки.

Если финансы ограничен – лучше выбирать классическим методам защиты (PIN-код/сканер отпечатка), а возможность « разблокировка по лицу », такую как в admiral x, применять только как опциональную возможность удобства.

Как повысить удобство использования опции?

Есть некоторые советов для тех, кто уже использует разблокировку через лицо:

1. Периодически меняйте свою изображение-шаблон, если кардинально изменяется внешний вид.
2. Не забывайте очищать линзу передней камеры – пятна могут уменьшить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам включает фотоаппарат как только вы поднимаете его.
4. В процессе регистрации старайтесь сохранять лицевую часть неподвижно впереди видеоустройства исключая сильного наклона головы.
5. Используйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отвернулись от экрана.

Перспективы прогресса технологии

В скоро наступающие времена можно предполагать развития полностью бесконтактных способов идентификации человека сразу по нескольким биометрическим данным параметрам одновременно: физиономия + речь + манера ходьбы + жесты рук!

Также возможно возникновение новых способов защиты приватности – к примеру, переменное модификация цифрового паттерна после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – единственная из наиболее интересных инноваций нашего эпохи! Она предоставляет взаимодействие со мобильным устройством проще чем до этого, и такие приложения, как admiral-x, могут существенно улучшить ваш пользовательский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы осведомлены, как устроена эта система внутри, – сумеете вдумчиво выбирать свой будущий гаджет!