Как действует распознавание лиц в телефонах

Для чего мы предпочитаем разблокировку по лицевому распознаванию

В последние времена определение лиц превратилось в одной из наиболее востребованных функций для деблокировки умных телефонов. Еще пару годков ранее большинство пользователей обходились PIN-кодами, ключами доступа или сканерами отпечатков пальцев. Но при появлением таких технологий, например cabura, нам вполне просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Что обуславливает эту особенность настолько популярной? Прежде всего, это комфортно: не нужно удерживать в памяти сложные пароли или отыскивать правильный палец в мраке. Кроме того, это мгновенно: современные системы распознают лицо фактически за мгновения ока. В-третьем пункте, это чувство будущего — как будто в кинофильмах про cabura шпионов.

Впрочем за этой видимой легкостью прячется полный вселенная трудных технологий и инженерных решений. Позвольте нам понять, как именно функционирует распознавание лиц в актуальных гаджетах, какие бывают технологии, насколько они защищены и что нас ждёт впереди.

Краткая история эволюции инноваций

Идентификация лиц как техника присутствует уже более пятидесяти лет. Первые попытки машинного исследования облика были осуществлены еще в 1960-х годах в лабораториях США. Тогда вычислительные машины умели лишь обозначать контуры лица и измерять дистанции между зрачками и губами на черно-белых изображениях.

Изначальные коммерческие платформы стали доступны в девяностых годах, но они были несовершенны: работали медленно и нередко ошибались. Только с развитием нейронных сетей и таких систем, как кабура, мощных мобильных процессоров распознавание лиц стало по-настоящему массовым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с надёжным трёхмерным сканированием лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали интегрировать личные решения.

Ключевые этапы работы устройства идентификации

Процесс идентификации лица можно ориентировочно поделить на несколько ключевых этапов:

Распознавание лица — аппарат определяет наличие человеческого лица в снимке.
Определение характеристик — система исследует особенности физиономии: форму глаз, обонятельного органа, губ, позицию бровей.
Построение модели — создаётся неповторимый цифровой отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение с эталоном — созданный модель сверяется со сохранённой при регистрации биометрической данными владельца.
Принятие выбора — если сходство достаточно существенное, смартфон разблокируется.

Всякий из данных шагов нуждается в специальных процедур и оптимизаций для оперативной работы прямо на устройстве.

Технические элементы: что скрыто внутри

Стандартная передняя камера.

Самый легкий вариант распознавания облика использует только фронтальную видеокамеру мобильного устройства. Такой подход осуществлён во многих доступных вариантах Android-девайсов.

Преимущества:

Не нуждается в дополнительных датчиков.
Шустро функционирует при качественном освещении.

Недостатки:

Несложно одурачить снимком или видео.
Неправильно действует при слабом свете или нестандартных ракурсах.

Инфракрасная камера и пунктирный проекционный аппарат

Более совершенные системы, такие как кабура, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология составляет базу Face ID от Apple.

Каким образом это работает:

Точечный проектор проецирует на лицо юзера невидимую сетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 пятен).
ИК устройство записывает искривление данной сетки по поверхности лица.
Формируется 3D карта глубинности, которая почти что неосуществима для фальсификации типичной фото или маскировкой.

Достоинства

Надёжная функционирование даже в полной неосвещённости.
Высокая устойчивость к подделкам.
Точность идентификации более 99%.

Дополнительные сенсоры

В некоторых устройствах задействуются также дополнительные датчики: ToF (Time-of-Flight), которые фиксируют период распространения луча до объекта и обратно; Трехцветные-датчики глубины; специальные световые дальномеры для создания более аккуратной 3D-модели лица.

Эти инновации применяются чаще всего во передовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искусственный интеллект на действии

Текущие механизмы опознания физиономий неосуществимы при отсутствии применения искусственного интеллекта и машинного обучения. Именно благодаря таким технологиям, как кабура, устройство в состоянии распознавать юзера даже при трансформациях внешнего вида: новая стрижка, борода, оптика или косметика не становятся препятствием для открытия.

Распознавание лица

На начальном стадии система обязана оперативно найти ликовое изображение внутри целого кадра камеры. Для этого задействуются каскадные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые подготовлены находить лиц человека среди множества других объектов.

Пример: процесс MTCNN может находить лицо даже при неполном перекрытии (например, шарфом или ладонью).

Идентификация основных аспектов

После идентификации лица механизм, такая как кабура, вычисляет местоположение основных точек: кончики глаз, кончик носа, края губ и так далее. Часто используется от 68 до 128 основных точек на лицевой поверхности.

Это действие необходимо для выравнивания картинки: если пользователь находится с смартфон под углом, или повернул голову, программа исправляет изображение до обычного угла для дальнейшего анализа.

Создание биометрии модели

Далее нейросеть строит компактное математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 флоатов.

Данный образец весьма трудно сфальсифицировать: он не сохраняет само картинку юзера, а лишь особенные черты его вида, что делает его совершенным для таких систем, как кабура казино.

Сопоставление и вынесение заключения

Если юзер желает разлочить телефон глазами, программа осуществляет все описанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный границу (обычно выше 99%), телефон, как и платформа кабура казино, доступен; если нет — доступ не предоставляется.

Приспособление к изменениям облика

Интересная черта нынешних системы — возможность самостоятельного обучения. Если вы часто доступаете к смартфон с новой укладкой или очками, система постепенно модернизирует основной шаблон вашего облика для повышения точности работы без снижения уровня безопасности.

Безопасность биометрических информации.

Многие пользователи беспокоятся хранить свои био-идентификационные данные на телефоне из-за риска потери данных или взлома устройства. Некоторые фирмы, такие как кабура казино, предлагают методы для повышения защиты сведений юзеров.

Локальное сбережение: Основная часть аппаратов сохраняет биометричные образцы исключительно в пределах защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они никогда не оставляют устройство и не доступны включая изготовителю.
Шифрование: Все данные хранятся только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция приложений: Программы сторонних девелоперов не обладают непосредственного возможности доступа к биометрическим; они могут лишь требовать подтверждение верификации идентичности через системный API.

Стоит упомянуть важную деталь: если кто-то получит физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство производители реализуют меры безопасности от автоматического разблокирования — к примеру, заставляют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие бывают типы определения лиц?

На сегодняшний день можно определить 3 основных подхода к осуществлению этой задачи:

Софтверное 2D идентификация

Эксплуатируется только передняя камера без дополнительных датчиков глубины. Подобный подход используется обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность реализации; минимальная затраты; оперативная деятельность при качественном освещении.
Минусы: просто ввести в заблуждение снимком; неустойчивая функционирование ночью; низкая охрана.

Техническое 3D сканирование

Использует ИК камеру + проекционный модуль точек + датчики глубины (Face ID от Apple; подобные решения у Huawei Mate).
Достоинства: высокая достоверность; нельзя исказить изображение/видеозапись; устойчивая функционирование при любом освещении.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные методы с дополнением ИИ

Применяют комбинацию программных методов + аппаратно-техническую обработку + постобработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, например кабура и Google Pixel Face Unlock современных поколений, сочетают фронтальную камеру c ИК датчиком мобильности Soli Radar для защиты от фальсификаций жестами/масками/видеодисплеями чужих устройств.

Образцы использования различных техник

iPhone модели X/11/12/13/14 используют только физическое трёхмерное сканирование
Xiaomi Mi8 Explorer Edition первый раз предложил подобие Face ID в ряду Android.
Samsung Galaxy S10 версия/S20 обеспечивают как софтверное 2D определение по снимку фронтальной камерой, так и датчик ириса глаза.
Huawei Mate20 Pro использует набор из ИК-подсветки + Dot Projector + ToF-сенсор

Вопросы безопасности и ложные тревоги

Несмотря на замечательный успехи инноваций за недавние лет, безупречных механизмов пока не наблюдается:

Шанс подвоха: Доступные телефоны без труда доступны четкой фотографией хозяина или видео с экрана другого устройства.
Идентичные двойняшки: Даже самые совершенные системы могут перепутать между однояйцевыми близнецами либо семьями с очень схожей внешностью.
Метаморфозы внешности: Внезапное снижение веса/увеличение массы тела, хирургические вмешательства или повреждения в некоторых случаях необходимы для перерегистрации биометрических данных.
Условия фотографирования: Интенсивная засветка солнцем либо интенсивная затенение могут понизить аккуратность определения признаков.

Ниже пара советов по безопасному эксплуатации:

Для важных операций всегда внедряйте двухэтапную аутентификацию;
Не включайте возможность “Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
Регулярно обновляйте ПО мобильного устройства для обеспечения безопасности от новых видов атак;
Включайте настройку “Требовать открытых глаз” в тех местах, где она есть.

Где дополнительно находится применение технологии за исключением мобильных телефонов?

Пускай тема этой статьи касается в частности мобильным устройствам, необходимо сказать о других сферах применения технологии:

Мониторинг входа в офисах и резиденциях;
Платёжные терминалы финансовых учреждений (“Face Pay”);
Цифровые идентификационные документы последнего типа;
Системы видеоконтроля муниципальных подразделений;
Механизация учёта посещаемости образовательных учреждений/университетов;
Авторизация участников персональных компьютеров/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — достаточно пройти через турникет без карты или мобильника! Аналогичные программы реализуются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким образом меняется технический процесс в нынешнее время?

Любой год возникают новые идеи для улучшения уровня функционирования систем лицевого распознавания:

Увеличивается детализация сенсорных устройств — чем больше элементов фиксируется видеокамерой/датчиками глубины, тем меньше риск неточности;
Развиваются нейронные сети — новейшие конструкции вида MobileNetV3 позволяют быстро осваивать новым особенностям облика пользователя напрямую на гаджете без пересылки информации в облачное хранилище.
Развиваются методы антиспуфинга — теперь мобильные устройства могут отличать подлинные движущиеся лица от неподвижных фото/маскировок по микроскопическим движениям кожи.
Синхронизация со интеллектуальными приборами — смарт-часы могут автоматически блокировать мобильный телефон, если владелец отошёл далеко.
Появляются гибридные системы — в частности объединяющие речевую идентификацию + физиономию + пальцевой отпечаток.

Вот, те тренды особенно актуальны на сегодняшний день:

1) Сокращение компонентов

Компании намереваются уменьшить габариты выреза (“чёлки”) под датчики на экране за счёт внедрения миниатюрных ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработка прямо на устройстве

Для повышения конфиденциальности всё более вычислений осуществляется внутри устройства без пересылки информации во внешний облачный сервис.

3) Стандартизация норм

Google энергично продвигает эталон BiometricPrompt API, для того чтобы такие системы, например как cabura, и каждые Android-программы были совместимы с различными типами биометрии единообразно.

Какое решить сегодня?

В случае если вам важна предельная защита информации, выбирайте флагманские модели с вмонтированным ИК-проектором либо ToF-сенсором глубины.

iPhone всех существующих актуальных моделей
Huawei Companion/Series P линейки
Xiaomi Expert
Vivo X линейки
Оппо Обнаружить Х линейки.

Если финансы ограничен – лучше выбирать классическим средствам безопасности (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в cabura, применять только как дополнительную возможность удобства.

Как повысить комфорт использования функции?

Есть несколько лайфхаков для людей, кто уже пользуется разблокировку по лицу:

Периодически обновляйте свою изображение-шаблон, если сильно изменяется внешность.
Не упускайте из виду очищать линзу передней камеры – загрязнения могут уменьшить точность!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам запускает фотоаппарат как только вы берёте его в руки.
При регистрации постарайтесь сохранять лицевую часть прямо перед объектива не допуская резкого наклона головы.
Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отвернулись от дисплея.

Перспективы эволюции инноваций

В ближайшие периоды можно предполагать возникновения полностью безконтактных способов опознания человека сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + звучание + манера ходьбы + жесты рук!

Также вероятно возникновение новых способов охраны конфиденциальности – к примеру, изменяющееся изменение диджитал образца после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – одна из очень увлекательных инноваций нашего времени! Она предоставляет общение со мобильным устройством комфортнее чем когда-либо прежде, и такие приложения, как кабура казино, могут в разы оптимизировать ваш пользовательский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы знаете, как функционирует эта методика внутри, – будете в состоянии вдумчиво подбирать свой будущий девайс!