Каким способом функционирует идентификация лицевых образов в мобильных устройствах

Зачем мы предпочитаем разблокировку по лицевому распознаванию

В последние времена определение лиц стало одной из наиболее востребованных возможностей для открытия умных телефонов. Еще пару годов назад основная часть использующих обходились пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но с появлением таких технологий, например Вулкан Платинум, нам вполне просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Какой аспект обуславливает эту конкретную возможность очень нужной? Во-первых, это практично: не нужно удерживать в памяти трудные пароли или отыскивать нужный палец в темноте. Кроме того, это мгновенно: современные алгоритмы идентифицируют лицо фактически за доли секунды. В-третьих, это чувство футуристичности — как будто в кинолентах про vulkan platinum разведчиков.

Однако за этой кажущейся легкостью таится полный универсум трудных технологий и инженерных разработок. Попробуем понять, как именно действует фейсканирование в новейших мобильных телефонах, какие бывают методы, насколько они защищены и что нас ожидает в будущем.

Короткая хроника эволюции инноваций

Идентификация лиц как техника существует уже более пятидесяти лет. Первые пробы машинного анализа облика были осуществлены еще в 1960-х годы в исследовательских центрах США. Тогда вычислительные машины способны были лишь обозначать очертания черепа и определять дистанции между зрачками и ртом на ахроматических снимках.

Изначальные бизнес платформы стали доступны в девяностых годах, но они были далеки от совершенства: действовали неспешно и часто ошибались. Только с прогрессом искусственных сетей и таких систем, как Vulkan Platinum, мощных мобильных чипов идентификация лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным идентификацией лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали интегрировать свои разработки.

Основные шаги действия системы определения

Процесс идентификации лица можно примерно поделить на несколько основных этапов:

Обнаружение лиц — камера определяет существование гуманного образа в кадре.
Определение характеристик — система исследует особенности лица: очертания глаз, обонятельного органа, уст, позицию бровей.
Построение шаблона — создаётся особенный цифровой отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение с эталоном — полученный модель сравнивается с записанной при учёте биометрической информацией владельца.
Принятие определения — если соответствие достаточно значительное, смартфон открывается.

Любой из этих этапов требует индивидуальных алгоритмов и улучшений для скорой работы непосредственно на девайсе.

Технические компоненты: что скрыто внутри

Обычная селфи камера.

Самый несложный вариант идентификации облика применяет только переднюю камеру мобильного устройства. Подобный подход реализован во различных бюджетных версиях Android-устройств.

Плюсы:

Не нуждается в нуждается в дополнительных датчиков.
Оперативно действует при качественном свете.

Слабые стороны:

Несложно одурачить изображением или роликом.
Неудачно функционирует при низком освещении или нестандартных углах обзора.

ИК камера и пунктирный проекционный аппарат

Более продвинутые системы, такие как Vulkan Platinum, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс является основой Face ID от Apple.

Как это действует:

Точечный устройство проекции отображает на физиономию юзера невидимую решетку из тысяч инфракрасных меток (например, Face ID задействует около 30 000 точек).
ИК устройство фиксирует деформацию данной решетки по поверхности лица.
Получается трехмерная карта глубины глубины, которая почти неосуществима для имитации стандартной фото или маскировкой.

Достоинства

Надёжная работа даже в полной неосвещённости.
Сильная устойчивость к имитациям.
Точность идентификации свыше 99%.

Добавочные сенсоры

В отдельных девайсах задействуются также экстра датчики: ToF (Time-of-Flight), которые измеряют время прохождения луча до предмета и обратно; Цветные-датчики дальности; специальные световые дальномеры для построения более детализированной 3D-модели лица.

Эти технологии применяются в основном во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: искуственный разум на действии

Нынешние устройства опознания лиц невозможны без использования искусственного интеллекта и машинного обучения. Именно вследствие таким технологиям, как Vulkan Platinum, гаджет в состоянии узнавать пользователя даже при изменениях внешности: новая причёска, растительность на лице, очки или грим не становятся препятствием для разблокировки.

Обнаружение физиономии

В первом этапе система должна мгновенно найти образ лица среди полного изображения с камеры. Для этой задачи задействуются каскадные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые „обучены” идентифицировать человеческие лица среди множества других объектов.

Пример: метод MTCNN способен распознавать облик даже в случае частичном перекрытии (например, шарфом или ладонью).

Выделение ключевых аспектов

После распознавания лица устройство, такая как Vulkan Platinum, определяет расположение ключевых точек: края глаз, верхушка носа, границы губ и так далее. Часто задействуется от 68 до 128 основных точек на лицевой области.

Это необходимо для стабилизации изображения: если человек держит телефон под углом, или повернул голову, программа „выпрямляет” картинку до обычного угла для дальнейшего анализа.

Создание биометрии модели

Далее нейронная сеть строит компактное математическое представление („эмбеддинг”) внешности пользователя — своеобразный цифровой „отпечаток” лица длиной от 128 до 512 вещественных чисел.

Этот образец весьма сложно сфальсифицировать: он не сохраняет непосредственно изображение пользователя, а лишь исключительные особенности его вида, что делает его совершенным для таких площадок, как Вулкан Казино Платинум.

Сопоставление и принятие заключения

Если юзер желает открыть смартфон глазами, механизм воспроизводит все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный границу (обычно превышает 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ блокируется.

Адаптация к изменениям облика

Увлекательная характеристика актуальных систем — возможность самостоятельного обучения. Если вы постоянно разблокируете смартфон с свежей прической или оптикой, алгоритм постепенно освежает базовый модель вашего внешности для улучшения точности функционирования без ухудшения безопасности.

Безопасность биометрических данных информации.

Множество юзеры боятся хранить свои биометрические данные на телефоне из-за вероятности потери данных или взлома устройства. Некоторые организации, вроде Вулкан Казино Платинум, предлагают решения для повышения защиты данных юзеров.

Локальное хранение: Основная часть аппаратов сохраняет био-идентификационные образцы лишь внутрь безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не покидают устройство и не доступны в том числе создателю.
Шифрование: Все сведения сохраняются только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция приложений: Приложения сторонних девелоперов не обладают прямого доступа к биометрическим данным; они могут лишь требовать факт верификации идентичности через системный API.

Стоит упомянуть существенную деталь: если кто-либо сможет получить физический доступ к вашему телефону (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество производители осуществляют меры безопасности от автоматического разблокирования — например, заставляют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают виды определения лиц?

Сегодня можно определить выделить 3 ключевых способа к реализации этой задачи:

Софтверное 2D распознавание

Применяется только лицевая видеокамера без экстра датчиков глубины. Подобный способ встречается наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота воплощения; низкая затраты; скоростная работа при хорошем освещении.
Минусы: несложно ввести в заблуждение снимком; неустойчивая функционирование ночью; слабая охрана.

Оборудование для 3D оцифровка

Использует ИК видеокамеру + проектор пикселей + датчики дистанции (Face ID у Apple; подобные решения у Huawei Mate).
Достоинства: большая достоверность; не получится подделать фото/видео; устойчивая работа в любых условиях освещения.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана („чёлка”)

Смешанные способы с ИИ-дополнением

Применяют комбинацию программируемых методов + техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам („anti-spoofing”). Например, такие товары, как Vulkan Platinum и Google Pixel Face Unlock современных поколений, комбинируют фронтальную камеру c инфракрасным сенсором мобильности Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями посторонних устройств.

Примеры эксплуатации разных методов

iPhone серии X/11/12/13/14 задействуют только физическое трёхмерное сканирование
Xiaomi Mi8 Explorer Edition в первый раз представил эквивалент Face ID в ряду Android.
Samsung Galaxy S10/S20 поддерживают как софтверное плоское определение по снимку фронтальной камерой, так и сенсор глазного ириса.
Huawei Mate20 Pro задействует набор из ИК-подсветки + Dot Projector + ToF-датчик

Вопросы защиты и ошибочные сигналы

Несмотря на поразительный развитие техники за недавние лет, безупречных систем пока не имеется:

Шанс обмана: Недорогие телефоны без труда доступны четкой снимком владельца или видеозаписью с дисплея иного гаджета.
Идентичные близняшки: Даже самые совершенные системы могут спутать между монозиготными близнецами либо семьями с очень похожей внешностью.
Трансформации внешности: Внезапное снижение веса/увеличение массы тела, косметические процедуры или повреждения в некоторых случаях требуют перерегистрации биометрических данных.
Условия записи: Яркая засветка солнцем или плотная тень могут уменьшить аккуратность определения признаков.

Здесь некоторые советов по надёжному использованию:

Для значимых операций всегда применяйте дополнительную аутентификацию;
Не включайте возможность „Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
Регулярно обновляйте программное обеспечение телефона для защиты от актуальных атак;
Включайте опцию „Требовать раскрытых глаз” в тех местах, где она имеется.

В каких местах ещё используется технологии помимо мобильных телефонов?

Несмотря на то, что тема этой работы сосредоточена на конкретно мобильным устройствам, следует отметить прочих направлениях внедрения технологии:

Контроль входа в офисах и жилых домах;
Платёжные устройства банков („Face Pay”);
Электронные идентификационные документы последнего типа;
Системы видеоконтроля городских служб;
Механизация учёта присутствия учебных заведений/институтов;
Вход юзеров ПК/ноутбуков.

Например: В столичном метро уже тестируется система оплаты проезда по фейсу („Face Pay”) — достаточно пройти через барьер без карты или мобильника! Аналогичные инициативы реализуются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким способом изменяется технология в нынешнее время?

Каждый год проявляются современные мысли для усовершенствования качества деятельности систем распознавания лиц:

Увеличивается разрешение сенсорных устройств — чем больше элементов фиксируется видеокамерой/датчиками глубины, тем меньше риск неточности;
Развиваются нейросети — новейшие архитектуры вида MobileNetV3 дают возможность быстро обучаться новым характеристикам облика пользователя непосредственно на девайсе без отправки данных в облако.
Совершенствуются технологии антиспуфинга — теперь смартфоны могут распознавать подлинные движущиеся облики от неподвижных фотографий/масок по мельчайшим микродвижениям.
Взаимодействие со смарт-гаджетами — умные часы могут самостоятельно закрыть доступ к телефон, если пользователь отошёл далеко.
Проявляются смешанные системы — к примеру объединяющие речевую опознание + лицо + пальцевой отпечаток.

Вот, которые направления в особенности актуальны на сегодняшний день:

1) Уменьшение деталей

Компании намереваются минимизировать размер прорези („чёлки”) под датчики на экране за счёт встраивания миниатюрных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработка прямо на аппарате

Для увеличения приватности всё больше вычислений происходит локально без пересылки информации во дополнительный облачный сервис.

3) Упорядочивание стандартов

Google энергично продвигает норму BiometricPrompt API, с целью чтобы аналогичные системы, как Вулкан Платинум, и любые Android-программы могли взаимодействовать с различными типами биометрии унифицированно.

Какое подобрать сегодня?

В случае если вам всем важна наивысшая сохранность данных, подбирайте топовые модели со встроенным ИК-излучателем или ToF-сенсором глубины.

iPhone всех новейших поколений
Huawei Mate/P Series ряда
Xiaomi Expert
Vivo X линейки
Oppo Find X линейки.

Если средства невелик – лучше отдавать предпочтение классическим способам защиты (PIN-код/сканер отпечатка), а опцию „разблокировка по лицу”, такую как в Вулкан Платинум, применять только как второстепенную возможность комфорта.

Как увеличить удобство функционирования возможности?

Есть пара лайфхаков для людей, кто уже использует функцию распознавания лица:

Часто меняйте свою изображение-шаблон, если сильно изменяется внешний вид.
Не пренебрегайте протирать объектив фронтальной камеры – загрязнения могут снизить точность!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам запускает фотоаппарат если вы берёте его в руки.
Во время регистрационного процесса старайтесь сохранять голову прямо напротив объектива без значительного наклона головы.
Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отвернулись от экрана.

Будущее развития инноваций

В предстоящие годы можно ожидать появления полностью дистанционных способов опознания индивидуума сразу по нескольким биометрическим данным параметрам одновременно: физиономия + речь + манера ходьбы + жесты рук!

Также предполагается развитие современных подходов обеспечения приватности – к примеру, динамическое корректировка электронного паттерна после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень увлекательных инноваций нашего эпохи! Она обеспечивает интеракцию со смартфоном проще чем когда-либо прежде, и такие аппы, как Вулкан Казино Платинум, могут существенно повысить ваш опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы знаете, как работает эта система внутри, – сумеете осознаннее выбирать свой следующий девайс!