Каким способом работает идентификация лиц в телефонах

Зачем мы останавливаемся на разблокирование по лицевому распознаванию

В недавние времена распознавание лиц стало одной из самых популярных возможностей для деблокировки смартфонов. Еще пару лет назад основная масса пользователей обходились пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением таких технологий, например cabura, нам вполне лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Какая вещь превращает эту возможность очень нужной? Во-первых, это удобно: не нужно запоминать трудные пароли или находить нужный палец в тьме. Во-вторых, это мгновенно: современные системы идентифицируют лицо фактически за мгновение. В-третью очередь, это чувство футуристичности — как будто в кинофильмах про кабура казино шпионов.

Однако за такой кажущейся простотой скрывается весь универсум сложных техник и инженерных разработок. Позвольте нам исследовать, как именно функционирует идентификация по лицу в современных смартфонах, какие бывают методы, насколько они надёжны и что нас предстоит.

Краткая хроника развития техники

Распознавание лиц как методика имеется уже более пятидесяти годов. Первые попытки автоматизированного анализа облика были предприняты еще в 1960-х годы в научных учреждениях США. Тогда вычислительные машины способны были лишь определять силуэты черепа и измерять расстояния между глазами и устами на монохромных снимках.

Начальные коммерческие системы появились в 90-х, но они были несовершенны: действовали неспешно и часто давали сбои. Только с эволюцией нейронных сетей и таких систем, как кабура, сильных мобильных микросхем распознавание лиц стало по-настоящему массовым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с надёжным трёхмерным идентификацией лица. За этим последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали интегрировать собственные разработки.

Основные этапы действия системы распознавания

Процесс идентификации лица можно условно поделить на несколько основных этапов:

Идентификация лиц — устройство выявляет наличие человеческого лица в кадре.
Определение характеристик — система анализирует черты лица: очертания зрительных органов, обонятельного органа, уст, расположение бровей.
Построение шаблона — создаётся неповторимый виртуальный отпечаток (faceprint) на основе выделенных признаков.
Сравнение со стандартом — созданный модель сверяется со записанной при регистрации биометрической данными владельца.
Принятие выбора — если сходство достаточно существенное, смартфон разблокируется.

Любой из указанных стадий запрашивает особых методов и улучшений для скорой работы прямо на устройстве.

Технические компоненты: что скрыто внутри

Обычная передняя камера.

Наиболее легкий метод распознавания физиономии применяет исключительно фронтальную видеокамеру смартфона. Такой метод реализован во различных недорогих вариантах Android-устройств.

Плюсы:

Не потребляет внешних сенсоров.
Быстро функционирует при достаточном освещении.

Недостатки:

Легко ввести в заблуждение фотографией или роликом.
Неправильно работает при слабом свете или необычных ракурсах.

ИК камера и пунктирный проектор

Более совершенные системы, такие как кабура, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс лежит в основе Face ID от Apple.

Как это работает:

Точечный проекционный прибор отображает на физиономию использующего невидимую решетку из тысяч инфракрасных точек (например, Face ID задействует около 30 000 точек).
ИК камера записывает деформацию этой решетки по поверхности лица.
Получается трехмерная глубинная карта глубины, которая практически неподвластна для имитации типичной фотографией или маскировкой.

Преимущества

Надёжная работа даже в полной темноте.
Высокая сопротивляемость к фальсификациям.
Точность распознавания свыше 99%.

Добавочные сенсоры

В отдельных девайсах используются также вспомогательные датчики: ToF (Time-of-Flight), которые измеряют время распространения света до цели и обратно; Цветные-датчики дальности; специальные световые измерители расстояния для создания более аккуратной 3D-модели лица.

Эти технологии применяются наиболее часто во передовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные алгоритмы: искуственный интеллект в действии

Текущие механизмы идентификации физиономий неосуществимы в отсутствие эксплуатации ИИ и machine learning. Именно благодаря таким инновациям, как кабура, гаджет способно узнавать владельца даже при изменениях внешнего вида: новая укладка, борода, линзы или грим не становятся помехой для разблокировки.

Распознавание физиономии

При начальном шаге система обязана мгновенно найти лицо в пределах целого изображения камеры. Для этого задействуются каскадные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые натренированы находить человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN может обнаруживать физиономию даже в случае частичном закрытии (например, шалью или ладонью).

Определение основных точек

После идентификации лица устройство, такая как кабура, вычисляет расположение ключевых точек: кончики глаз, конец носа, контуры губ и так далее. Как правило применяется от 68 до 128 ключевых меток на лице.

Это нужно для стабилизации изображения: если пользователь находится с телефон под наклоненным, или наклонил головку, программа “выпрямляет” изображение до стандартного положения для дальнейшего анализа.

Формирование биометрического идентификатора модели

Далее искусственная сеть строит компактное математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 флоатов.

Такой формат очень затруднительно имитировать: он не сохраняет непосредственно фото юзера, а лишь исключительные черты его вида, что делает его совершенным для таких систем, как кабура казино.

Сравнительный анализ и вынесение заключения

Если человек намеревается разлочить телефон взором, программа воспроизводит все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный порог (обычно превышает 99%), телефон, как и платформа кабура казино, разблокируется; если нет — доступ не предоставляется.

Адаптация к изменениям внешнего вида

Увлекательная черта современных систем — способность самообучения. Если вы часто доступаете к телефон с обновленной укладкой или очками, система постепенно модернизирует основной образец вашего облика для улучшения точности функционирования без ухудшения безопасности.

Защита биометрических информации.

Множество пользователи боятся сохранять свои биометрические идентификационные данные на смартфоне из-за риска потери данных или взлома гаджета. Иные организации, такие как кабура казино, предлагают решения для повышения защиты информации клиентов.

Локальное хранение: Основная часть девайсов записывает биометричные модели только внутрь защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не выходят из гаджет и не доступны включая производителю.
Шифрование: Все сведения хранятся только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция приложений: Приложения третьих разработчиков не обладают прямого возможности доступа к биометрическим; они могут лишь требовать подтверждение верификации идентичности через системный API.

Стоит упомянуть существенную подробность: в случае, если кто-либо получит физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие изготовители внедряют систему защиты от неосознанного разблокирования — к примеру, требуют раскрыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются виды определения лиц на изображениях?

На сегодняшний день можно выделить определить три главных способа к осуществлению этой операции:

Софтверное двухмерное определение

Применяется только лицевая камера без вспомогательных детекторов глубины. Такой способ встречается обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота реализации; низкая затраты; быстрая деятельность при качественном свете.
Минусы: легко ввести в заблуждение снимком; ненадежная работа ночью; низкая защищенность.

Оборудование для объёмное сканирование

Задействует инфракрасную видеокамеру + проекционный модуль точек + сенсоры глубины (Face ID от Apple; подобные технологии у Huawei Mate).
Преимущества: значительная надёжность; не получится исказить фото/видео; постоянная функционирование в любых условиях освещения.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Смешанные методы с ИИ-дополнением

Задействуют комбинацию программируемых методов + аппаратно-техническую обработку + постобработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие изделия, как кабура и Google Pixel Face Unlock последних версий, комбинируют фронтальную камеру c ИК датчиком движения Soli Radar для защиты от подделок жестами/масками/видеоэкранами чужих устройств.

Образцы применения разных техник

iPhone линейки X/11/12/13/14 задействуют только техническое трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition впервые внедрил подобие Face ID в числе Android.
Samsung Galaxy S10/S20 имеют как программное двухмерное распознавание по изображению фронталкой, так и датчик глазного ириса.
Huawei Mate20 Pro использует комплекс из ИК-освещения + Dot Projector + ToF-сенсор

Трудности защиты и ложные сигналы

Несмотря на поразительный прогресс инноваций за последние годы, совершенных механизмов пока не наблюдается:

Возможность мошенничества: Доступные мобильники легко “разблокируются” четкой фотографией владельца или же видео с экрана другого устройства.
Идентичные близняшки: Даже самые совершенные устройства могут ошибиться между монозиготными близнецами либо семьями с очень аналогичной внешностью.
Изменения внешнего вида: Резкое снижение веса/увеличение массы тела, хирургические вмешательства либо травмы порой необходимы для перерегистрации биометрии.
Условия съёмки: Интенсивная засветка солнцем или же плотная тень могут снизить верность распознавания признаков.

Ниже некоторые рекомендаций по безопасному использованию:

Для значимых операций всегда внедряйте дополнительную аутентификацию;
Не активируйте опцию “Разблокировка по лицу” на бюджетных устройствах без ИК-сенсоров;
Постоянно обновляйте прошивку телефона для защиты от актуальных атак;
Включайте настройку “Требовать открытых глаз” везде, где она есть.

В каких областях дополнительно находится применение технология кроме мобильных телефонов?

Пускай тема нашей публикации сосредоточена на именно мобильным устройствам, необходимо сказать о прочих направлениях внедрения технологии:

Управление прохода в рабочих помещениях и жилых домах;
Платёжные терминалы банков (“Face Pay”);
Цифровые паспорта современного образца;
Комплексы видеоконтроля городских подразделений;
Механизация отслеживания посещаемости учебных заведений/институтов;
Авторизация пользователей компьютеров/ноутбуков.

Например: В московском метро уже проверяется система оплаты проезда по лицу (“Face Pay”) — нужно лишь пройти через турникет без карты или мобильника! Аналогичные программы реализуются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким способом трансформируется техпроцесс в нынешнее время?

Любой год появляются современные мысли для улучшения стандарта работы систем распознавания лиц:

Увеличивается детализация сенсорных устройств — чем больше информации фиксируется фотоаппаратом/глубинными сенсорами, тем меньше вероятность ошибки;
Совершенствуются нейросети — современные структуры модели MobileNetV3 обеспечивают возможность оперативно адаптироваться к свежим характеристикам внешности обладателя непосредственно на девайсе без пересылки информации в облачное хранилище.
Совершенствуются технологии антиспуфинга — теперь смартфоны умеют распознавать подлинные живые облики от неподвижных снимков/маскировок по мельчайшим микродвижениям.
Синхронизация со смарт-гаджетами — умные часы могут самостоятельно заблокировать телефон, если владелец ушёл далеко.
Возникают гибридные системы — в частности совмещающие аудио опознание + облик + дактилоскопический след.

Вот, те направления в особенности востребованы в данный момент:

1) Сокращение компонентов

Компании стараются минимизировать размер прорези (“чёлки”) под датчики на дисплее за счёт встраивания маленьких ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработка прямо на девайсе

Для улучшения приватности всё более вычислений выполняется на месте без передачи информации во сторонний облачный услугу.

3) Унификация стандартов

Гугл интенсивно продвигает эталон BiometricPrompt API, с целью чтобы аналогичные платформы, как cabura, и каждые Android-программы могли взаимодействовать с любыми видами биометрии унифицированно.

Какое решить сегодня?

Когда вам необходима максимальная защита данных, подбирайте флагманские устройства с вмонтированным ИК-излучателем или ToF-сенсором глубины.

iPhone всех существующих последних версий
Huawei Partner/P серии
Xiaomi Professional
Vivo X линейки
Оппо Find Икс серии.

Если средства ограничен – лучше отдавать предпочтение традиционным способам безопасности (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в cabura, применять только как второстепенную возможность удобства.

Каким способом улучшить комфорт использования функции?

Есть несколько хитростей для пользователей, кто уже пользуется разблокировку через лицо:

Регулярно меняйте свою фото-шаблон, если значительно изменяется внешний вид.
Не упускайте из виду протирать объектив передней камеры – загрязнения могут снизить точность!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам активирует камеру если вы берёте его в руки.
В процессе регистрации старайтесь удерживать лицо ровно впереди камеры без сильного наклона головы.
Используйте функцию “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отворачиваетесь от дисплея.

Будущее прогресса технологии

В скоро наступающие времена можно предполагать развития полностью бесконтактных способов опознания человека сразу по нескольким биометрическим параметрам одновременно: физиономия + речь + манера ходьбы + жесты рук!

Также предполагается развитие свежих подходов обеспечения приватности – скажем, изменяющееся изменение цифрового образца после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – одна из самых захватывающих техник нашего периода! Она делает взаимодействие со телефоном проще чем раньше, и такие программы, как кабура казино, могут значительно повысить ваш юзерский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы понимаете, как работает эта система внутри, – сумеете осознаннее подбирать свой следующий гаджет!