Каким способом работает распознавание лиц в мобильных устройствах

Почему мы останавливаемся на разлочивание по лицевому распознаванию

В прошлые времена определение лиц превратилось в одной из самых распространённых опций для открытия мобильных телефонов. Еще пару годов тому назад основная часть юзеров обходились пин-кодами, паролями или сканерами отпечатков пальцев. Но при появлением таких технологий, как Вулкан 24, нам вполне просто взглянуть на экран — и устройство тут же узнает своего владельца.

Какая вещь обуславливает эту конкретную возможность очень нужной? Во-первых, это практично: не нужно запоминать замысловатые пароли или находить верный палец в темноте. Во-вторых, это мгновенно: современные программы идентифицируют лицо фактически за доли секунды. В-третью очередь, это чувство футуристичности — как будто в кинолентах про vulkan24 шпионов.

Впрочем за данной кажущейся несложностью прячется полный вселенная трудных методов и инженерных концепций. Попробуем понять, как именно работает фейсканирование в современных мобильных телефонах, какие существуют способы, насколько они безопасны и что нас предстоит.

Короткая повествование развития инноваций

Идентификация лиц как технология имеется уже более 50 лет. Первые попытки машинного исследования лиц были сделаны еще в 1960-х годах в научных учреждениях США. Тогда ЭВМ умели лишь определять силуэты головы и определять расстояния между зрачками и устами на ахроматических изображениях.

Изначальные бизнес платформы стали доступны в 1990-х годах, но они были далеки от совершенства: работали медленно и нередко ошибались. Только с прогрессом искусственных сетей и таких систем, как Вулкан 24 Казино, мощных мобильных процессоров определение лиц стало по-настоящему массовым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с достоверным трёхмерным идентификацией лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и прочие стали внедрять личные решения.

Главные этапы функционирования системы определения

Процесс распознавания лица можно условно поделить на несколько основных этапов:

1. Идентификация лица — аппарат определяет наличие человеческого лица в кадре.
2. Определение характеристик — система исследует особенности физиономии: форму глаз, носа, губ, положение бровей.
3. Построение шаблона — создаётся особенный электронный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со образцом — сформированный модель сравнивается с сохранённой при регистрации биометрической данными владельца.
5. Принятие выбора — если сходство достаточно значительное, смартфон разблокируется.

Каждый из указанных шагов нуждается в специальных алгоритмов и оптимизаций для быстрой работы прямо на устройстве.

Аппаратные элементы: что находится внутри них

Обычная передняя камера.

Самый простой несложный вариант распознавания физиономии применяет только лицевую камеру мобильного устройства. Данный способ внедрён во различных недорогих версиях Android-девайсов.

Достоинства:

• Не потребляет внешних датчиков.
• Быстро действует при достаточном освещении.

Отрицательные стороны:

• Просто ввести в заблуждение снимком или видеозаписью.
• Неправильно действует при плохом свете или нестандартных точках зрения.

ИК камера и точечный проекционный аппарат

Более продвинутые системы, такие как Вулкан 24 Казино, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология лежит в основе Face ID от Apple.

Каким способом это действует:

• Точечный устройство проекции проецирует на облик использующего невидимую структуру из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 точек).
• Инфракрасная камера фиксирует искривление данной решетки по плоскости лица.
• Создаётся трёхмерная карта глубинности, что почти что невозможна для имитации стандартной фотографией или маскировкой.

Преимущества

• Надёжная работа даже в полной неосвещённости.
• Сильная защита к фальсификациям.
• Точность распознавания свыше 99%.

Дополнительные сенсоры

В некоторых устройствах применяются также экстра датчики: ToF (Time-of-Flight), которые измеряют время распространения луча до цели и обратно; Трехцветные-датчики глубины; специальные световые измерители расстояния для создания более аккуратной 3D-модели лица.

Эти технологии встречаются наиболее часто во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искусственный интеллект на работе

Текущие механизмы распознавания физиономий неосуществимы без применения artificial intelligence и машинного обучения. Именно вследствие таким инновациям, как Вулкан 24 Казино, устройство может узнавать владельца даже при метаморфозах облика: новая укладка, растительность на лице, линзы или макияж не становятся препятствием для открытия.

Распознавание лица

На стартовом стадии алгоритм должна оперативно распознать образ лица внутри целого снимка камеры. Для данной цели задействуются многоуровневые классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые натренированы распознавать человеческие лица среди множества других объектов.

Пример: процесс MTCNN способен находить лицо даже в случае частичном закрытии (например, платком или рукой).

Выделение основных точек

После распознавания лица механизм, такая как Вулкан 24 Казино, определяет местоположение основных точек: уголки глаз, конец носа, контуры губ и так далее. Часто используется от 68 до 128 основных меток на лицевой области.

Это необходимо для выравнивания картинки: если юзер держит телефон под углом, или повернул головку, программа корректирует изображение до нормального состояния для дальнейшего анализа.

Создание биометрии образца

Далее нейронная сеть строит сжатое цифровое представление («эмбеддинг») облика пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 чисел с плавающей запятой.

Такой шаблон очень трудно имитировать: он не хранит непосредственно фото пользователя, а лишь исключительные характеристики его облика, что делает его совершенным для таких платформ, как Vulkan24.

Сравнение и принятие заключения

В случае, когда пользователь хочет разлочить телефон взором, система осуществляет все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный уровень (обычно выше 99%), телефон, как и платформа Vulkan24, доступен; если нет — доступ не предоставляется.

Приспособление к трансформациям внешности

Увлекательная характеристика актуальных системы — возможность самообучения. Если вы постоянно доступаете к мобильное устройство с обновленной прической или очками, система постепенно модернизирует основной модель вашего облика для увеличения точности действия без снижения уровня безопасности.

Охрана биометрии информации.

Многие пользователи опасаются держать свои био-идентификационные данные на мобильном устройстве из-за вероятности потери данных или взлома устройства. Некоторые компании, такие как Vulkan24, предлагают методы для повышения сохранности сведений клиентов.

• Локальное сбережение: Основная часть устройств хранит биометричные модели только внутри защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не оставляют гаджет и не доступны в том числе изготовителю.

• Шифрование: Все сведения сберегаются только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Программы сторонних девелоперов не обладают прямого доступа к биометрическим данным; они могут лишь запрашивать факт подтверждения идентичности через системный API.

Необходимо подчеркнуть существенную подробность: если кто-либо достанет доступ к вашему телефону физически (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие компании реализуют систему защиты от неосознанного разблокирования — к примеру, требуют раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают виды идентификации лиц?

На сегодняшний день можно выделить выделить 3 основных способа к реализации этой задачи:

Программируемое 2D распознавание

Используется только лицевая камера без вспомогательных детекторов глубины. Подобный метод встречается чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость воплощения; минимальная затраты; оперативная работа при качественном освещении.
Минусы: несложно одурачить снимком; нестабильная деятельность ночью; низкая защищенность.

Оборудование для 3D оцифровка

Задействует ИК камеру + проекционный модуль точек + сенсоры дистанции (Face ID от Apple; подобные решения у Huawei Mate).
Плюсы: большая надежность; не получится обмануть фото/видео; стабильная работа при любом освещении.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана («чёлка»)

Смешанные подходы с интеграцией ИИ

Используют комбинацию программируемых методов + аппаратно-техническую обработку + последующую обработку нейросетями для усиления устойчивости к атакам («anti-spoofing»). Например, подобные продукты, например Вулкан 24 Казино и Google Pixel Face Unlock последних поколений, объединяют фронтальную камеру c ИК сенсором мобильности Soli Radar для защиты от подделок жестами/масками/видеодисплеями посторонних устройств.

Примеры эксплуатации разнообразных методов

• iPhone модели X/11/12/13/14 применяют только физическое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition первый раз предложил подобие Face ID в числе Android.
• Samsung Galaxy S10 модель/S20 поддерживают как софтверное плоское распознавание по изображению фронталкой, так и сканер глазного ириса.
• Huawei Mate20 Pro задействует систему из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Трудности безопасности и ложные срабатывания

Несмотря на замечательный успехи техники за прошедшие лет, безупречных систем пока не наблюдается:

1. Возможность подвоха: Доступные телефоны легко доступны четкой фотографией владельца или роликом с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые идеальные системы могут перепутать между однояйцевыми близнецами либо родственниками с очень схожей внешностью.
3. Изменения внешности: Резкое снижение веса/увеличение массы тела, косметические процедуры либо повреждения порой требуют перерегистрации биометрии.
4. Условия съёмки: Яркая подсветка солнцем или же глубокая темнота могут понизить верность распознавания признаков.

Здесь несколько рекомендаций по защищённому использованию:

• Для значимых операций всегда внедряйте двухэтапную аутентификацию;
• Не запускайте возможность «Разблокировка по лицу» на бюджетных устройствах без ИК-сенсоров;
• Систематически обновляйте ПО мобильного устройства для защиты от новых видов атак;
• Включайте опцию «Требовать распахнутых глаз» везде, где она есть.

В каких областях также применяется технология за исключением мобильных телефонов?

Пускай тема нашей работы посвящена в частности мобильным устройствам, необходимо сказать о прочих направлениях внедрения технологии:

• Мониторинг входа в деловых центрах и резиденциях;
• Платёжные аппараты финансовых учреждений («Face Pay»);
• Виртуальные идентификационные документы современного образца;
• Комплексы видеонаблюдения городских сервисов;
• Автоматизация учёта присутствия учебных заведений/институтов;
• Вход участников персональных компьютеров/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по фейсу («Face Pay») — достаточно пройти через турникет без карты или мобильника! Похожие инициативы развиваются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Как изменяется технический процесс в нынешнее время?

Всякий годик проявляются свежие концепции для усовершенствования стандарта деятельности систем распознавания лиц:

1. Увеличивается детализация датчиков — чем больше деталей фиксируется видеокамерой/датчиками глубины, тем меньше риск неточности;
2. Развиваются искусственные интеллекты — передовые конструкции вида MobileNetV3 позволяют быстро обучаться дополнительным особенностям внешности владельца прямо на устройстве без пересылки информации в облачное хранилище.
3. Развиваются технологии антиспуфинга — теперь смартфоны могут отличать настоящие анимированные лица от фиксированных снимков/масок по мельчайшим микродвижениям.
4. Синхронизация со умными устройствами — интеллектуальные часы могут авто заблокировать смартфон, если владелец ушёл далеко.
5. Появляются гибридные устройства — в частности объединяющие речевую опознание + лицо + пальцевой отпечаток.

Вот, те тенденции очень актуальны сейчас:

1) Уменьшение деталей

Производители стараются сократить размер выреза («чёлки») под сенсоры на экране за счёт встраивания компактных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Переработка прямо на девайсе

Для повышения приватности всё больше обработки данных выполняется на месте без отправки данных во внешний облачный сервис.

3) Стандартизация норм

Google интенсивно продвигает эталон BiometricPrompt API, с целью чтобы подобные площадки, например как Вулкан 24, и любые Android-программы могли взаимодействовать с различными типами биометрии стандартизированно.

Какое подобрать на сегодня?

Когда вам необходима максимальная сохранность информации, подбирайте передовые устройства с вмонтированным ИК-излучателем или ToF-сенсором глубины.

• iPhone каждого актуальных поколений
• Huawei Mate/P серии
• Xiaomi Expert
• Vivo X линейки
• Oppo Find Х серии.

Если финансы невелик – лучше выбирать классическим способам защиты (PIN-код/сканер отпечатка), а опцию «разблокировка по лицу», такую как в Вулкан 24, задействовать только как дополнительную возможность удобства.

Каким способом повысить практичность функционирования возможности?

Есть несколько советов для тех, кто уже использует функцию распознавания лица:

1. Периодически обновляйте свою фотографию-шаблон, если сильно меняется облик.
2. Не упускайте из виду чистить линзу фронтальной камеры – загрязнения могут уменьшить точность!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате мобильник сам запускает камеру если вы берёте его в руки.
4. Во время записи пытайтесь сохранять лицевую часть ровно напротив объектива без сильного наклона головы.
5. Используйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отвернулись от экрана.

Возможности эволюции инноваций

В ближайшие периоды можно предполагать развития полностью дистанционных способов опознания индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + речь + шаги + жесты рук!

Также возможно возникновение новых методов охраны приватности – скажем, изменяющееся изменение диджитал образца после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – единственная из самых захватывающих инноваций нашего эпохи! Она предоставляет интеракцию со мобильным устройством проще чем раньше, и такие аппы, как Vulkan24, могут значительно повысить ваш пользовательский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы понимаете, как работает эта технология изнутри, – сможете вдумчиво выбирать свой следующий гаджет!