Каким способом функционирует распознавание лиц в телефонах

Для чего мы останавливаемся на разлочивание по лицевому распознаванию

В последние годы распознавание физиономий превратилось в одной из наиболее востребованных функций для открытия смартфонов. Всего пару лет ранее большинство использующих обходились пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но при появлением таких технологий, как вулкан россия, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какой аспект обуславливает данную функцию очень нужной? Во-первых, это комфортно: не нужно удерживать в памяти замысловатые пароли или искать верный палец в тьме. Во-вторых, это мгновенно: современные программы узнают лицо буквально за мгновение. В-третью очередь, это чувство футуризма — как будто в фильмах про вулкан казино агентов.

Однако за этой на первый взгляд простотой скрывается целый вселенная сложных методов и инженерных концепций. Попробуем разобраться, как конкретно действует распознавание лиц в актуальных гаджетах, какие бывают технологии, насколько они защищены и что нас ожидает в будущем.

Краткая история прогресса технологии

Идентификация лиц как технология присутствует уже более 50 лет. Начальные пробы автоматизированного изучения лица были предприняты еще в 1960-х годы в научных учреждениях США. Тогда компьютеры умели лишь выделять контуры черепа и определять расстояния между очами и губами на монохромных фотографиях.

Первые бизнес платформы появились в 1990-х годах, но они были несовершенны: работали медленно и нередко ошибались. Только с прогрессом синтетических сетей и таких систем, как вулкан россии, мощных мобильных микросхем распознавание лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным сканированием лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали интегрировать собственные решения.

Главные шаги действия системы идентификации

Процесс идентификации лица можно условно сегментировать на несколько основных этапов:

1. Обнаружение лица — аппарат выявляет присутствие людского лица в кадре.
2. Определение признаков — алгоритм изучает черты лица: форму глаз, носа, губ, расположение надбровных дуг.
3. Построение модели — создаётся уникальный виртуальный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со эталоном — созданный шаблон сверяется со зафиксированной при внесении биометрической информацией владельца.
5. Принятие определения — если совпадение достаточно высокое, смартфон разблокируется.

Всякий из указанных этапов требует индивидуальных алгоритмов и оптимизаций для оперативной работы прямо на устройстве.

Железные элементы: что скрыто внутри

Типичная передняя камера.

Простейший легкий способ определения лица применяет лишь переднюю видеокамеру смартфона. Подобный способ реализован во многих недорогих моделях Android-устройств.

Положительные стороны:

• Не нуждается в нуждается в внешних сенсоров.
• Оперативно функционирует при качественном освещённости.

Отрицательные стороны:

• Несложно обмануть фотографией или видеозаписью.
• Неудачно работает при низком свете или нестандартных точках зрения.

ИК камера и точечный проекционный аппарат

Более продвинутые системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология составляет базу Face ID от Apple.

Каким образом это действует:

• Точечный проекционный прибор отображает на физиономию использующего невидимую сетку из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 меток).
• Инфракрасная устройство записывает искривление этой решетки по поверхности физиономии.
• Получается 3D глубинная карта глубинности, что почти что невозможна для подделки типичной фото или маскировкой.

Достоинства

• Надёжная деятельность даже в полной неосвещённости.
• Сильная устойчивость к подделкам.
• Точность распознавания свыше 99%.

Дополнительные датчики

В определённых аппаратах задействуются также дополнительные датчики: ToF (Time-of-Flight), которые фиксируют время движения света до объекта и обратно; Трехцветные-датчики глубины; специальные оптические лидары для формирования более аккуратной 3D-модели физиономии.

Эти технологии используются в основном во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: искуственный ум на действии

Нынешние системы опознания физиономий невозможны без эксплуатации ИИ и машинного обучения. Именно благодаря таким инновациям, как вулкан россии, аппарат способно распознавать владельца даже при изменениях внешности: новая стрижка, растительность на лице, оптика или макияж не становятся барьером для деблокировки.

Распознавание физиономии

В начальном стадии система необходимо оперативно обнаружить образ лица среди целого кадра камеры. Для этой задачи задействуются многоуровневые классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые подготовлены идентифицировать человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN в состоянии обнаруживать лицо даже при неполном перекрытии (например, шарфом или рукой).

Идентификация ключевых аспектов

После распознавания лица система, такая как вулкан россии, вычисляет расположение основных точек: края глаз, верхушка носа, границы губ и так далее. Обычно применяется от 68 до 128 ключевых маркеров на лицевой поверхности.

Данное нужно для выравнивания изображения: если человек удерживает телефон под наклоненным, или наклонил голову, программа “выпрямляет” картинку до нормального состояния для дальнейшего анализа.

Формирование биометрического образца

Далее нейронная сеть строит компактное цифровое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой след внешности длиной от 128 до 512 флоатов.

Такой образец весьма затруднительно подделать: он не хранит само изображение юзера, а лишь особенные черты его внешности, что делает его оптимальным для таких систем, как vulkan russia.

Сравнительный анализ и вынесение выбора

В случае, когда юзер хочет разлочить смартфон глазами, программа воспроизводит все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый порог (обычно выше 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ не предоставляется.

Адаптация к метаморфозам внешнего вида

Занимательная характеристика нынешних системы — возможность самостоятельного обучения. Если ты регулярно открываете телефон с новой укладкой или оптикой, программа постепенно освежает эталонный образец вашего внешности для улучшения точности функционирования без ухудшения безопасности.

Безопасность биометрических данных.

Большинство юзеры беспокоятся сохранять свои биометрические данные на смартфоне из-за угрозы утечки информации или взлома гаджета. Иные организации, такие как vulkan russia, предлагают решения для улучшения безопасности сведений юзеров.

• Локальное сохранение: Основная часть аппаратов сохраняет био-идентификационные модели лишь внутри безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не выходят из гаджет и не доступны даже производителю.

• Шифрование: Все сведения сберегаются только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Приложения третьих разработчиков не обладают прямого доступа к биометрическим; они могут лишь требовать факт подтверждения личности через системный API.

Следует подчеркнуть существенную подробность: в случае, если кто-либо сможет получить физический доступ к вашему телефону (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие компании реализуют систему защиты от неосознанного разблокирования — к примеру, просят открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют категории определения лиц на изображениях?

Сегодня можно определить 3 основных способа к осуществлению этой задачи:

Софтверное 2D идентификация

Эксплуатируется только фронтальная камера без экстра сенсоров глубины. Этот подход встречается наиболее часто в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость реализации; минимальная стоимость; оперативная деятельность при хорошем освещении.
Минусы: легко обмануть снимком; нестабильная функционирование ночью; недостаточная безопасность.

Техническое 3D сканирование

Применяет инфракрасную камеру + проекционный модуль пикселей + датчики глубины (Face ID от Apple; аналогичные решения у Huawei Mate).
Достоинства: значительная надежность; нельзя подделать фото/видео; постоянная работа в любых условиях освещения.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные способы с ИИ-дополнением

Задействуют комбинацию программируемых методов + техническую обработку + постобработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие продукты, как вулкан россии и Google Pixel Face Unlock новейших версий, сочетают фронтальную камеру c инфракрасным сенсором мобильности Soli Radar для защиты от фальсификаций жестами/масками/видеодисплеями чужих устройств.

Образцы применения разных методов

• iPhone модели X/11/12/13/14 применяют только аппаратное трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition первый раз предложил подобие Face ID среди Android.
• Samsung Galaxy S10 версия/S20 обеспечивают как софтверное двухмерное определение по фото фронталкой, так и датчик ириса глаза.
• Huawei Mate20 Pro применяет систему из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Трудности безопасности и неверные тревоги

Несмотря на замечательный развитие технологий за недавние лет, совершенных механизмов пока не существует:

1. Вероятность подвоха: Бюджетные мобильники легко “разблокируются” качественной изображением владельца либо видеозаписью с дисплея иного гаджета.
2. Идентичные близнецы: Даже самые безупречные механизмы могут ошибиться между однояйцевыми близнецами либо семьями с очень аналогичной внешностью.
3. Трансформации внешности: Стремительное утрата веса/увеличение массы тела, пластические операции либо травмы порой требуют перерегистрации биометрических данных.
4. Условия записи: Интенсивная засветка солнцем либо плотная тень могут уменьшить аккуратность идентификации признаков.

Здесь несколько советов по безопасному использованию:

• Для значимых операций всегда внедряйте двухфакторную аутентификацию;
• Не включайте возможность “Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
• Постоянно апгрейдите прошивку мобильного устройства для защиты от актуальных атак;
• Включайте опцию “Требовать раскрытых глаз” везде, где она доступна.

Где также используется технологии за исключением мобильных телефонов?

Хотя тема этой статьи касается в частности мобильным устройствам, стоит упомянуть о прочих направлениях внедрения технологии:

• Управление доступа в офисах и резиденциях;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Виртуальные паспорта современного типа;
• Комплексы видеонаблюдения городских служб;
• Автоматизирование регистрации присутствия образовательных учреждений/институтов;
• Авторизация пользователей ПК/ноутбуков.

Например: В московском метро уже тестируется система оплаты проезда по лицу (“Face Pay”) — нужно лишь пройти через барьер без пластика или мобильника! Аналогичные программы реализуются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом трансформируется технология сегодня?

Всякий год возникают свежие идеи для улучшения стандарта работы систем идентификации лиц:

1. Увеличивается чёткость датчиков — чем больше информации фиксируется камерой/глубинными сенсорами, тем меньше вероятность ошибки;
2. Улучшаются нейросети — современные структуры вида MobileNetV3 обеспечивают возможность оперативно осваивать свежим чертам вида владельца напрямую на гаджете без пересылки информации в облачное хранилище.
3. Улучшаются методы антиспуфинга — теперь мобильные устройства способны отличать настоящие живые лица от неподвижных фото/масок по микроскопическим движениям кожи.
4. Взаимодействие со интеллектуальными приборами — интеллектуальные часы могут авто закрыть доступ к мобильный телефон, если пользователь отошёл далеко.
5. Возникают смешанные механизмы — в частности объединяющие голосовую идентификацию + лицо + дактилоскопический след.

Вот, какие тренды особенно востребованы на сегодняшний день:

1) Уменьшение деталей

Производители намереваются уменьшить размер прорези (“чёлки”) под сенсоры на дисплее за счёт интеграции миниатюрных ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Переработка прямо на устройстве

Для увеличения конфиденциальности всё более обработки данных осуществляется локально без пересылки данных во дополнительный облачный услугу.

3) Стандартизация норм

Google энергично продвигает эталон BiometricPrompt API, чтобы подобные платформы, вроде вулкан россия, и все Android-программы были совместимы с различными типами биометрии стандартизированно.

Какое решить сегодня?

Если тебе нужна максимальная защита информации, остановите выбор на топовые устройства с интегрированным ИК-проектором либо ToF-датчиком глубины.

• iPhone всех новейших моделей
• Huawei Mate/P Series серии
• Mix Expert
• Vivo X серии
• Oppo Найти Икс серий.

Если финансы невелик – лучше предпочесть обычным средствам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в вулкан россия, задействовать только как второстепенную опцию комфорта.

Каким способом улучшить практичность работы опции?

Есть некоторые хитростей для тех, кто уже пользуется разблокировку через лицо:

1. Часто меняйте свою изображение-шаблон, если кардинально меняется внешность.
2. Не упускайте из виду протирать объектив передней камеры – разводы могут снизить четкость!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам включает фотоаппарат как только вы поднимаете его.
4. При регистрационного процесса пытайтесь держать лицо неподвижно напротив объектива исключая сильного наклона головы.
5. Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отвели взгляд от дисплея.

Перспективы эволюции технологии

В ближайшие периоды можно предвкушать развития полностью дистанционных способов опознания человека сразу по нескольким биометрическим параметрам одновременно: лицо + голос + походка + манипуляции руками!

Также предполагается появление современных подходов обеспечения приватности – скажем, динамическое модификация диджитал шаблона после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее интересных технологий нашего времени! Она предоставляет интеракцию со телефоном проще чем до этого, и такие аппы, как vulkan russia, могут в разы повысить ваш опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы знаете, как работает эта система изнутри, – сумеете вдумчиво определять свой следующий гаджет!