Каким способом действует распознавание лиц в смартфонах

Почему мы останавливаемся на разблокирование по лицевому распознаванию

В последние времена распознавание физиономий стало одной из наиболее востребованных функций для открытия смартфонов. Лишь пару годков назад большинство пользователей довольствовались PIN-кодами, паролями или сканерами отпечатков пальцев. Но с появлением подобных технологий, например вулкан россия, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какая вещь превращает эту особенность такой востребованной? Во-первых, это комфортно: не нужно удерживать в памяти трудные пароли или отыскивать нужный палец в мраке. Также, это оперативно: современные программы узнают лицо фактически за мгновения ока. В-третьем пункте, это впечатление футуристичности — словно в фильмах про вулкан автомат агентов.

Однако за данной кажущейся несложностью скрывается весь вселенная комплексных техник и инженерных разработок. Позвольте нам исследовать, как точно функционирует распознавание лиц в новейших гаджетах, какие бывают способы, насколько они защищены и что нас предстоит.

Сжатая хроника развития техники

Идентификация лиц как методика существует уже более 50 лет. Изначальные пробы машинного анализа лиц были осуществлены еще в 1960-х годах в научных учреждениях США. Тогда компьютеры способны были лишь обозначать очертания головы и определять дистанции между зрачками и ртом на ахроматических изображениях.

Изначальные торговые системы возникли в 1990-х годах, но они были неидеальны: функционировали медленно и часто давали сбои. Только с эволюцией искусственных сетей и таких систем, как вулкан россии, высокопроизводительных мобильных чипов идентификация лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с надёжным трёхмерным распознаванием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали интегрировать свои решения.

Основные стадии действия системы определения

Процесс распознавания лица можно примерно разделить на несколько основных этапов:

1. Распознавание лиц — камера распознает существование гуманного лица в изображении.
2. Определение признаков — система анализирует черты физиономии: конфигурацию глаз, обонятельного органа, губ, положение надбровных дуг.
3. Построение модели — создаётся уникальный электронный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со эталоном — созданный модель сверяется со записанной при учёте биометрической сведениями владельца.
5. Принятие определения — если сходство достаточно высокое, смартфон разблокируется.

Любой из этих шагов запрашивает индивидуальных процедур и улучшений для быстрой работы прямо на устройстве.

Железные компоненты: что скрыто в их недрах

Типичная селфи камера.

Наиболее легкий способ определения облика применяет только переднюю камеру смартфона мобильного устройства. Подобный подход реализован во многих бюджетных моделях Android-устройств.

Сильные стороны:

• Не нуждается в внешних сенсоров.
• Оперативно действует при достаточном свете.

Недостатки:

• Легко ввести в заблуждение изображением или роликом.
• Плохо действует при слабом свете или нестандартных точках зрения.

ИК камера и пунктирный проектор

Более усовершенствованные системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика лежит в основе Face ID от Apple.

Как это функционирует:

• Точечный проекционный прибор отображает на облик пользователя невидимую структуру из тысяч инфракрасных меток (например, Face ID применяет около 30 000 пятен).
• Инфракрасная устройство фиксирует деформацию данной решетки по поверхности лица.
• Получается трехмерная глубинная карта глубинности, которая почти что неосуществима для фальсификации стандартной фото или маской.

Преимущества

• Надёжная функционирование даже в полной тьме.
• Высокая сопротивляемость к подделкам.
• Точность идентификации свыше 99%.

Дополнительные сенсоры

В отдельных устройствах применяются также вспомогательные датчики: ToF (Time-of-Flight), которые определяют период распространения света до объекта и обратно; Цветные-датчики глубины; специальные лазерные измерители расстояния для создания более точной 3D-модели лица.

Эти технологии встречаются в основном во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные методы: синтетический ум в исполнении

Нынешние устройства опознания лиц немыслимы при отсутствии использования искусственного интеллекта и машинного обучения. Именно благодаря таким инновациям, как вулкан россии, гаджет способно узнавать владельца даже при изменениях облика: новая причёска, растительность на лице, очки или косметика не становятся барьером для открытия.

Детектирование лиц

В начальном шаге система необходимо быстро найти образ лица внутри всего кадра камеры. Для данной цели задействуются каскадные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые “обучены” распознавать лица людей среди множества других объектов.

Пример: метод MTCNN может находить лицо даже при частичном перекрытии (например, платком или ладонью).

Выделение основных аспектов

После идентификации лица система, такая как вулкан россии, устанавливает положение основных точек: кончики глаз, кончик носа, контуры губ и так далее. Обычно используется от 68 до 128 ключевых меток на лицевой области.

Это необходимо для стабилизации картинки: если человек удерживает смартфон под наклоненным, или наклонил голову, программа “выпрямляет” картинку до нормального состояния для последующего изучения.

Формирование биометрии модели

Далее искусственная сеть строит компактное цифровое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 флоатов.

Данный шаблон весьма трудно имитировать: он не хранит непосредственно изображение пользователя, а лишь особенные особенности его вида, что делает его оптимальным для таких платформ, как vulkan russia.

Сопоставление и вынесение решения

Если пользователь намеревается разлочить смартфон взглядом, механизм осуществляет все описанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный уровень (обычно выше 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ запрещается.

Приспособление к трансформациям облика

Занимательная характеристика актуальных систем — способность самообучения. Если ты постоянно разблокируете смартфон с новой стрижкой или очками, программа постепенно обновляет эталонный модель вашего лица для увеличения точности действия без снижения уровня безопасности.

Защита биометрических данных данных.

Множество клиенты опасаются держать свои био-идентификационные данные на смартфоне из-за вероятности потери данных или взлома гаджета. Определенные компании, например vulkan russia, предоставляют решения для повышения сохранности информации клиентов.

• Локальное хранение: Преимущественно устройств хранит биометрические образцы исключительно внутрь защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не оставляют гаджет и закрыты в том числе создателю.

• Шифрование: Все информация хранятся только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Приложения третьих разработчиков не имеют непосредственного возможности доступа к биометрическим данным; они могут лишь требовать факт подтверждения идентичности через системный API.

Необходимо упомянуть важную деталь: в случае, если кто-то сможет получить доступ к вашему телефону физически (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство производители реализуют систему защиты от “слепого” разблокирования — к примеру, требуют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают типы распознавания лиц на изображениях?

В настоящее время можно выделить 3 главных подхода к осуществлению этой операции:

Программное 2D определение

Используется только лицевая видеокамера без вспомогательных детекторов дистанции. Такой подход используется чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость осуществления; низкая цена; быстрая деятельность при качественном свете.
Минусы: легко ввести в заблуждение снимком; ненадежная деятельность ночью; недостаточная защищенность.

Оборудование для трёхмерное сканирование

Использует ИК видеокамеру + проектор точек + сенсоры глубины (Face ID от Apple; подобные решения у Huawei Mate).
Преимущества: значительная надежность; нельзя исказить фото/видео; устойчивая работа при любом освещении.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные подходы с ИИ-дополнением

Применяют комбинацию программных методов + аппаратную обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например вулкан россии и Google Pixel Face Unlock последних версий, сочетают фронтальную камеру c ИК сенсором мобильности Soli Radar для предотвращения от фальсификаций руками/масками/видеодисплеями чужих устройств.

Образцы использования разнообразных техник

• iPhone серии X/11/12/13/14 используют только физическое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition впервые предложил аналог Face ID в числе Android.
• Samsung Galaxy S10 версия/S20 поддерживают как программное обеспечение плоское идентификацию по фото селфи-камерой, так и сенсор глазного ириса.
• Huawei Mate20 Pro применяет комплекс из ИК-подсветки + Dot Projector + ToF-датчик

Вопросы защиты и ложные срабатывания

Несмотря на впечатляющий прогресс инноваций за прошедшие лет, совершенных механизмов пока не наблюдается:

1. Возможность подвоха: Доступные телефоны просто “разблокируются” четкой снимком пользователя или же видеозаписью с экрана другого устройства.
2. Идентичные близнецы: Даже самые безупречные системы могут перепутать между однояйцевыми близнецами либо родственниками с очень схожей внешностью.
3. Метаморфозы внешности: Стремительное утрата веса/увеличение массы тела, косметические процедуры либо повреждения в некоторых случаях необходимы для обновления данных биометрических данных.
4. Условия записи: Интенсивная засветка солнцем или интенсивная затенение могут снизить аккуратность идентификации признаков.

Ниже пара советов для надёжному эксплуатации:

• Для значимых операций всегда внедряйте двухфакторную аутентификацию;
• Не активируйте опцию “Разблокировка по лицу” на недорогих аппаратах без ИК-сенсоров;
• Систематически обновляйте ПО смартфона для обеспечения безопасности от новых видов атак;
• Включайте функцию “Требовать раскрытых глаз” в тех местах, где она имеется.

В каких местах дополнительно используется технология кроме смартфонов?

Пускай тема нашей работы сосредоточена на в частности смартфонам и планшетам, необходимо сказать о прочих направлениях внедрения технологии:

• Мониторинг прохода в рабочих помещениях и жилых домах;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Виртуальные паспорта современного поколения;
• Установки видеомониторинга муниципальных служб;
• Автоматизирование учёта явки учебных заведений/университетов;
• Аутентификация участников персональных компьютеров/ноутбуков.

Например: В столичном метро уже испытывается система платежа проезда по фейсу (“Face Pay”) — нужно лишь пройти через турникет без пластика или мобильника! Аналогичные инициативы осуществляются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Как изменяется техпроцесс в наше время?

Любой год появляются свежие концепции для усовершенствования качества работы систем распознавания лиц:

1. Увеличивается чёткость сенсорных устройств — чем больше информации фиксируется камерой/датчиками глубины, тем меньше шанс ошибки;
2. Совершенствуются нейронные сети — современные структуры типа MobileNetV3 позволяют оперативно обучаться свежим чертам внешности владельца прямо на устройстве без пересылки информации в облачное хранилище.
3. Совершенствуются технологии антиспуфинга — теперь мобильные устройства умеют отличать подлинные анимированные лица от фиксированных снимков/маскировок по мельчайшим микродвижениям.
4. Интеграция со умными устройствами — смарт-часы могут авто блокировать мобильный телефон, если владелец удалился на значительное расстояние.
5. Возникают гибридные механизмы — например комбинирующие голосовую опознание + облик + пальцевой отпечаток.

Здесь, которые тенденции в особенности актуальны сейчас:

1) Уменьшение элементов

Производители пытаются сократить размер выреза (“чёлки”) для сенсоры на дисплее за счёт встраивания маленьких ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Переработка прямо на устройстве

Для повышения личной безопасности всё более обработки данных осуществляется внутри устройства без передачи данных во дополнительный облачный сервис.

3) Унификация норм

Google интенсивно продвигает эталон BiometricPrompt API, с целью чтобы такие системы, вроде вулкан россия, и каждые Android-приложения могли взаимодействовать с различными типами биометрии стандартизированно.

Какое выбрать сегодня?

В случае если вам всем необходима предельная защита информации, остановите выбор на топовые устройства с вмонтированным ИК-проектором либо ToF-сенсором глубины.

• iPhone всех существующих новейших моделей
• Huawei Partner/Series P серии
• Xiaomi Expert
• Vivo X серии
• Oppo Find X линейки.

Если средства невелик – лучше выбирать традиционным методам безопасности (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в вулкан россия, использовать только как дополнительную опцию удобства.

Каким способом увеличить практичность использования опции?

Есть несколько хитростей для людей, кто уже применяет разблокировку через лицо:

1. Регулярно обновляйте свою фотографию-шаблон, если значительно трансформируется облик.
2. Не пренебрегайте протирать линзу фронтальной камеры – загрязнения могут понизить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам включает камеру когда вы поднимаете его.
4. Во время записи постарайтесь сохранять лицевую часть прямо напротив камеры не допуская значительного наклона головы.
5. Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отворачиваетесь от экрана.

Будущее развития технологии

В предстоящие годы можно предполагать возникновения полностью бесконтактных способов идентификации индивидуума сразу по нескольким биометрическим параметрам одновременно: физиономия + голос + походка + движения рук!

Также вероятно развитие свежих методов охраны приватности – скажем, переменное изменение цифрового образца после каждой удачной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из очень интересных инноваций нашего эпохи! Она предоставляет взаимодействие со телефоном удобнее чем до этого, и такие аппы, как vulkan russia, могут существенно улучшить ваш пользовательский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы осведомлены, как устроена эта методика внутри, – сумеете более осмысленно подбирать свой следующий девайс!