Каким образом работает определение лиц в мобильных устройствах

Почему мы останавливаемся на разблокирование по лицевому распознаванию

В недавние времена определение лиц является одной из самых распространённых функций для разблокировки умных телефонов. Еще пару лет тому назад большинство юзеров довольствовались пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но при появлением подобных технологий, например вулкан россия, нам вполне лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Какая вещь превращает данную функцию очень нужной? Для начала, это удобно: не нужно помнить сложные пароли или находить верный палец в тьме. Во-вторых, это мгновенно: современные алгоритмы распознают лицо практически за мгновения ока. В-третьем пункте, это ощущение футуристичности — будто в кинофильмах про vulkan russia разведчиков.

Однако за данной кажущейся простотой таится полный универсум трудных технологий и инженерных решений. Давайте понять, как конкретно работает идентификация по лицу в новейших смартфонах, какие бывают способы, насколько они защищены и что нас предстоит.

Короткая история прогресса инноваций

Идентификация лиц как технология имеется уже более пятидесяти лет. Первые эксперименты машинного анализа облика были осуществлены еще в 1960-х годы в научных учреждениях США. Тогда компьютеры могли лишь обозначать контуры головы и определять промежутки между глазами и ртом на черно-белых фотографиях.

Начальные торговые системы стали доступны в 90-х, но они были далеки от совершенства: работали медленно и нередко ошибались. Только с эволюцией синтетических сетей и таких площадок, как вулкан россии, сильных мобильных чипов распознавание лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным идентификацией лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие начали интегрировать личные разработки.

Ключевые стадии действия механизма идентификации

Процесс определения лица можно ориентировочно поделить на несколько ключевых этапов:

1. Идентификация лиц — камера определяет существование людского образа в снимке.
2. Выделение признаков — система анализирует черты лица: форму зрительных органов, носа, губ, положение бровей.
3. Построение структуры — создаётся уникальный виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с образцом — полученный шаблон сверяется со сохранённой при регистрации биометрической данными владельца.
5. Принятие определения — если сходство достаточно высокое, смартфон разблокируется.

Всякий из этих шагов запрашивает особых методов и оптимизаций для быстрой работы прямо на устройстве.

Технические элементы: что прячется внутри

Обычная селфи камера.

Наиболее легкий вариант идентификации облика задействует лишь лицевую камеру мобильного устройства. Такой подход внедрён во многочисленных бюджетных вариантах Android-устройств.

Плюсы:

• Не нуждается в внешних датчиков.
• Быстро функционирует при хорошем свете.

Отрицательные стороны:

• Просто ввести в заблуждение снимком или роликом.
• Неправильно функционирует при низком освещённости или нестандартных ракурсах.

Инфракрасная фотокамера и точечный проектор

Более совершенные системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика составляет базу Face ID от Apple.

Как это работает:

• Точечный проекционный прибор отображает на лицо юзера невидимую сетку из тысяч инфракрасных точек (например, Face ID применяет около 30 000 точек).
• Инфракрасная камера регистрирует искривление данной сетки по поверхности физиономии.
• Формируется 3D карта глубины глубины, которая практически неподвластна для фальсификации стандартной фотографией или маской.

Плюсы

• Надёжная функционирование даже в полной неосвещённости.
• Сильная устойчивость к фальсификациям.
• Точность определения выше 99%.

Дополнительные сенсоры

В определённых девайсах задействуются также дополнительные сенсоры: ToF (Time-of-Flight), которые измеряют период распространения света до цели и обратно; Цветные-датчики глубины; специальные световые лидары для создания более точной 3D-модели лица.

Эти инновации встречаются чаще всего во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: синтетический разум на исполнении

Нынешние устройства распознавания лиц неосуществимы при отсутствии использования ИИ и машинного обучения. Именно благодаря таким разработкам, как вулкан россии, устройство может идентифицировать владельца даже при трансформациях внешности: новая укладка, борода, очки или грим не становятся барьером для разблокировки.

Детектирование физиономии

При стартовом шаге алгоритм необходимо мгновенно распознать образ лица среди всего кадра камеры. Для этого задействуются последовательные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые подготовлены находить человеческие лица среди множества других объектов.

Пример: метод MTCNN способен обнаруживать физиономию даже с частичном перекрытии (например, шалью или рукой).

Выделение ключевых моментов

После распознавания лица механизм, такая как вулкан россии, определяет местоположение главных точек: кончики глаз, кончик носа, границы губ и так далее. Часто задействуется от 68 до 128 главных меток на лицевой поверхности.

Это требуется для стабилизации картинки: если пользователь находится с смартфон под углом, или склонил головку, программа “выпрямляет” картинку до стандартного положения для дальнейшего анализа.

Формирование биометрического образца

Далее искусственная сеть строит сжатое цифровое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 вещественных чисел.

Данный образец весьма затруднительно сфальсифицировать: он не сохраняет само фото пользователя, а лишь исключительные особенности его облика, что делает его идеальным для таких платформ, как vulkan russia.

Сопоставление и вынесение заключения

Если человек хочет открыть мобильник взором, программа воспроизводит все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный порог (обычно превышает 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ блокируется.

Адаптация к метаморфозам внешности

Увлекательная особенность актуальных системы — способность самообучения. Если ты часто открываете телефон с обновленной стрижкой или оптикой, программа постепенно обновляет эталонный модель вашего внешности для улучшения точности функционирования без снижения уровня безопасности.

Защита биометрических данных информации.

Множество юзеры опасаются сохранять свои биометрические идентификационные данные на мобильном устройстве из-за угрозы утечки информации или взлома гаджета. Иные организации, такие как vulkan russia, предлагают варианты для увеличения безопасности данных юзеров.

• Локальное сбережение: Основная часть аппаратов сохраняет биометрические модели исключительно внутри защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не оставляют гаджет и недоступны включая производителю.

• Шифрование: Все данные хранятся только в кодированном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Программы сторонних разработчиков не имеют прямого возможности доступа к биометрическим данным; они могут лишь требовать подтверждение верификации идентичности через системный API.

Следует подчеркнуть важную особенность: если кто-то сможет получить доступ к вашему телефону физически (например, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество производители реализуют меры безопасности от “слепого” разблокирования — в частности, заставляют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются типы определения лиц на изображениях?

В настоящее время можно различить три ключевых метода к выполнению этой операции:

Софтверное плоское определение

Эксплуатируется только передняя видеокамера без экстра сенсоров глубины. Такой подход встречается чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость осуществления; умеренная стоимость; оперативная деятельность при качественном освещении.
Минусы: несложно одурачить снимком; ненадежная функционирование ночью; недостаточная защищенность.

Аппаратное объёмное сканирование

Использует инфракрасную камеру + проектор точек + сенсоры дистанции (Face ID от Apple; аналогичные технологии у Huawei Mate).
Достоинства: значительная надежность; не получится подделать фото/видео; устойчивая функционирование в любых условиях освещения.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Комбинированные способы с интеграцией ИИ

Задействуют комбинацию программируемых методов + техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например вулкан россии и Google Pixel Face Unlock современных поколений, объединяют фронтальную камеру c инфракрасным датчиком движения Soli Radar для предотвращения от подделок жестами/масками/видеодисплеями чужих устройств.

Примеры применения разнообразных методов

• iPhone серии X/11/12/13/14 используют только техническое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition в первый раз представил аналог Face ID среди Android.
• Samsung Galaxy S10/S20 обеспечивают как программное обеспечение двухмерное распознавание по снимку фронтальной камерой, так и сенсор радужки глаза.
• Huawei Mate20 Pro задействует набор из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Проблемы охраны и ложные срабатывания

Несмотря на впечатляющий прогресс инноваций за недавние лет, идеальных системы пока не существует:

1. Вероятность мошенничества: Недорогие мобильники легко “разблокируются” качественной фотографией владельца либо видео с экрана другого устройства.
2. Идентичные близнецы: Даже самые идеальные устройства могут спутать между однояйцевыми близнецами либо родственниками с очень аналогичной внешностью.
3. Трансформации внешнего вида: Резкое похудение/набор веса, косметические процедуры или травмы иногда необходимы для перерегистрации биометрии.
4. Условия записи: Яркая подсветка солнцем или же интенсивная тень могут уменьшить верность распознавания признаков.

Здесь некоторые рекомендаций для защищённому эксплуатации:

• Для критически важных операций всегда применяйте дополнительную аутентификацию;
• Не активируйте опцию “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
• Постоянно обновляйте прошивку ПО мобильного устройства для защиты от современных угроз;
• Включайте опцию “Требовать открытых глаз” в тех местах, где она есть.

В каких областях ещё используется технологии помимо мобильных телефонов?

Несмотря на то, что тема этой работы касается именно мобильным устройствам, необходимо сказать о прочих направлениях внедрения технологии:

• Мониторинг входа в деловых центрах и многоквартирных зданиях;
• Платёжные устройства финансовых учреждений (“Face Pay”);
• Электронные паспорта нового образца;
• Установки видеоконтроля городских сервисов;
• Автоматизация регистрации посещаемости образовательных учреждений/вузов;
• Аутентификация юзеров компьютеров/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по фейсу (“Face Pay”) — нужно лишь пройти через турникет без карты или мобильника! Схожие проекты осуществляются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом трансформируется технология сегодня?

Каждый годочек появляются свежие концепции для улучшения качества работы систем лицевого распознавания:

1. Увеличивается чёткость датчиков — чем больше элементов фиксируется фотоаппаратом/датчиками глубины, тем меньше вероятность неточности;
2. Развиваются нейронные сети — передовые архитектуры модели MobileNetV3 позволяют быстро обучаться свежим чертам облика обладателя непосредственно на девайсе без отправки данных в облако.
3. Совершенствуются методы антиспуфинга — теперь телефоны способны распознавать реальные живые лица от статичных фото/масок по мельчайшим микродвижениям.
4. Интеграция со умными устройствами — умные часы могут автоматически закрыть доступ к мобильный телефон, если обладатель удалился на значительное расстояние.
5. Возникают гибридные системы — например комбинирующие голосовую опознание + лицо + отпечаток пальца.

Вот, какие направления в особенности востребованы в данный момент:

1) Миниатюризация компонентов

Изготовители пытаются сократить габариты отверстия (“чёлки”) для сенсоры на дисплее за счёт встраивания компактных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на девайсе

Для повышения личной безопасности всё больше расчётов осуществляется локально без отправки данных во дополнительный облачный сервис.

3) Упорядочивание стандартов

Гугл интенсивно продвигает эталон BiometricPrompt API, с целью чтобы такие площадки, например как вулкан россия, и все Android-программы могли работать с различными типами биометрии единообразно.

Что выбрать на сегодня?

Когда вам всем важна наивысшая сохранность информации, подбирайте передовые модели с интегрированным ИК-излучателем или же ToF-сенсором глубины.

• iPhone всех новейших моделей
• Huawei Mate/P серии
• Mix Pro
• Vivo X модели
• Oppo Найти X серий.

Если бюджет невелик – лучше предпочесть классическим способам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в вулкан россия, задействовать только как опциональную опцию комфорта.

Каким образом увеличить практичность функционирования возможности?

Есть некоторые хитростей для тех, кто уже применяет разблокировку по лицу:

1. Часто обновляйте свою изображение-шаблон, если значительно меняется облик.
2. Не упускайте из виду очищать объектив передней камеры – разводы могут снизить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате мобильник сам активирует фотоаппарат когда вы поднимаете его.
4. В процессе записи старайтесь держать лицевую часть неподвижно впереди объектива исключая сильного наклона головы.
5. Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отворачиваетесь от экрана.

Перспективы прогресса технологии

В скоро наступающие годы можно предвкушать развития полностью безконтактных способов распознавания индивидуума сразу по нескольким биометрическим параметрам одновременно: облик + голос + шаги + манипуляции руками!

Также возможно возникновение современных подходов обеспечения конфиденциальности – скажем, динамическое изменение цифрового паттерна после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – единственная из очень захватывающих инноваций нашего эпохи! Она обеспечивает общение со мобильным устройством комфортнее чем раньше, и такие приложения, как vulkan russia, могут в разы оптимизировать ваш опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы осведомлены, как устроена эта технология в деталях, – сможете более осмысленно определять свой очередной устройство!