Как работает определение лиц в телефонах

Почему мы останавливаемся на разлочивание по лицу

В недавние годы определение лиц стало одной из самых распространённых опций для деблокировки смартфонов. Лишь несколько годков тому назад основная масса пользователей обходились PIN-кодами, паролями или сканерами отпечатков пальцев. Но при появлением таких технологий, например Вулкан 24, нам достаточно просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какая вещь превращает данную особенность такой востребованной? Для начала, это практично: не нужно помнить трудные пароли или находить верный палец в мраке. Также, это мгновенно: современные системы узнают лицо буквально за доли секунды. В-третьем пункте, это чувство будущего — как будто в фильмах про вулкан автомат разведчиков.

Впрочем за данной видимой несложностью таится целый мир сложных техник и инженерных разработок. Позвольте нам разобраться, как точно действует распознавание лиц в актуальных гаджетах, какие существуют способы, насколько они надёжны и что нас ждёт впереди.

Короткая повествование развития техники

Распознавание лиц как технология имеется уже более пятидесяти лет. Первые пробы автоматического анализа лиц были осуществлены еще в 1960-х годах в исследовательских центрах США. Тогда компьютеры могли лишь обозначать контуры черепа и определять расстояния между зрачками и губами на черно-белых фотографиях.

Первые коммерческие системы стали доступны в девяностых годах, но они были неидеальны: работали медленно и часто давали сбои. Только с развитием искусственных сетей и таких платформ, как Вулкан 24 Казино, высокопроизводительных мобильных процессоров идентификация лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным сканированием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и другие начали интегрировать собственные разработки.

Ключевые шаги работы системы распознавания

Процесс определения лица можно условно поделить на несколько ключевых этапов:

1. Распознавание лиц — камера выявляет присутствие человеческого образа в изображении.
2. Извлечение особенностей — механизм анализирует черты облика: конфигурацию глаз, обонятельного органа, уст, положение надбровных дуг.
3. Построение шаблона — создаётся особенный виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со образцом — сформированный модель сравнивается с записанной при внесении биометрической информацией владельца.
5. Принятие выбора — если совпадение достаточно высокое, смартфон разблокируется.

Всякий из этих стадий запрашивает особых методов и оптимизаций для скорой работы прямо на устройстве.

Железные элементы: что находится внутри них

Стандартная передняя камера.

Наиболее легкий метод определения физиономии применяет только лицевую камеру смартфона мобильного устройства. Такой подход осуществлён во различных бюджетных версиях Android-устройств.

Плюсы:

• Не потребляет внешних сенсоров.
• Оперативно действует при хорошем освещении.

Минусы:

• Легко ввести в заблуждение изображением или видеозаписью.
• Неудачно работает при низком освещении или нестандартных точках зрения.

Инфракрасная фотокамера и точечный проекционный аппарат

Более усовершенствованные системы, такие как Вулкан 24 Казино, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс является основой Face ID от Apple.

Каким образом это работает:

• Точечный проектор показывает на облик юзера невидимую структуру из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 точек).
• ИК камера регистрирует изменение формы этой сетки по плоскости лица.
• Создаётся трёхмерная карта глубины глубины, что почти что неосуществима для подделки стандартной снимком или маскировкой.

Выигрыши

• Надёжная работа даже в полной темноте.
• Высокая устойчивость к подделкам.
• Точность идентификации выше 99%.

Дополнительные сенсорные устройства

В некоторых устройствах применяются также вспомогательные сенсоры: ToF (Time-of-Flight), которые фиксируют период движения света до предмета и обратно; Цветные-датчики глубины; специальные оптические измерители расстояния для построения более аккуратной 3D-модели физиономии.

Эти технологии встречаются чаще всего во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искуственный ум на работе

Современные системы распознавания лиц невозможны в отсутствие эксплуатации искусственного интеллекта и машинного обучения. Именно из-за таким инновациям, как Вулкан 24 Казино, устройство в состоянии распознавать пользователя даже при трансформациях облика: новая укладка, растительность на лице, оптика или макияж не становятся препятствием для деблокировки.

Детектирование лица

При начальном этапе алгоритм необходимо быстро найти ликовое изображение среди полного изображения камеры. Для этого применяются последовательные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые подготовлены находить лица людей среди множества других объектов.

Пример: алгоритм MTCNN в состоянии распознавать облик даже с частичном перекрытии (например, шалью или ладонью).

Выделение важных точек

После идентификации лица система, такая как Вулкан 24 Казино, вычисляет расположение основных точек: края глаз, кончик носа, края губ и так далее. Обычно задействуется от 68 до 128 главных меток на лицевой области.

Это необходимо для стабилизации картинки: если пользователь находится с телефон под наклоном, или наклонил голову, программа исправляет картинку до нормального состояния для дальнейшего анализа.

Создание биометрического шаблона

Далее нейронная сеть строит сжатое числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 чисел с плавающей запятой.

Данный шаблон очень сложно сфальсифицировать: он не удерживает само картинку юзера, а лишь особенные черты его внешности, что делает его идеальным для таких площадок, как Vulkan24.

Сопоставление и осуществление решения

Когда пользователь желает разблокировать телефон глазами, механизм воспроизводит все описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный уровень (обычно больше 99%), телефон, как и платформа Vulkan24, разблокируется; если нет — доступ запрещается.

Адаптация к изменениям внешнего вида

Увлекательная черта нынешних систем — возможность самостоятельного обучения. Если ты постоянно разблокируете мобильное устройство с новой укладкой или оптикой, алгоритм постепенно обновляет эталонный шаблон вашего внешности для увеличения точности действия без ухудшения безопасности.

Безопасность биометрии информации.

Многие пользователи беспокоятся держать свои биометрические идентификационные данные на телефоне из-за вероятности утечки данных или взлома устройства. Иные организации, например Vulkan24, предоставляют методы для повышения безопасности информации клиентов.

• Локальное хранение: Основная часть аппаратов хранит биометричные образцы лишь внутрь безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не выходят из гаджет и закрыты включая создателю.

• Шифрование: Все данные сохраняются только в кодированном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Приложения сторонних разработчиков не обладают непосредственного возможности доступа к биометрическим; они могут лишь требовать факт верификации личности через системный API.

Стоит упомянуть значимую особенность: в случае, если какой-то человек получит доступ к вашему телефону физически (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество компании внедряют систему защиты от неосознанного разблокирования — в частности, просят разомкнуть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют категории идентификации лиц на изображениях?

Сегодня можно выделить различить 3 ключевых способа к выполнению этой функции:

Софтверное 2D распознавание

Эксплуатируется только лицевая камера без экстра сенсоров глубины. Подобный способ встречается чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота осуществления; умеренная затраты; оперативная деятельность при достаточном свете.
Минусы: несложно обмануть фотографией; ненадежная деятельность ночью; слабая охрана.

Аппаратное трёхмерное оцифровка

Применяет инфракрасную видеокамеру + проекционный модуль пикселей + сенсоры глубины (Face ID у Apple; подобные решения у Huawei Mate).
Преимущества: большая надёжность; нельзя подделать изображение/видеозапись; устойчивая функционирование в любых условиях освещения.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Смешанные методы с дополнением ИИ

Задействуют комбинацию программируемых методов + аппаратно-техническую обработку + постобработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие продукты, например Вулкан 24 Казино и Google Pixel Face Unlock последних версий, объединяют фронтальную камеру c инфракрасным датчиком мобильности Soli Radar для предотвращения от подделок руками/масками/видеодисплеями чужих устройств.

Примеры эксплуатации различных техник

• iPhone линейки X/11/12/13/14 применяют только аппаратное трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз внедрил аналог Face ID в числе Android.
• Samsung Galaxy S10 версия/S20 поддерживают как софтверное плоское определение по фото селфи-камерой, так и датчик ириса глаза.
• Huawei Mate20 Pro задействует набор из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Вопросы безопасности и неверные тревоги

Несмотря на поразительный успехи технологий за последние годы, совершенных системы пока не существует:

1. Возможность мошенничества: Бюджетные телефоны легко “разблокируются” высококачественной снимком хозяина либо видеозаписью с экрана другого устройства.
2. Идентичные близнецы: Даже самые безупречные устройства могут спутать между монозиготными близнецами либо родичами с очень схожей внешностью.
3. Трансформации внешнего вида: Внезапное похудение/увеличение массы тела, косметические процедуры или травмы иногда требуют повторной регистрации биометрии.
4. Условия фотографирования: Интенсивная подсветка солнечным светом или интенсивная тень могут снизить верность распознавания признаков.

Ниже некоторые советов для защищённому применению:

• Для критически важных операций всегда внедряйте дополнительную аутентификацию;
• Не активируйте функцию “Разблокировка по лицу” на недорогих аппаратах без ИК-сенсоров;
• Систематически апгрейдите прошивку смартфона для обеспечения безопасности от актуальных атак;
• Включайте функцию “Требовать раскрытых глаз” там, где она доступна.

В каких местах ещё находится применение технология помимо смартфонов?

Хотя предмет данной публикации касается в частности смартфонам и планшетам, необходимо сказать о альтернативных областях использования технологии:

• Мониторинг доступа в офисах и многоквартирных зданиях;
• Платёжные устройства финансовых учреждений (“Face Pay”);
• Цифровые паспорта нового типа;
• Системы видеоконтроля муниципальных сервисов;
• Автоматизирование учёта посещаемости школ/университетов;
• Аутентификация участников ПК/ноутбуков.

Например: В столичном метро уже тестируется система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без пластика или мобильника! Схожие программы реализуются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Как меняется технология сегодня?

Всякий годочек появляются современные концепции для улучшения качества работы систем распознавания лиц:

1. Увеличивается детализация датчиков — чем больше деталей фиксируется камерой/датчиками глубины, тем меньше вероятность погрешности;
2. Улучшаются нейронные сети — новейшие конструкции типа MobileNetV3 обеспечивают возможность быстро осваивать дополнительным чертам облика обладателя непосредственно на девайсе без отправки данных в облако.
3. Развиваются способы антиспуфинга — теперь смартфоны способны отличать настоящие движущиеся лица от статичных фото/маскировок по микроскопическим движениям кожи.
4. Интеграция со смарт-гаджетами — смарт-часы могут автоматически закрыть доступ к мобильный телефон, если пользователь ушёл далеко.
5. Появляются гибридные устройства — к примеру объединяющие аудио идентификацию + физиономию + пальцевой отпечаток.

Здесь, которые тренды особенно востребованы в данный момент:

1) Миниатюризация компонентов

Компании стараются сократить величину отверстия (“чёлки”) под датчики на дисплее за счёт внедрения компактных ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Переработка прямо на девайсе

Для увеличения личной безопасности всё более расчётов происходит локально без пересылки данных во сторонний облачный услугу.

3) Унификация норм

Гугл энергично продвигает норму BiometricPrompt API, чтобы подобные платформы, например как Вулкан 24, и любые Android-приложения были совместимы с любыми видами биометрии единообразно.

Какое подобрать на сегодня?

В случае если вам нужна максимальная защита данных, выбирайте флагманские модели со встроенным ИК-излучателем либо ToF-датчиком глубины.

• iPhone всех новейших моделей
• Huawei Companion/Series P серии
• Mix Expert
• Vivo X линейки
• Оппо Обнаружить Х серии.

Если средства невелик – лучше выбирать обычным средствам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в Вулкан 24, применять только как дополнительную возможность удобства.

Как улучшить удобство использования опции?

Есть пара советов для тех, кто уже применяет разблокировку по лицу:

1. Часто обновляйте свою фото-шаблон, если значительно трансформируется внешность.
2. Не пренебрегайте очищать линзу передней камеры – разводы могут уменьшить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам активирует фотоаппарат как только вы поднимаете его.
4. Во время регистрационного процесса постарайтесь удерживать лицо неподвижно перед видеоустройства без сильного наклона головы.
5. Используйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отвели взгляд от экрана.

Возможности развития инноваций

В предстоящие годы можно ожидать появления полностью бесконтактных способов опознания персоны сразу по нескольким биометрическим данным параметрам одновременно: облик + речь + походка + движения рук!

Также вероятно появление свежих способов обеспечения личной информации – скажем, переменное корректировка диджитал образца после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из самых интересных инноваций нашего эпохи! Она предоставляет интеракцию со телефоном проще чем раньше, и такие программы, как Vulkan24, могут существенно повысить ваш юзерский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы осведомлены, как функционирует эта технология изнутри, – сумеете более осмысленно выбирать свой очередной девайс!