Каким образом работает идентификация лиц в смартфонах

Зачем мы предпочитаем разблокировку по лицу

В последние времена определение лиц является одной из самых распространённых функций для разблокировки умных телефонов. Лишь некоторые лет назад большинство юзеров обходились PIN-кодами, паролями или датчиками отпечатков пальцев. Но при появлением таких технологий, например вулкан россия, нам достаточно лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Что делает данную функцию очень нужной? Прежде всего, это удобно: не нужно помнить трудные пароли или находить верный палец в тьме. Кроме того, это быстро: современные программы распознают лицо фактически за мгновение. В-третьем пункте, это впечатление футуристичности — будто в кинолентах про вулкан казино агентов.

Однако за этой видимой простотой прячется целый вселенная сложных технологий и инженерных разработок. Попробуем разобраться, как конкретно функционирует распознавание лиц в новейших смартфонах, какие бывают способы, насколько они безопасны и что нас предстоит.

Короткая повествование эволюции технологии

Распознавание лиц как техника существует уже более 50 годов. Начальные пробы автоматического исследования лиц были предприняты еще в 1960-х годы в лабораториях США. Тогда вычислительные машины могли лишь выделять контуры головы и вычислять дистанции между очами и губами на монохромных снимках.

Изначальные бизнес платформы возникли в девяностых годах, но они были неидеальны: функционировали медленно и часто ошибались. Только с прогрессом нейронных сетей и таких площадок, как вулкан россии, сильных мобильных микросхем определение лиц стало по-настоящему массовым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным сканированием лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали внедрять собственные разработки.

Ключевые шаги действия механизма распознавания

Процесс идентификации лица можно примерно сегментировать на несколько основных этапов:

1. Распознавание лица — аппарат определяет существование человеческого образа в снимке.
2. Определение характеристик — механизм анализирует контуры облика: форму глаз, носа, губ, положение надбровных дуг.
3. Построение структуры — создаётся неповторимый цифровой отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с эталоном — созданный образец сравнивается с записанной при регистрации биометрической сведениями владельца.
5. Принятие выбора — если сходство достаточно существенное, смартфон открывается.

Каждый из указанных стадий нуждается в индивидуальных методов и улучшений для скорой работы непосредственно на девайсе.

Железные элементы: что прячется в их недрах

Обычная передняя камера.

Самый легкий метод идентификации физиономии применяет только переднюю камеру смартфона смартфона. Подобный подход реализован во различных недорогих версиях Android-девайсов.

Сильные стороны:

• Не нуждается в требует внешних сенсоров.
• Шустро функционирует при хорошем освещении.

Минусы:

• Несложно обмануть изображением или видео.
• Неправильно действует при плохом свете или непривычных ракурсах.

ИК камера и точечный проектор

Более усовершенствованные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс лежит в основе Face ID от Apple.

Как это функционирует:

• Точечный проектор отображает на лицо пользователя невидимую сетку из тысяч инфракрасных точек (например, Face ID применяет около 30 000 меток).
• ИК камера регистрирует искривление данной решетки по поверхности физиономии.
• Получается трёхмерная карта глубины глубины, которая почти неосуществима для подделки обычной фотографией или маской.

Преимущества

• Надёжная функционирование даже в полной неосвещённости.
• Сильная устойчивость к подделкам.
• Точность определения выше 99%.

Дополнительные датчики

В отдельных аппаратах применяются также вспомогательные датчики: ToF (Time-of-Flight), которые измеряют время распространения света до предмета и обратно; Трехцветные-датчики дальности; специальные оптические дальномеры для формирования более детализированной 3D-модели лица.

Эти инновации встречаются в основном во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: искусственный ум на работе

Современные устройства распознавания лиц невозможны без эксплуатации искусственного интеллекта и машинного обучения. Именно вследствие таким инновациям, как вулкан россии, устройство способно распознавать пользователя даже при трансформациях внешности: новая причёска, щетина, оптика или грим не становятся барьером для разблокировки.

Распознавание лиц

В начальном шаге система необходимо мгновенно обнаружить лицо в пределах всего снимка камеры. Для данной цели применяются многоуровневые классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые натренированы распознавать лица людей среди множества других объектов.

Пример: процесс MTCNN в состоянии обнаруживать физиономию даже при неполном перекрытии (например, платком или рукой).

Выделение ключевых моментов

После обнаружения лица устройство, такая как вулкан россии, вычисляет местоположение главных точек: края глаз, конец носа, контуры губ и так далее. Обычно применяется от 68 до 128 главных маркеров на лице.

Это необходимо для нормализации картинки: если пользователь находится с смартфон под наклоном, или повернул голову, программа “выпрямляет” изображение до обычного угла для дальнейшего анализа.

Формирование биометрии шаблона

Далее искусственная сеть строит компактное математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой след внешности длиной от 128 до 512 вещественных чисел.

Такой образец весьма трудно сфальсифицировать: он не сохраняет непосредственно изображение юзера, а лишь уникальные особенности его облика, что делает его совершенным для таких платформ, как vulkan russia.

Сравнительный анализ и принятие заключения

Если человек намеревается открыть телефон взором, механизм воспроизводит все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный порог (обычно выше 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ запрещается.

Адаптация к изменениям внешности

Занимательная черта современных системы — возможность самостоятельного обучения. Если ты регулярно разблокируете мобильное устройство с свежей прической или очками, программа постепенно освежает основной модель вашего лица для увеличения точности действия без снижения уровня безопасности.

Защита биометрических данных.

Большинство юзеры беспокоятся сохранять свои био-идентификационные данные на телефоне из-за угрозы утечки информации или взлома гаджета. Иные фирмы, вроде vulkan russia, предоставляют варианты для увеличения сохранности информации пользователей.

• Локальное хранение: Большинство девайсов хранит био-идентификационные образцы лишь внутри защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не оставляют устройство и недоступны включая создателю.

• Шифрование: Все информация хранятся только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Программы внешних девелоперов не обладают непосредственного доступа к биометрическим; они могут лишь требовать факт подтверждения личности через системный API.

Следует упомянуть значимую подробность: в случае, если кто-то получит доступ к вашему телефону физически (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество производители внедряют меры безопасности от “слепого” разблокирования — например, требуют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют виды определения лиц?

В настоящее время можно выделить определить 3 главных подхода к осуществлению этой операции:

Программное двухмерное распознавание

Применяется только фронтальная камера без дополнительных детекторов глубины. Такой способ используется обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость реализации; минимальная стоимость; быстрая работа при хорошем освещении.
Минусы: легко ввести в заблуждение фотографией; ненадежная деятельность ночью; низкая защищенность.

Техническое трёхмерное сканирование

Задействует ИК видеокамеру + проектор точек + сенсоры дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Плюсы: высокая надёжность; невозможно подделать фото/видео; устойчивая деятельность при любом освещении.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с ИИ-дополнением

Используют комбинацию софтверных методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, как вулкан россии и Google Pixel Face Unlock современных поколений, сочетают фронталку c ИК датчиком мобильности Soli Radar для защиты от фальсификаций руками/масками/видеоэкранами чужих устройств.

Образцы эксплуатации разных способов

• iPhone серии X/11/12/13/14 задействуют только физическое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition первый раз внедрил эквивалент Face ID в ряду Android.
• Samsung Galaxy S10/S20 имеют как программное обеспечение двухмерное распознавание по изображению селфи-камерой, так и датчик радужки глаза.
• Huawei Mate20 Pro применяет комплекс из ИК-подсветки + Dot Projector + ToF-датчик

Проблемы защиты и неверные сигналы

Несмотря на поразительный прогресс инноваций за прошедшие лет, совершенных системы пока не наблюдается:

1. Возможность мошенничества: Доступные смартфоны легко доступны высококачественной фотографией хозяина или видео с экрана другого устройства.
2. Идентичные близняшки: Даже самые совершенные системы могут перепутать между монозиготными близнецами либо семьями с очень аналогичной внешностью.
3. Изменения облика: Резкое похудение/набор веса, косметические процедуры либо повреждения иногда необходимы для обновления данных биометрии.
4. Условия съёмки: Интенсивная засветка солнцем либо плотная затенение могут снизить верность идентификации признаков.

Здесь некоторые подсказок для защищённому эксплуатации:

• Для критически важных операций всегда применяйте двухэтапную аутентификацию;
• Не включайте возможность “Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
• Регулярно апгрейдите прошивку мобильного устройства для предотвращения угроз от современных угроз;
• Включайте опцию “Требовать раскрытых глаз” там, где она имеется.

Где дополнительно применяется технология кроме смартфонов?

Пускай тема нашей публикации сосредоточена на именно смартфонам и планшетам, необходимо сказать о альтернативных областях использования технологии:

• Контроль доступа в офисах и резиденциях;
• Платёжные аппараты банков (“Face Pay”);
• Цифровые идентификационные документы нового образца;
• Комплексы видеонаблюдения городских подразделений;
• Механизация учёта посещаемости образовательных учреждений/университетов;
• Аутентификация юзеров персональных компьютеров/ноутбуков.

Например: В столичном метро уже испытывается система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без карты или мобильника! Похожие инициативы развиваются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Как трансформируется техпроцесс в наше время?

Любой годочек появляются современные мысли для усовершенствования качества работы систем идентификации лиц:

1. Увеличивается чёткость сенсоров — чем больше элементов фиксируется видеокамерой/датчиками глубины, тем меньше риск неточности;
2. Улучшаются нейросети — передовые конструкции модели MobileNetV3 обеспечивают возможность оперативно осваивать новым особенностям внешности владельца напрямую на гаджете без отправки данных в облако.
3. Совершенствуются технологии антиспуфинга — теперь мобильные устройства умеют отличать реальные движущиеся лица от неподвижных фотографий/маскировок по мельчайшим микродвижениям.
4. Интеграция со умными устройствами — умные часы могут авто закрыть доступ к мобильный телефон, если обладатель отошёл далеко.
5. Возникают смешанные механизмы — в частности совмещающие аудио идентификацию + лицо + дактилоскопический след.

Итак, какие направления в особенности популярны в данный момент:

1) Сокращение деталей

Производители пытаются минимизировать габариты прорези (“чёлки”) для сенсоры на дисплее за счёт встраивания компактных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на девайсе

Для повышения приватности всё более вычислений происходит на месте без передачи информации во внешний облачный сервис.

3) Стандартизация стандартов

Гугл энергично пропагандирует эталон BiometricPrompt API, с целью чтобы такие системы, например как вулкан россия, и все Android-приложения были совместимы с различными типами биометрии стандартизированно.

Что выбрать сегодня?

В случае если вам важна максимальная защита информации, подбирайте передовые модели с интегрированным ИК-излучателем либо ToF-сенсором глубины.

• iPhone каждого новейших поколений
• Huawei Mate/P линейки
• Mix Pro
• Vivo X серии
• Oppo Find Икс серий.

Если финансы ограничен – лучше отдавать предпочтение обычным средствам защиты (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в вулкан россия, задействовать только как дополнительную опцию комфорта.

Каким образом повысить практичность функционирования опции?

Есть некоторые советов для пользователей, кто уже пользуется разблокировку по лицу:

1. Регулярно обновляйте свою фото-шаблон, если кардинально трансформируется внешность.
2. Не пренебрегайте чистить объектив фронтальной камеры – загрязнения могут снизить точность!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам включает фотоаппарат когда вы поднимаете его.
4. При регистрационного процесса постарайтесь сохранять лицо прямо перед видеоустройства без резкого наклона головы.
5. Используйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отворачиваетесь от дисплея.

Перспективы развития технологии

В скоро наступающие времена можно предполагать появления полностью безконтактных способов опознания персоны сразу по нескольким биометрическим данным параметрам одновременно: физиономия + звучание + шаги + жесты рук!

Также предполагается возникновение новых способов охраны конфиденциальности – например, изменяющееся модификация диджитал образца после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из самых захватывающих инноваций нашего периода! Она обеспечивает интеракцию со смартфоном проще чем когда-либо прежде, и такие аппы, как vulkan russia, могут существенно оптимизировать ваш пользовательский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы понимаете, как функционирует эта система внутри, – сумеете более осмысленно подбирать свой будущий девайс!