Каким способом функционирует определение лицевых образов в смартфонах

Зачем мы предпочитаем разлочивание по лицевому распознаванию

В прошлые времена распознавание лиц стало одной из наиболее востребованных возможностей для разблокировки умных телефонов. Всего некоторые годов ранее большинство использующих удовлетворялись пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением таких технологий, как Spinto, нам вполне лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Какой аспект превращает эту конкретную особенность настолько популярной? Для начала, это комфортно: не нужно удерживать в памяти замысловатые пароли или находить правильный палец в тьме. Во-вторых, это мгновенно: современные программы идентифицируют лицо практически за мгновение. В-третьем пункте, это чувство будущего — будто в кинолентах про https://www.russles.ru/ агентов.

Однако за данной видимой простотой прячется весь мир сложных технологий и инженерных решений. Давайте разобраться, как конкретно действует распознавание лиц в новейших смартфонах, какие существуют технологии, насколько они защищены и что нас предстоит.

Краткая повествование прогресса технологии

Идентификация лиц как технология имеется уже более пятидесяти лет. Изначальные эксперименты машинного изучения лиц были осуществлены еще в 1960-х годах в научных учреждениях США. Тогда ЭВМ способны были лишь выделять контуры черепа и определять дистанции между очами и ртом на монохромных фотографиях.

Первые коммерческие установки появились в девяностых годах, но они были несовершенны: действовали неспешно и часто ошибались. Только с эволюцией искусственных сетей и таких площадок, как Спинто, мощных мобильных микросхем определение лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным распознаванием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие начали интегрировать личные решения.

Ключевые стадии действия системы распознавания

Процесс идентификации лица можно ориентировочно сегментировать на несколько ключевых этапов:

Распознавание лиц — камера выявляет наличие гуманного образа в изображении.
Определение характеристик — система изучает черты лица: очертания глаз, носа, губ, позицию надбровных дуг.
Построение модели — создаётся неповторимый виртуальный отпечаток (faceprint) на основе выделенных признаков.
Сравнение с стандартом — сформированный шаблон сравнивается с сохранённой при регистрации биометрической сведениями владельца.
Принятие определения — если соответствие достаточно значительное, смартфон открывается.

Всякий из этих шагов запрашивает особых методов и улучшений для скорой работы непосредственно на девайсе.

Железные элементы: что находится в их недрах

Обычная селфи камера.

Наиболее простой вариант определения физиономии использует исключительно фронтальную камеру мобильного устройства. Подобный подход реализован во многочисленных доступных вариантах Android-девайсов.

Сильные стороны:

Не требует дополнительные датчиков.
Оперативно действует при качественном освещении.

Минусы:

Легко одурачить фотографией или видеозаписью.
Плохо функционирует при низком свете или непривычных ракурсах.

Инфракрасная камера и точечный проектор

Более усовершенствованные системы, такие как Спинто, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс составляет базу Face ID от Apple.

Каким образом это функционирует:

Точечный проектор отображает на лицо пользователя невидимую структуру из тысяч инфракрасных точек (например, Face ID задействует около 30 000 меток).
ИК камера записывает изменение формы данной сетки по плоскости физиономии.
Создаётся трехмерная карта глубинности, что почти что неосуществима для фальсификации стандартной фото или маской.

Плюсы

Надёжная работа даже в полной темноте.
Сильная сопротивляемость к подделкам.
Точность определения выше 99%.

Дополнительные сенсорные устройства

В отдельных девайсах задействуются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые определяют время прохождения света до предмета и обратно; Трехцветные-датчики дальности; специальные лазерные лидары для формирования более точной 3D-модели физиономии.

Эти инновации встречаются в основном во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: синтетический интеллект на исполнении

Современные устройства опознания лиц невозможны при отсутствии применения ИИ и машинного обучения. Именно вследствие таким технологиям, как Спинто, аппарат может распознавать юзера даже при метаморфозах внешности: новая причёска, щетина, оптика или макияж не становятся барьером для открытия.

Распознавание лиц

На первом шаге программа должна быстро распознать образ лица среди целого изображения камеры. Для этого используются каскадные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые “обучены” распознавать лиц человека среди множества других объектов.

Пример: процесс MTCNN в состоянии обнаруживать облик даже при неполном перекрытии (например, шалью или ладонью).

Выделение важных аспектов

После идентификации лица механизм, такая как Спинто, устанавливает положение ключевых точек: кончики глаз, верхушка носа, контуры губ и так далее. Обычно используется от 68 до 128 основных маркеров на лице.

Это требуется для стабилизации изображения: если пользователь находится с смартфон под углом, или наклонил голову, программа корректирует изображение до стандартного положения для последующего изучения.

Построение биометрического образца

Далее нейросеть строит компактное математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 чисел с плавающей запятой.

Такой формат весьма затруднительно подделать: он не сохраняет само фото юзера, а лишь уникальные черты его облика, что делает его идеальным для таких площадок, как Спинто казино.

Сравнение и осуществление выбора

В случае, когда пользователь намеревается открыть мобильник взглядом, механизм воспроизводит все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый порог (обычно превышает 99%), телефон, как и платформа Спинто казино, доступен; если нет — доступ запрещается.

Адаптация к трансформациям внешности

Увлекательная черта нынешних системы — способность самостоятельного обучения. Если ты постоянно разблокируете телефон с свежей стрижкой или оптикой, система постепенно модернизирует основной модель вашего лица для повышения точности работы без снижения уровня безопасности.

Защита биометрии информации.

Многие пользователи боятся держать свои биометрические данные на смартфоне из-за риска утечки данных или взлома гаджета. Определенные компании, такие как Спинто казино, предлагают методы для улучшения сохранности сведений клиентов.

Локальное хранение: Преимущественно устройств сохраняет биометрические образцы только в пределах безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они никогда не оставляют устройство и недоступны включая создателю.
Шифрование: Все данные хранятся только в кодированном виде с использованием современных криптографических алгоритмов AES256.
Изоляция программ: Программы внешних девелоперов не имеют непосредственного доступа к биометрическим данным; они могут лишь запрашивать подтверждение верификации идентичности через системный API.

Следует упомянуть важную деталь: в случае, если кто-либо получит доступ к вашему телефону физически (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество компании осуществляют защиту от неосознанного разблокирования — в частности, требуют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие бывают виды распознавания лиц на изображениях?

В настоящее время можно выделить выделить 3 основных метода к реализации этой операции:

Софтверное 2D идентификация

Применяется только передняя камера без дополнительных датчиков дистанции. Подобный способ встречается чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность воплощения; низкая затраты; скоростная деятельность при хорошем освещении.
Минусы: просто одурачить снимком; нестабильная работа ночью; слабая безопасность.

Техническое 3D сканирование

Использует инфракрасную камеру + проектор пикселей + сенсоры глубины (Face ID у Apple; подобные технологии у Huawei Mate).
Преимущества: большая надежность; не получится подделать фото/видео; постоянная работа при любом освещении.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные способы с дополнением ИИ

Используют комбинацию программных методов + аппаратную обработку + постобработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, как Спинто и Google Pixel Face Unlock новейших поколений, комбинируют фронталку c ИК сенсором движения Soli Radar для предотвращения от подделок руками/масками/видеоэкранами чужих устройств.

Примеры применения разнообразных техник

iPhone модели X/11/12/13/14 используют только физическое трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition первый раз предложил аналог Face ID среди Android.
Samsung Galaxy S10 версия/S20 обеспечивают как программное плоское идентификацию по фото селфи-камерой, так и сканер глазного ириса.
Huawei Mate20 Pro задействует набор из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Трудности защиты и ошибочные тревоги

Несмотря на замечательный успехи технологий за последние лет, безупречных механизмов пока не существует:

Возможность мошенничества: Доступные телефоны легко “разблокируются” качественной снимком владельца или роликом с экрана другого устройства.
Идентичные близнецы: Даже самые идеальные устройства могут ошибиться между однояйцевыми близнецами либо родственниками с очень похожей внешностью.
Трансформации внешности: Стремительное похудение/увеличение массы тела, пластические операции либо повреждения иногда требуют повторной регистрации биометрии.
Условия записи: Интенсивная освещённость солнцем либо плотная темнота могут уменьшить точность определения признаков.

Ниже несколько советов по безопасному эксплуатации:

Для критически важных операций всегда внедряйте двухфакторную аутентификацию;
Не включайте возможность “Разблокировка по лицу” на недорогих аппаратах без ИК-сенсоров;
Систематически обновляйте прошивку телефона для обеспечения безопасности от актуальных атак;
Включайте функцию “Требовать распахнутых глаз” в тех местах, где она есть.

В каких местах ещё применяется технология помимо смартфонов?

Несмотря на то, что тема нашей публикации касается конкретно мобильным устройствам, стоит упомянуть о других сферах применения технологии:

Управление доступа в деловых центрах и резиденциях;
Платёжные устройства финансовых учреждений (“Face Pay”);
Виртуальные удостоверения личности последнего образца;
Установки видеонаблюдения муниципальных сервисов;
Автоматизация отслеживания присутствия образовательных учреждений/институтов;
Авторизация пользователей персональных компьютеров/ноутбуков.

Например: В столичном метро уже проверяется система оплаты проезда по фейсу (“Face Pay”) — хватит пройти через барьер без карты или телефона! Аналогичные программы развиваются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом трансформируется техпроцесс в нынешнее время?

Каждый год возникают современные концепции для улучшения качества деятельности систем лицевого распознавания:

Увеличивается детализация сенсоров — чем больше элементов фиксируется фотоаппаратом/глубинными сенсорами, тем меньше риск ошибки;
Улучшаются искусственные интеллекты — современные структуры типа MobileNetV3 позволяют оперативно обучаться свежим чертам внешности обладателя напрямую на гаджете без пересылки информации в облачное хранилище.
Развиваются методы антиспуфинга — теперь мобильные устройства способны различать реальные анимированные лица от фиксированных снимков/масок по незаметным движениям кожи.
Синхронизация со интеллектуальными приборами — смарт-часы могут самостоятельно закрыть доступ к смартфон, если владелец отошёл далеко.
Возникают смешанные системы — к примеру объединяющие аудио аутентификацию + физиономию + дактилоскопический след.

Вот, те тенденции очень популярны на сегодняшний день:

1) Сокращение элементов

Производители намереваются сократить размер выреза (“чёлки”) под сенсоры на дисплее за счёт интеграции миниатюрных ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на устройстве

Для улучшения конфиденциальности всё более обработки данных выполняется локально без передачи данных во дополнительный облачный услугу.

3) Упорядочивание стандартов

Google активно пропагандирует эталон BiometricPrompt API, для того чтобы такие системы, вроде Spinto, и все Android-аппы могли работать с всеми формами биометрии стандартизированно.

Что решить сегодня?

Когда вам важна наивысшая сохранность информации, подбирайте топовые устройства со встроенным ИК-проектором или же ToF-сенсором глубины.

iPhone всех существующих последних поколений
Huawei Companion/P ряда
Mix Professional
Vivo X модели
Oppo Find Х серии.

Если средства невелик – лучше отдавать предпочтение обычным средствам безопасности (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в Spinto, использовать только как опциональную опцию комфорта.

Как улучшить удобство функционирования функции?

Есть несколько хитростей для людей, кто уже использует разблокировку через лицо:

Часто меняйте свою фотографию-шаблон, если значительно трансформируется внешний вид.
Не пренебрегайте протирать линзу передней камеры – пятна могут снизить точность!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам включает камеру как только вы поднимаете его.
Во время регистрации пытайтесь удерживать голову неподвижно перед видеоустройства исключая сильного наклона головы.
Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отвели взгляд от экрана.

Будущее эволюции инноваций

В ближайшие годы можно предполагать развития полностью бесконтактных способов идентификации персоны сразу по нескольким биометрическим данным параметрам одновременно: физиономия + звучание + шаги + манипуляции руками!

Также вероятно появление современных подходов обеспечения приватности – например, динамическое изменение цифрового паттерна после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – единственная из очень захватывающих технологий нашего эпохи! Она делает взаимодействие со мобильным устройством комфортнее чем до этого, и такие приложения, как Спинто казино, могут в разы повысить ваш опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы знаете, как работает эта технология изнутри, – будете в состоянии вдумчиво подбирать свой очередной девайс!