Каким образом работает распознавание лиц в мобильных устройствах
Зачем мы выбираем разблокирование по лицевому распознаванию
В недавние времена определение физиономий стало одной из наиболее востребованных функций для открытия смартфонов. Еще некоторые годов тому назад большинство пользователей удовлетворялись пин-кодами, секретными кодами или датчиками отпечатков пальцев. Но с появлением таких технологий, например admiral x, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.
Что делает эту возможность настолько популярной? Прежде всего, это комфортно: не нужно удерживать в памяти трудные пароли или отыскивать верный палец в тьме. Кроме того, это мгновенно: современные алгоритмы узнают лицо практически за мгновение. В-третьем пункте, это ощущение футуристичности — будто в кинофильмах про адмирал х официальный сайт шпионов.
Однако за этой на первый взгляд простотой прячется целый вселенная трудных техник и инженерных разработок. Попробуем понять, как конкретно действует идентификация по лицу в актуальных мобильных телефонах, какие существуют способы, насколько они защищены и что нас ожидает в будущем.
Краткая история развития инноваций
Распознавание лиц как методика имеется уже более пятидесяти лет. Первые эксперименты автоматизированного изучения лица были предприняты еще в 1960-х годы в лабораториях США. Тогда компьютеры могли лишь определять контуры лица и измерять расстояния между зрачками и ртом на черно-белых изображениях.
Изначальные бизнес платформы стали доступны в девяностых годах, но они были далеки от совершенства: функционировали медленно и часто ошибались. Только с прогрессом искусственных сетей и таких площадок, как адмирал х, сильных мобильных чипов распознавание лиц стало по-настоящему массовым явлением.
В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным распознаванием лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали интегрировать свои разработки.
Основные стадии действия системы определения
Процесс распознавания лица можно примерно поделить на несколько основных этапов:
- Распознавание лица — устройство определяет присутствие человеческого образа в снимке.
- Выделение характеристик — алгоритм исследует черты облика: форму зрительных органов, обонятельного органа, уст, положение надбровных дуг.
- Построение шаблона — создаётся особенный виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
- Сравнение со эталоном — созданный шаблон сравнивается со записанной при регистрации биометрической данными владельца.
- Принятие определения — если совпадение достаточно высокое, смартфон открывается.
Любой из данных этапов требует индивидуальных процедур и усовершенствований для быстрой работы непосредственно на девайсе.
Аппаратные составляющие: что находится в их недрах
Обычная селфи камера.
Простейший простой вариант идентификации облика задействует исключительно переднюю камеру смартфона. Такой способ внедрён во многих доступных вариантах Android-девайсов.
Преимущества:
- Не нуждается в потребляет дополнительных сенсоров.
- Быстро работает при хорошем свете.
Минусы:
- Просто одурачить изображением или роликом.
- Неправильно действует при низком свете или нестандартных углах обзора.
Инфракрасная фотокамера и точечный проектор
Более усовершенствованные системы, такие как адмирал х, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика является основой Face ID от Apple.
Как это действует:
- Точечный проектор проецирует на лицо юзера невидимую решетку из тысяч инфракрасных точек (например, Face ID применяет около 30 000 точек).
- Инфракрасная камера записывает искривление данной решетки по поверхности физиономии.
- Формируется трехмерная карта глубины, которая практически невозможна для фальсификации обычной снимком или маскировкой.
Выигрыши
- Надёжная функционирование даже в полной неосвещённости.
- Высокая защита к фальсификациям.
- Точность распознавания более 99%.
Добавочные датчики
В отдельных устройствах используются также экстра сенсоры: ToF (Time-of-Flight), которые определяют период движения света до объекта и обратно; RGB-датчики глубины; специальные оптические измерители расстояния для создания более аккуратной 3D-модели физиономии.
Эти разработки применяются наиболее часто во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).
Компьютерные процедуры: синтетический ум на действии
Нынешние устройства распознавания физиономий неосуществимы в отсутствие использования artificial intelligence и машинного обучения. Именно из-за таким инновациям, как адмирал х, устройство способно идентифицировать владельца даже при изменениях внешности: новая причёска, щетина, очки или косметика не становятся помехой для открытия.
Детектирование физиономии
При начальном этапе система должна быстро распознать ликовое изображение среди целого снимка камеры. Для этого применяются последовательные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые “обучены” идентифицировать человеческие лица среди множества других объектов.
Пример: алгоритм MTCNN способен находить лицо даже в случае неполном перекрытии (например, шарфом или ладонью).
Идентификация основных моментов
После идентификации лица устройство, такая как адмирал х, вычисляет расположение ключевых точек: уголки глаз, конец носа, края губ и так далее. Часто используется от 68 до 128 ключевых меток на лицевой поверхности.
Это действие необходимо для стабилизации картинки: если пользователь держит мобильник под наклоном, или наклонил голову, программа корректирует картинку до обычного угла для дальнейшего анализа.
Создание биометрии шаблона
Далее нейронная сеть строит сжатое цифровое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след внешности длиной от 128 до 512 вещественных чисел.
Такой шаблон крайне сложно сфальсифицировать: он не удерживает само фото пользователя, а лишь исключительные особенности его внешности, что делает его оптимальным для таких платформ, как admiral-x.
Сравнительный анализ и вынесение заключения
В случае, когда человек желает разлочить смартфон взглядом, программа воспроизводит все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.
Если схожесть превышает установленный порог (обычно превышает 99%), телефон, как и платформа admiral-x, открывается; если нет — доступ блокируется.
Привыкание к трансформациям облика
Увлекательная характеристика нынешних систем — способность самостоятельного обучения. Если вы постоянно разблокируете мобильное устройство с новой стрижкой или очками, программа постепенно обновляет эталонный шаблон вашего внешности для увеличения точности действия без снижения уровня безопасности.
Защита биометрических данных информации.
Большинство юзеры боятся держать свои биометрические данные на смартфоне из-за вероятности потери данных или взлома гаджета. Иные фирмы, такие как admiral-x, предлагают решения для увеличения защиты данных юзеров.
-
Локальное сбережение: Преимущественно аппаратов записывает биометричные образцы исключительно внутри безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они никогда не покидают гаджет и не доступны включая производителю.
-
Шифрование: Все данные сберегаются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.
-
Изоляция программ: Приложения внешних девелоперов не обладают непосредственного доступа к биометрическим данным; они могут лишь запрашивать факт верификации личности через системный API.
Стоит отметить существенную деталь: в случае, если какой-то человек достанет доступ к вашему телефону физически (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество компании осуществляют защиту от неосознанного разблокирования — в частности, заставляют раскрыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.
Какие именно существуют типы определения лиц на изображениях?
На сегодняшний день можно различить 3 основных подхода к осуществлению этой операции:
Программируемое 2D идентификация
Применяется только передняя камера без экстра сенсоров дистанции. Этот подход наблюдается чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).
Преимущества: простота реализации; умеренная затраты; оперативная функционирование при качественном освещении.
Минусы: легко обмануть снимком; ненадежная функционирование ночью; недостаточная охрана.
Техническое 3D сканирование
Задействует инфракрасную камеру + проекционный модуль точек + датчики глубины (Face ID у Apple; подобные решения у Huawei Mate).
Плюсы: высокая достоверность; нельзя исказить изображение/видеозапись; постоянная деятельность в любых условиях освещения.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)
Гибридные подходы с дополнением ИИ
Используют комбинацию софтверных методов + аппаратную обработку + постобработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, как адмирал х и Google Pixel Face Unlock последних версий, комбинируют фронталку c ИК датчиком мобильности Soli Radar для защиты от фальсификаций руками/масками/видеоэкранами чужих устройств.
Иллюстрации применения разнообразных методов
- iPhone линейки X/11/12/13/14 задействуют только аппаратное трёхмерное 3D-сканирование
- Xiaomi Mi8 Explorer Edition впервые представил аналог Face ID среди Android.
- Samsung Galaxy S10 версия/S20 обеспечивают как программное 2D идентификацию по фото селфи-камерой, так и датчик радужки глаза.
- Huawei Mate20 Pro использует систему из ИК-освещения + Dot Projector + ToF-датчик
Вопросы безопасности и ложные сигналы
Несмотря на поразительный успехи технологий за последние годы, безупречных систем пока не наблюдается:
- Шанс обмана: Недорогие смартфоны просто открываются высококачественной снимком владельца либо роликом с дисплея иного гаджета.
- Идентичные близняшки: Даже самые совершенные системы могут ошибиться между однояйцевыми близнецами либо семьями с очень похожей внешностью.
- Метаморфозы облика: Внезапное похудение/увеличение массы тела, пластические операции или травмы в некоторых случаях необходимы для обновления данных биометрии.
- Условия записи: Яркая освещённость солнцем или же плотная затенение могут понизить верность определения признаков.
Вот пара подсказок для надёжному применению:
- Для важных операций всегда используйте двухфакторную аутентификацию;
- Не включайте функцию “Разблокировка по лицу” на бюджетных моделях без ИК-сенсоров;
- Постоянно обновляйте прошивку программное обеспечение телефона для обеспечения безопасности от новых видов атак;
- Включайте опцию “Требовать распахнутых глаз” везде, где она есть.
В каких областях также находится применение технологии за исключением мобильных телефонов?
Пускай тема этой работы сосредоточена на в частности мобильным устройствам, следует отметить прочих направлениях внедрения технологии:
- Мониторинг входа в офисах и резиденциях;
- Платёжные терминалы банков (“Face Pay”);
- Цифровые паспорта последнего типа;
- Установки видеомониторинга городских подразделений;
- Автоматизирование регистрации посещаемости учебных заведений/университетов;
- Аутентификация участников компьютеров/ноутбуков.
Например: В московском метро уже тестируется система оплаты проезда по фейсу (“Face Pay”) — нужно лишь пройти через турникет без карты или мобильника! Аналогичные программы осуществляются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.
Каким способом трансформируется технология в наше время?
Всякий год появляются современные мысли для повышения качества деятельности систем идентификации лиц:
- Увеличивается разрешение сенсоров — чем больше элементов фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность погрешности;
- Совершенствуются искусственные интеллекты — современные архитектуры вида MobileNetV3 позволяют быстро адаптироваться к свежим чертам внешности пользователя прямо на устройстве без отправки данных в облако.
- Улучшаются способы антиспуфинга — теперь мобильные устройства могут отличать настоящие анимированные облики от фиксированных фото/маскировок по мельчайшим микродвижениям.
- Интеграция со умными устройствами — интеллектуальные часы могут самостоятельно заблокировать мобильный телефон, если обладатель удалился на значительное расстояние.
- Проявляются комбинированные устройства — к примеру объединяющие аудио опознание + облик + отпечаток пальца.
Здесь, те направления очень востребованы на сегодняшний день:
1) Миниатюризация компонентов
Изготовители пытаются уменьшить габариты выреза (“чёлки”) под датчики на дисплее за счёт внедрения миниатюрных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.
2) Переработка прямо на устройстве
Для увеличения приватности всё более обработки данных происходит на месте без пересылки информации во сторонний облачный услугу.
3) Унификация стандартов
Google активно пропагандирует норму BiometricPrompt API, чтобы аналогичные площадки, как admiral x, и любые Android-программы могли взаимодействовать с любыми видами биометрии единообразно.
Какое выбрать на сегодня?
В случае если вам нужна предельная сохранность данных, подбирайте топовые устройства с вмонтированным ИК-проектором либо ToF-сенсором глубины.
- iPhone каждого новейших поколений
- Huawei Mate/P Series линейки
- Xiaomi Professional
- Vivo X серии
- Oppo Find X линейки.
Если средства скромен – лучше отдавать предпочтение обычным методам безопасности (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в admiral x, использовать только как дополнительную опцию комфорта.
Каким образом увеличить практичность функционирования возможности?
Есть пара лайфхаков для тех, кто уже применяет разблокировку по лицу:
- Периодически обновляйте свою фотографию-шаблон, если кардинально меняется облик.
- Не пренебрегайте очищать линзу передней камеры – разводы могут понизить точность!
- Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам включает фотоаппарат как только вы поднимаете его.
- При записи постарайтесь сохранять лицевую часть неподвижно перед видеоустройства не допуская сильного наклона головы.
- Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отвернулись от дисплея.
Возможности развития инноваций
В скоро наступающие годы можно предполагать возникновения полностью безконтактных способов распознавания персоны сразу по нескольким биометрическим данным параметрам одновременно: облик + голос + шаги + движения рук!
Также возможно возникновение современных методов обеспечения конфиденциальности – скажем, динамическое модификация диджитал шаблона после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.
Распознавание лиц – одна из очень увлекательных техник нашего времени! Она предоставляет общение со мобильным устройством удобнее чем когда-либо прежде, и такие аппы, как admiral-x, могут существенно повысить ваш пользовательский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.
Теперь, если вы осведомлены, как функционирует эта технология изнутри, – сможете вдумчиво определять свой очередной гаджет!