Каким образом функционирует определение лиц в телефонах

Почему мы выбираем разблокировку по фейсу

В прошлые времена распознавание лиц стало одной из самых распространённых опций для деблокировки мобильных телефонов. Всего несколько лет назад основная масса юзеров удовлетворялись пин-кодами, секретными кодами или датчиками отпечатков пальцев. Но при появлением таких технологий, как Вулкан Платинум, нам достаточно просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Какой аспект превращает данную возможность настолько популярной? Для начала, это практично: не нужно удерживать в памяти замысловатые пароли или отыскивать правильный палец в тьме. Также, это быстро: современные системы распознают лицо практически за мгновение. В-третью очередь, это чувство футуризма — будто в фильмах про vulkan platinum шпионов.

Однако за этой на первый взгляд несложностью таится полный вселенная комплексных методов и инженерных разработок. Позвольте нам разобраться, как конкретно работает фейсканирование в актуальных смартфонах, какие бывают методы, насколько они защищены и что нас ожидает в будущем.

Короткая хроника прогресса технологии

Распознавание лиц как методика присутствует уже более 50 лет. Изначальные попытки автоматизированного анализа лиц были осуществлены еще в 1960-х годы в научных учреждениях США. Тогда ЭВМ способны были лишь выделять очертания головы и определять дистанции между зрачками и губами на ахроматических изображениях.

Первые торговые системы возникли в девяностых годах, но они были несовершенны: функционировали медленно и нередко ошибались. Только с развитием синтетических сетей и таких систем, как Vulkan Platinum, мощных мобильных процессоров определение лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным идентификацией лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали внедрять собственные решения.

Ключевые этапы работы системы идентификации

Процесс определения лица можно примерно сегментировать на несколько важных этапов:

Распознавание лица — устройство определяет присутствие человеческого лица в снимке.
Извлечение признаков — система исследует особенности облика: очертания зрительных органов, обонятельного органа, уст, положение бровей.
Построение структуры — создаётся неповторимый виртуальный отпечаток (faceprint) на основе определённых признаков.
Сравнение со стандартом — полученный модель сверяется с зафиксированной при внесении биометрической информацией владельца.
Принятие определения — если сходство достаточно значительное, смартфон открывается.

Каждый из данных этапов требует индивидуальных алгоритмов и улучшений для скорой работы прямо на устройстве.

Железные компоненты: что прячется в их недрах

Типичная селфи камера.

Наиболее несложный метод определения физиономии использует исключительно лицевую камеру смартфона мобильного устройства. Подобный способ внедрён во многочисленных доступных вариантах Android-девайсов.

Положительные стороны:

Необходимо требует внешних датчиков.
Оперативно функционирует при качественном свете.

Отрицательные стороны:

Просто обмануть фотографией или видеозаписью.
Плохо функционирует при низком освещённости или необычных углах обзора.

Инфракрасная камера и пунктирный проекционный аппарат

Более продвинутые системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика лежит в основе Face ID от Apple.

Как это работает:

Точечный проектор проецирует на облик использующего невидимую сетку из тысяч инфракрасных меток (например, Face ID задействует около 30 000 пятен).
Инфракрасная камера регистрирует деформацию этой сетки по поверхности лица.
Формируется 3D карта глубины глубинности, которая почти неосуществима для фальсификации типичной снимком или маской.

Преимущества

Надёжная деятельность даже в полной тьме.
Большая устойчивость к подделкам.
Точность идентификации свыше 99%.

Дополнительные сенсоры

В определённых устройствах используются также вспомогательные датчики: ToF (Time-of-Flight), которые определяют время движения луча до предмета и обратно; Цветные-датчики глубины; специальные оптические измерители расстояния для построения более детализированной 3D-модели физиономии.

Эти технологии встречаются в основном во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: искусственный интеллект в действии

Текущие устройства распознавания лиц немыслимы в отсутствие использования artificial intelligence и machine learning. Именно благодаря таким технологиям, как Vulkan Platinum, устройство способно идентифицировать юзера даже при трансформациях внешнего вида: новая стрижка, борода, линзы или макияж не становятся препятствием для разблокировки.

Обнаружение физиономии

На начальном этапе программа должна оперативно распознать лицо в пределах полного снимка с камеры. Для этого задействуются каскадные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые натренированы распознавать лица людей среди множества других объектов.

Пример: метод MTCNN способен находить облик даже при частичном перекрытии (например, шарфом или ладонью).

Идентификация основных точек

После обнаружения лица система, такая как Vulkan Platinum, вычисляет положение ключевых точек: края глаз, кончик носа, контуры губ и так далее. Как правило используется от 68 до 128 основных меток на лицевой области.

Это необходимо для нормализации картинки: если юзер держит мобильник под наклоненным, или наклонил головку, программа исправляет картинку до стандартного положения для последующего изучения.

Формирование биометрического образца

Далее нейросеть строит уплотненное цифровое представление (« эмбеддинг ») лица пользователя — своеобразный цифровой « отпечаток » внешности длиной от 128 до 512 чисел с плавающей запятой.

Этот образец очень трудно имитировать: он не сохраняет непосредственно картинку пользователя, а лишь исключительные характеристики его облика, что делает его идеальным для таких систем, как Вулкан Казино Платинум.

Сопоставление и вынесение выбора

В случае, когда человек хочет разлочить мобильник глазами, система повторяет все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает заданный порог (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ запрещается.

Приспособление к трансформациям облика

Интересная черта актуальных систем — возможность самостоятельного обучения. Если ты регулярно доступаете к смартфон с свежей стрижкой или оптикой, система постепенно модернизирует базовый шаблон вашего облика для повышения точности работы без ухудшения безопасности.

Защита биометрических информации.

Большинство клиенты опасаются хранить свои био-идентификационные данные на мобильном устройстве из-за вероятности потери данных или хакерской атаки. Определенные фирмы, вроде Вулкан Казино Платинум, предлагают методы для увеличения защиты сведений клиентов.

Локальное сбережение: Большинство аппаратов сохраняет био-идентификационные шаблоны только в пределах защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не покидают аппарат и не доступны включая изготовителю.
Шифрование: Все сведения сохраняются только в кодированном виде с использованием новейших криптографических алгоритмов AES256.
Изоляция программ: Программы сторонних разработчиков не обладают непосредственного доступа к биометрическим; они могут лишь требовать факт верификации идентичности через системный API.

Следует упомянуть важную подробность: в случае, если кто-то достанет физический доступ к вашему телефону (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие производители внедряют меры безопасности от неосознанного разблокирования — к примеру, заставляют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие бывают виды определения лиц на изображениях?

На сегодняшний день можно определить 3 главных способа к осуществлению этой функции:

Программируемое плоское определение

Применяется только лицевая камера без дополнительных датчиков глубины. Подобный метод используется наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность воплощения; низкая стоимость; скоростная функционирование при качественном свете.
Минусы: легко обмануть снимком; неустойчивая деятельность ночью; недостаточная защищенность.

Аппаратное 3D сканирование

Задействует инфракрасную видеокамеру + проекционный модуль пикселей + сенсоры дистанции (Face ID у Apple; подобные решения у Huawei Mate).
Преимущества: высокая надёжность; не получится подделать изображение/видеозапись; постоянная работа в любых условиях освещения.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана (« чёлка »)

Гибридные методы с ИИ-дополнением

Задействуют комбинацию программных методов + аппаратную обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (« anti-spoofing »). Например, подобные продукты, например Vulkan Platinum и Google Pixel Face Unlock современных поколений, комбинируют фронтальную камеру c инфракрасным сенсором мобильности Soli Radar для предотвращения от подделок руками/масками/видеоэкранами чужих устройств.

Образцы использования разнообразных способов

iPhone линейки X/11/12/13/14 применяют только аппаратное трёхмерное сканирование
Xiaomi Mi8 Explorer Edition первый раз внедрил эквивалент Face ID среди Android.
Samsung Galaxy S10/S20 имеют как программное двухмерное распознавание по изображению фронталкой, так и сканер радужки глаза.
Huawei Mate20 Pro применяет систему из ИК-подсветки + Dot Projector + ToF-датчик

Вопросы защиты и неверные сигналы

Несмотря на замечательный прогресс техники за последние годы, совершенных систем пока не наблюдается:

Вероятность обмана: Доступные мобильники легко доступны высококачественной фотографией владельца или же роликом с экрана другого устройства.
Идентичные близнецы: Даже самые идеальные системы могут ошибиться между однояйцевыми близнецами либо родичами с очень аналогичной внешностью.
Метаморфозы внешнего вида: Стремительное снижение веса/набор веса, хирургические вмешательства либо травмы иногда необходимы для повторной регистрации биометрических данных.
Условия фотографирования: Яркая засветка солнечным светом либо интенсивная тень могут уменьшить верность определения признаков.

Здесь некоторые подсказок для надёжному использованию:

Для критически важных операций всегда используйте дополнительную аутентификацию;
Не включайте опцию « Разблокировка по лицу » на недорогих устройствах без ИК-сенсоров;
Постоянно обновляйте прошивку программное обеспечение мобильного устройства для предотвращения угроз от актуальных атак;
Включайте функцию « Требовать раскрытых глаз » в тех местах, где она доступна.

В каких местах дополнительно применяется технологии помимо смартфонов?

Несмотря на то, что основная мысль нашей работы посвящена конкретно мобильным устройствам, стоит упомянуть о прочих направлениях внедрения технологии:

Контроль доступа в офисах и жилых домах;
Платёжные устройства финансовых учреждений (« Face Pay »);
Электронные идентификационные документы современного типа;
Системы видеонаблюдения городских сервисов;
Автоматизирование отслеживания присутствия школ/вузов;
Вход пользователей ПК/ноутбуков.

Например: В городском метро уже тестируется система оплаты проезда по фейсу (« Face Pay ») — достаточно пройти через турникет без карты или мобильника! Аналогичные программы осуществляются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким способом меняется техпроцесс сегодня?

Любой год появляются современные мысли для улучшения качества деятельности систем распознавания лиц:

Увеличивается детализация сенсоров — чем больше деталей фиксируется фотоаппаратом/глубинными сенсорами, тем меньше вероятность неточности;
Улучшаются нейронные сети — новейшие структуры вида MobileNetV3 обеспечивают возможность оперативно осваивать дополнительным чертам вида владельца непосредственно на девайсе без отправки данных в облако.
Развиваются способы антиспуфинга — теперь телефоны могут распознавать подлинные движущиеся облики от фиксированных фото/маскировок по микроскопическим движениям кожи.
Интеграция со умными устройствами — интеллектуальные часы могут автоматически блокировать мобильный телефон, если пользователь удалился на значительное расстояние.
Проявляются смешанные устройства — например комбинирующие речевую опознание + физиономию + дактилоскопический след.

Вот, те тенденции в особенности популярны в данный момент:

1) Миниатюризация элементов

Компании намереваются уменьшить габариты выреза (« чёлки ») под датчики на дисплее за счёт встраивания компактных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на девайсе

Для улучшения конфиденциальности всё больше вычислений выполняется на месте без пересылки данных во внешний облачный сервис.

3) Унификация норм

Google активно продвигает стандарт BiometricPrompt API, для того чтобы такие платформы, например как Вулкан Платинум, и все Android-приложения были совместимы с различными типами биометрии унифицированно.

Какое подобрать на сегодня?

Если вам необходима максимальная защита данных, подбирайте флагманские устройства с вмонтированным ИК-проектором или же ToF-сенсором глубины.

iPhone каждого последних версий
Huawei Mate/Series P линейки
Xiaomi Pro
Vivo X серии
Oppo Найти Х серии.

Если финансы ограничен – лучше предпочесть классическим способам защиты (PIN-код/сканер отпечатка), а возможность « разблокировка по лицу », такую как в Вулкан Платинум, задействовать только как дополнительную возможность комфорта.

Каким способом увеличить удобство использования опции?

Есть несколько лайфхаков для пользователей, кто уже использует функцию распознавания лица:

Регулярно меняйте свою фото-шаблон, если сильно изменяется облик.
Не забывайте чистить линзу передней камеры – пятна могут уменьшить точность!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам активирует фотоаппарат когда вы берёте его в руки.
В процессе записи пытайтесь держать голову неподвижно напротив видеоустройства не допуская значительного наклона головы.
Используйте функцию “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отвели взгляд от экрана.

Перспективы эволюции инноваций

В предстоящие периоды можно ожидать возникновения полностью бесконтактных способов опознания индивидуума сразу по нескольким биометрическим данным параметрам одновременно: облик + звучание + шаги + жесты рук!

Также предполагается развитие современных способов защиты приватности – например, динамическое изменение цифрового паттерна после каждой успешной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – единственная из очень увлекательных технологий нашего эпохи! Она предоставляет взаимодействие со смартфоном комфортнее чем когда-либо прежде, и такие аппы, как Вулкан Казино Платинум, могут существенно улучшить ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы понимаете, как функционирует эта технология изнутри, – сумеете вдумчиво выбирать свой очередной устройство!