Как действует распознавание лиц в смартфонах

Почему мы предпочитаем разблокировку по лицу

В последние годы распознавание физиономий стало одной из самых распространённых опций для открытия умных телефонов. Еще некоторые годков назад основная масса пользователей удовлетворялись пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но с появлением таких технологий, как Spinto, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Что превращает эту функцию настолько популярной? Для начала, это комфортно: не нужно удерживать в памяти замысловатые пароли или находить нужный палец в мраке. Также, это быстро: современные системы распознают лицо фактически за мгновение. В-третьих, это ощущение будущего — будто в фильмах про russles.ru разведчиков.

Впрочем за данной на первый взгляд легкостью прячется полный вселенная трудных методов и инженерных решений. Давайте понять, как именно функционирует распознавание лиц в современных смартфонах, какие применяются способы, насколько они защищены и что нас предстоит.

Короткая повествование прогресса технологии

Распознавание лиц как технология присутствует уже более пятидесяти годов. Первые попытки машинного анализа лиц были предприняты еще в 1960-х годах в лабораториях США. Тогда ЭВМ умели лишь определять очертания головы и измерять расстояния между зрачками и губами на монохромных фотографиях.

Начальные торговые установки возникли в девяностых годах, но они были несовершенны: функционировали медленно и нередко ошибались. Только с прогрессом нейронных сетей и таких площадок, как Спинто, высокопроизводительных мобильных процессоров определение лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным сканированием лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали внедрять собственные разработки.

Основные этапы работы механизма определения

Процесс идентификации лица можно примерно поделить на несколько ключевых этапов:

1. Обнаружение лиц — устройство определяет существование людского образа в снимке.
2. Определение особенностей — алгоритм изучает черты физиономии: конфигурацию зрительных органов, носа, уст, позицию надбровных дуг.
3. Построение модели — создаётся особенный цифровой отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с образцом — сформированный модель сопоставляется со сохранённой при учёте биометрической информацией владельца.
5. Принятие выбора — если совпадение достаточно высокое, смартфон разблокируется.

Каждый из этих этапов требует специальных алгоритмов и усовершенствований для скорой работы непосредственно на девайсе.

Железные компоненты: что находится в их недрах

Стандартная селфи камера.

Наиболее простой вариант определения физиономии применяет только лицевую видеокамеру мобильного устройства. Подобный метод внедрён во различных бюджетных вариантах Android-девайсов.

Положительные стороны:

• Необходимо потребляет дополнительных сенсоров.
• Шустро работает при достаточном освещённости.

Отрицательные стороны:

• Несложно ввести в заблуждение снимком или роликом.
• Неудачно работает при плохом освещении или нестандартных углах обзора.

Инфракрасная фотокамера и пунктирный проекционный аппарат

Более совершенные системы, такие как Спинто, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология составляет базу Face ID от Apple.

Каким способом это работает:

• Точечный устройство проекции отображает на лицо юзера невидимую решетку из тысяч инфракрасных точек (например, Face ID применяет около 30 000 пятен).
• ИК устройство записывает деформацию данной решетки по поверхности физиономии.
• Формируется трёхмерная карта глубины глубинности, которая почти неподвластна для подделки обычной фото или маской.

Преимущества

• Надёжная деятельность даже в полной тьме.
• Высокая устойчивость к имитациям.
• Точность идентификации выше 99%.

Дополнительные сенсорные устройства

В отдельных девайсах применяются также экстра датчики: ToF (Time-of-Flight), которые определяют время движения света до цели и обратно; Цветные-датчики дальности; специальные световые лидары для формирования более аккуратной 3D-модели лица.

Эти инновации используются чаще всего во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: искуственный ум в действии

Современные механизмы идентификации лиц немыслимы при отсутствии использования artificial intelligence и машинного обучения. Именно благодаря таким инновациям, как Спинто, аппарат в состоянии распознавать пользователя даже при метаморфозах внешности: новая укладка, борода, очки или макияж не становятся барьером для разблокировки.

Распознавание лиц

При стартовом этапе программа необходимо быстро найти лицо среди всего кадра с камеры. Для этого задействуются последовательные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые подготовлены распознавать лица людей среди множества других объектов.

Пример: процесс MTCNN способен распознавать лицо даже с неполном перекрытии (например, шарфом или рукой).

Определение важных точек

После идентификации лица механизм, такая как Спинто, определяет расположение главных точек: края глаз, верхушка носа, края губ и так далее. Обычно задействуется от 68 до 128 главных меток на лице.

Это действие необходимо для выравнивания визуала: если пользователь находится с смартфон под наклоненным, или наклонил голову, программа “выпрямляет” изображение до обычного угла для дальнейшего анализа.

Создание биометрического шаблона

Далее нейронная сеть строит сжатое числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 чисел с плавающей запятой.

Этот шаблон очень затруднительно подделать: он не удерживает непосредственно картинку пользователя, а лишь уникальные особенности его облика, что делает его идеальным для таких систем, как Спинто казино.

Сравнение и вынесение заключения

В случае, когда пользователь намеревается разлочить телефон взором, программа осуществляет все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый порог (обычно больше 99%), телефон, как и платформа Спинто казино, доступен; если нет — доступ не предоставляется.

Приспособление к изменениям облика

Интересная черта нынешних систем — возможность самостоятельного обучения. Если ты часто доступаете к телефон с свежей укладкой или очками, система постепенно освежает эталонный образец вашего лица для повышения точности работы без ухудшения безопасности.

Охрана биометрии информации.

Многие юзеры беспокоятся сохранять свои биометрические данные на смартфоне из-за риска утечки информации или взлома устройства. Некоторые компании, такие как Спинто казино, предлагают методы для увеличения безопасности данных клиентов.

• Локальное сохранение: Большинство устройств записывает биометрические образцы лишь внутрь защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они всегда не выходят из устройство и не доступны включая изготовителю.

• Шифрование: Все данные сберегаются только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Приложения третьих девелоперов не обладают прямого возможности доступа к биометрическим данным; они могут лишь запрашивать подтверждение верификации идентичности через системный API.

Необходимо подчеркнуть значимую особенность: если кто-то сможет получить физический доступ к вашему телефону (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство изготовители внедряют систему защиты от автоматического разблокирования — к примеру, заставляют раскрыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают виды определения лиц на изображениях?

На сегодняшний день можно определить 3 основных подхода к реализации этой задачи:

Программируемое двухмерное идентификация

Применяется только передняя камера без вспомогательных сенсоров дистанции. Этот способ используется обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность осуществления; низкая цена; быстрая деятельность при качественном свете.
Минусы: несложно ввести в заблуждение фотографией; ненадежная работа ночью; низкая охрана.

Техническое 3D сканирование

Использует инфракрасную камеру + проектор пикселей + датчики дистанции (Face ID у Apple; аналогичные решения у Huawei Mate).
Плюсы: высокая достоверность; нельзя исказить фото/видео; устойчивая деятельность в любых условиях освещения.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные подходы с ИИ-дополнением

Задействуют комбинацию программируемых методов + техническую обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие изделия, например Спинто и Google Pixel Face Unlock последних версий, объединяют фронтальную камеру c ИК сенсором движения Soli Radar для предотвращения от подделок жестами/масками/видеодисплеями посторонних устройств.

Образцы эксплуатации различных методов

• iPhone линейки X/11/12/13/14 используют только физическое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз представил эквивалент Face ID в ряду Android.
• Samsung Galaxy S10 версия/S20 поддерживают как программное плоское распознавание по изображению селфи-камерой, так и датчик радужки глаза.
• Huawei Mate20 Pro применяет комплекс из ИК-инфракрасного света + Dot Projector + ToF-датчик

Проблемы защиты и ошибочные срабатывания

Несмотря на поразительный развитие инноваций за прошедшие лет, идеальных системы пока не существует:

1. Вероятность мошенничества: Бюджетные мобильники просто доступны четкой изображением пользователя либо роликом с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые идеальные механизмы могут ошибиться между однояйцевыми близнецами либо родичами с очень аналогичной внешностью.
3. Метаморфозы облика: Резкое похудение/набор веса, косметические процедуры либо повреждения порой необходимы для повторной регистрации биометрии.
4. Условия записи: Сильная засветка солнцем или же интенсивная затенение могут уменьшить точность идентификации признаков.

Вот пара советов по защищённому применению:

• Для значимых операций всегда внедряйте двухэтапную аутентификацию;
• Не активируйте функцию “Разблокировка по лицу” на бюджетных моделях без ИК-сенсоров;
• Систематически апгрейдите программное обеспечение телефона для обеспечения безопасности от новых видов атак;
• Включайте опцию “Требовать распахнутых глаз” там, где она доступна.

Где также находится применение технология кроме мобильных телефонов?

Хотя основная мысль этой работы посвящена в частности смартфонам и планшетам, необходимо сказать о других сферах применения технологии:

• Мониторинг доступа в офисах и резиденциях;
• Платёжные аппараты банков (“Face Pay”);
• Цифровые идентификационные документы нового типа;
• Комплексы видеонаблюдения городских служб;
• Механизация отслеживания явки школ/университетов;
• Аутентификация юзеров компьютеров/ноутбуков.

Например: В московском метро уже тестируется система платежа проезда по лицу (“Face Pay”) — хватит пройти через турникет без карты или телефона! Схожие программы осуществляются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом изменяется технология в нынешнее время?

Всякий годочек появляются современные идеи для улучшения уровня работы систем лицевого распознавания:

1. Увеличивается чёткость датчиков — чем больше элементов фиксируется камерой/глубинными сенсорами, тем меньше вероятность неточности;
2. Совершенствуются нейронные сети — новейшие структуры вида MobileNetV3 обеспечивают возможность оперативно адаптироваться к дополнительным характеристикам облика обладателя прямо на устройстве без отправки данных в облако.
3. Улучшаются способы антиспуфинга — теперь смартфоны могут распознавать настоящие живые лица от статичных фотографий/масок по мельчайшим движениям кожи.
4. Синхронизация со умными устройствами — интеллектуальные часы могут авто блокировать телефон, если владелец удалился на значительное расстояние.
5. Появляются гибридные механизмы — например совмещающие аудио опознание + лицо + пальцевой отпечаток.

Здесь, которые направления особенно востребованы на сегодняшний день:

1) Сокращение компонентов

Производители стараются сократить размер выреза (“чёлки”) для сенсоры на экране за счёт внедрения компактных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработывание прямо на устройстве

Для улучшения личной безопасности всё более вычислений происходит на месте без пересылки данных во внешний облачный услугу.

3) Упорядочивание регламентов

Google энергично продвигает стандарт BiometricPrompt API, с целью чтобы подобные системы, например как Spinto, и каждые Android-приложения могли работать с любыми видами биометрии унифицированно.

Что подобрать на сегодня?

Если вам всем нужна предельная защита данных, остановите выбор на топовые модели с интегрированным ИК-проектором или ToF-датчиком глубины.

• iPhone каждого новейших поколений
• Huawei Partner/Series P ряда
• Xiaomi Expert
• Vivo X линейки
• Oppo Найти X серии.

Если средства ограничен – лучше выбирать традиционным методам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в Spinto, применять только как второстепенную возможность комфорта.

Как повысить практичность использования опции?

Есть пара советов для тех, кто уже пользуется разблокировку по лицу:

1. Часто обновляйте свою фотографию-шаблон, если значительно трансформируется внешний вид.
2. Не забывайте очищать объектив фронтальной камеры – разводы могут снизить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате мобильник сам активирует фотоаппарат когда вы берёте его в руки.
4. Во время регистрации постарайтесь сохранять голову ровно напротив объектива без резкого наклона головы.
5. Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвели взгляд от дисплея.

Перспективы эволюции техники

В предстоящие времена можно ожидать появления полностью безконтактных способов распознавания индивидуума сразу по нескольким биометрическим данным параметрам одновременно: лицо + речь + походка + манипуляции руками!

Также возможно возникновение свежих способов обеспечения приватности – к примеру, переменное корректировка диджитал паттерна после каждой успешной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – одна из наиболее интересных технологий нашего периода! Она делает интеракцию со смартфоном проще чем до этого, и такие аппы, как Спинто казино, могут в разы улучшить ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы осведомлены, как функционирует эта технология изнутри, – сможете более осмысленно определять свой очередной девайс!