Каким образом действует идентификация лиц в смартфонах

Почему мы предпочитаем разлочивание по лицу

В прошлые годы идентификация лиц стало одной из самых популярных функций для разблокировки умных телефонов. Всего несколько лет ранее большинство юзеров удовлетворялись PIN-кодами, паролями или сканерами отпечатков пальцев. Но при появлением таких технологий, например Spinto, нам вполне просто взглянуть на экран — и устройство тут же узнает своего владельца.

Что обуславливает данную функцию такой востребованной? Для начала, это удобно: не нужно помнить замысловатые пароли или находить нужный палец в тьме. Также, это мгновенно: современные программы узнают лицо фактически за мгновения ока. В-третьих, это впечатление будущего — как будто в кинофильмах про russles.ru разведчиков.

Тем не менее за этой на первый взгляд несложностью таится полный универсум трудных техник и инженерных концепций. Давайте исследовать, как конкретно функционирует распознавание лиц в современных мобильных телефонах, какие бывают способы, насколько они надёжны и что нас ждёт впереди.

Сжатая хроника эволюции технологии

Идентификация лиц как техника присутствует уже более пятидесяти лет. Изначальные эксперименты автоматического анализа облика были осуществлены еще в 1960-х годы в научных учреждениях США. Тогда компьютеры способны были лишь определять очертания черепа и вычислять дистанции между очами и ртом на черно-белых изображениях.

Начальные торговые системы появились в девяностых годах, но они были далеки от совершенства: действовали неспешно и часто ошибались. Только с эволюцией искусственных сетей и таких платформ, как Спинто, сильных мобильных микросхем определение лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с надёжным трёхмерным идентификацией лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и другие начали интегрировать личные решения.

Главные этапы функционирования устройства определения

Процесс распознавания лица можно условно сегментировать на несколько ключевых этапов:

Идентификация лица — аппарат определяет существование гуманного образа в изображении.
Выделение особенностей — механизм изучает особенности облика: форму глаз, обонятельного органа, губ, позицию надбровных дуг.
Построение модели — создаётся неповторимый цифровой отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение с образцом — полученный шаблон сопоставляется со сохранённой при регистрации биометрической данными владельца.
Принятие решения — если сходство достаточно высокое, смартфон деблокируется.

Любой из указанных этапов требует особых процедур и усовершенствований для быстрой работы непосредственно на девайсе.

Технические составляющие: что прячется внутри

Обычная селфи камера.

Простейший несложный метод определения облика применяет исключительно фронтальную камеру мобильного устройства. Данный подход реализован во многих бюджетных вариантах Android-девайсов.

Сильные стороны:

Не требует дополнительные сенсоров.
Оперативно работает при достаточном освещённости.

Минусы:

Просто обмануть изображением или видеозаписью.
Плохо работает при плохом освещённости или непривычных углах обзора.

Инфракрасная камера и пунктирный проекционный аппарат

Более усовершенствованные системы, такие как Спинто, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика составляет базу Face ID от Apple.

Каким образом это функционирует:

Точечный проекционный прибор проецирует на физиономию пользователя невидимую решетку из тысяч инфракрасных точек (например, Face ID задействует около 30 000 точек).
Инфракрасная камера регистрирует искривление этой решетки по плоскости физиономии.
Создаётся 3D карта глубины глубинности, что почти невозможна для фальсификации типичной фотографией или маской.

Выигрыши

Надёжная работа даже в полной тьме.
Сильная защита к фальсификациям.
Точность идентификации выше 99%.

Добавочные сенсоры

В отдельных девайсах используются также экстра сенсоры: ToF (Time-of-Flight), которые фиксируют период движения луча до предмета и обратно; Цветные-датчики дальности; специальные световые измерители расстояния для формирования более аккуратной 3D-модели лица.

Эти разработки используются наиболее часто во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные алгоритмы: искуственный ум на работе

Нынешние устройства распознавания лиц невозможны без применения ИИ и машинного обучения. Именно из-за таким разработкам, как Спинто, устройство в состоянии распознавать юзера даже при трансформациях внешности: новая причёска, борода, очки или грим не становятся помехой для деблокировки.

Распознавание лица

При первом шаге программа обязана мгновенно обнаружить образ лица среди всего изображения с камеры. Для данной цели используются каскадные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые натренированы находить лица людей среди множества других объектов.

Пример: алгоритм MTCNN в состоянии обнаруживать лицо даже с частичном перекрытии (например, платком или рукой).

Идентификация важных точек

После распознавания лица механизм, такая как Спинто, вычисляет местоположение ключевых точек: кончики глаз, конец носа, границы губ и так далее. Часто задействуется от 68 до 128 ключевых маркеров на лице.

Это действие требуется для стабилизации изображения: если пользователь удерживает мобильник под углом, или повернул головку, программа исправляет картинку до нормального состояния для дальнейшего анализа.

Построение биометрического образца

Далее нейронная сеть строит компактное цифровое представление ("эмбеддинг") облика пользователя — своеобразный цифровой образ лица длиной от 128 до 512 вещественных чисел.

Такой образец весьма трудно имитировать: он не хранит непосредственно изображение юзера, а лишь уникальные особенности его внешности, что делает его идеальным для таких площадок, как Спинто казино.

Сравнение и принятие решения

В случае, когда пользователь намеревается открыть смартфон взглядом, механизм осуществляет все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый границу (обычно выше 99%), телефон, как и платформа Спинто казино, разблокируется; если нет — доступ блокируется.

Привыкание к трансформациям внешности

Занимательная особенность современных системы — способность самообучения. Если ты часто разблокируете смартфон с обновленной прической или оптикой, алгоритм постепенно модернизирует эталонный шаблон вашего внешности для повышения точности работы без ухудшения безопасности.

Безопасность биометрических данных данных.

Многие клиенты боятся сохранять свои биометрические идентификационные данные на телефоне из-за вероятности потери данных или хакерской атаки. Некоторые организации, вроде Спинто казино, предлагают методы для улучшения сохранности информации юзеров.

Локальное сбережение: Основная часть девайсов хранит биометричные модели только в пределах защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Они всегда не выходят из гаджет и не доступны включая производителю.
Шифрование: Все информация хранятся только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.
Изоляция приложений: Программы сторонних разработчиков не обладают прямого возможности доступа к биометрическим данным; они могут лишь требовать факт верификации личности через системный API.

Стоит упомянуть существенную подробность: в случае, если кто-то сможет получить доступ к вашему телефону физически (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие компании осуществляют защиту от автоматического разблокирования — например, требуют разомкнуть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются типы определения лиц на изображениях?

На сегодняшний день можно определить выделить 3 главных подхода к осуществлению этой функции:

Программируемое плоское распознавание

Эксплуатируется только передняя камера без экстра сенсоров дистанции. Такой способ наблюдается чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота воплощения; низкая затраты; скоростная функционирование при хорошем свете.
Минусы: легко ввести в заблуждение снимком; неустойчивая деятельность ночью; недостаточная безопасность.

Оборудование для трёхмерное сканирование

Использует ИК видеокамеру + проектор пикселей + сенсоры дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Достоинства: большая достоверность; невозможно исказить изображение/видеозапись; устойчивая работа в любых условиях освещения.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана ("чёлка")

Гибридные методы с интеграцией ИИ

Задействуют комбинацию программируемых методов + техническую обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам ("anti-spoofing"). Например, такие товары, например Спинто и Google Pixel Face Unlock последних поколений, сочетают фронтальную камеру c инфракрасным датчиком движения Soli Radar для защиты от подделок жестами/масками/видеоэкранами посторонних устройств.

Иллюстрации применения разнообразных техник

iPhone линейки X/11/12/13/14 применяют только физическое трёхмерное сканирование
Xiaomi Mi8 Explorer Edition впервые внедрил подобие Face ID в числе Android.
Samsung Galaxy S10 версия/S20 имеют как программное обеспечение двухмерное определение по снимку фронталкой, так и сканер ириса глаза.
Huawei Mate20 Pro применяет комплекс из ИК-подсветки + Dot Projector + ToF-датчик

Вопросы защиты и ошибочные сигналы

Несмотря на поразительный прогресс технологий за недавние годы, совершенных механизмов пока не наблюдается:

Вероятность обмана: Недорогие телефоны просто "разблокируются" качественной фотографией пользователя либо видео с дисплея иного гаджета.
Идентичные двойняшки: Даже самые безупречные устройства могут спутать между однояйцевыми близнецами либо родственниками с очень похожей внешностью.
Трансформации внешнего вида: Стремительное похудение/набор веса, пластические операции или травмы иногда требуют повторной регистрации биометрических данных.
Условия записи: Интенсивная освещённость солнечным светом либо глубокая затенение могут понизить аккуратность распознавания признаков.

Ниже несколько рекомендаций по безопасному использованию:

Для критически важных операций всегда используйте двухфакторную аутентификацию;
Не активируйте опцию "Разблокировка по лицу" на бюджетных устройствах без ИК-сенсоров;
Постоянно апгрейдите прошивку смартфона для обеспечения безопасности от современных угроз;
Включайте функцию "Требовать раскрытых глаз" там, где она есть.

В каких областях ещё применяется технология за исключением смартфонов?

Несмотря на то, что основная мысль данной публикации касается именно смартфонам и планшетам, необходимо сказать о альтернативных областях использования технологии:

Мониторинг доступа в офисах и жилых домах;
Платёжные аппараты финансовых учреждений ("Face Pay");
Виртуальные паспорта нового поколения;
Системы видеонаблюдения городских сервисов;
Автоматизирование регистрации присутствия учебных заведений/университетов;
Авторизация юзеров компьютеров/ноутбуков.

Например: В столичном метро уже проверяется система платежа проезда по лицу ("Face Pay") — нужно лишь пройти через турникет без пластика или телефона! Схожие инициативы реализуются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом меняется технический процесс в нынешнее время?

Каждый годочек появляются свежие мысли для повышения качества работы систем распознавания лиц:

Увеличивается детализация датчиков — чем больше деталей фиксируется видеокамерой/датчиками глубины, тем меньше риск неточности;
Совершенствуются искусственные интеллекты — современные архитектуры типа MobileNetV3 позволяют оперативно осваивать новым чертам облика обладателя напрямую на гаджете без отправки данных в облако.
Улучшаются методы антиспуфинга — теперь мобильные устройства могут различать настоящие движущиеся лица от фиксированных фотографий/маскировок по незаметным микродвижениям.
Интеграция со смарт-гаджетами — интеллектуальные часы могут самостоятельно заблокировать телефон, если обладатель ушёл далеко.
Появляются смешанные устройства — например совмещающие речевую опознание + облик + отпечаток пальца.

Здесь, которые тренды особенно востребованы на сегодняшний день:

1) Сокращение компонентов

Компании намереваются уменьшить размер прорези ("чёлки") для датчики на дисплее за счёт интеграции компактных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на устройстве

Для увеличения приватности всё более расчётов происходит внутри устройства без передачи данных во дополнительный облачный услугу.

3) Стандартизация регламентов

Гугл активно пропагандирует норму BiometricPrompt API, чтобы подобные площадки, например как Spinto, и каждые Android-программы были совместимы с всеми формами биометрии единообразно.

Что решить на сегодня?

Когда вам необходима максимальная безопасность данных, остановите выбор на флагманские устройства с интегрированным ИК-излучателем либо ToF-сенсором глубины.

iPhone всех последних версий
Huawei Companion/Series P ряда
Mi Professional
Vivo X модели
Oppo Найти Х линейки.

Если средства ограничен – лучше выбирать классическим средствам защиты (PIN-код/сканер пальца), а опцию "разблокировка по лицу", такую как в Spinto, применять только как опциональную опцию комфорта.

Как улучшить комфорт работы опции?

Есть несколько лайфхаков для пользователей, кто уже применяет функцию распознавания лица:

Периодически обновляйте свою изображение-шаблон, если кардинально меняется облик.
Не упускайте из виду чистить объектив передней камеры – загрязнения могут понизить четкость!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам запускает фотоаппарат как только вы поднимаете его.
В процессе регистрационного процесса пытайтесь удерживать лицевую часть неподвижно напротив объектива не допуская сильного наклона головы.
Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отвели взгляд от дисплея.

Возможности эволюции технологии

В скоро наступающие периоды можно предполагать развития полностью дистанционных способов распознавания персоны сразу по нескольким биометрическим данным параметрам одновременно: лицо + звучание + манера ходьбы + манипуляции руками!

Также вероятно возникновение современных способов охраны личной информации – например, изменяющееся изменение электронного образца после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень увлекательных технологий нашего периода! Она предоставляет взаимодействие со мобильным устройством комфортнее чем до этого, и такие программы, как Спинто казино, могут существенно оптимизировать ваш пользовательский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы знаете, как функционирует эта технология в деталях, – сможете вдумчиво выбирать свой следующий устройство!