Компания Meta* показала на конференции Meta Connect функцию Hologram. Она заменяет изображение с камеры на виртуальный аватар лица пользователя, сгенерированный ИИ.

Изображение: ITHome

Hologram работает на базе генеративного искусственного интеллекта. Модель запускается в реальном времени на серверах Meta. Она принимает аудиосигнал с микрофона очков и создает двухмерный видеопоток. Этот поток уходит на другой конец вызова. Выражения лица аватара появляются в основном из-за изменений голоса во время разговора. Камера не захватывает реальное изображение человека.

Перед первым использованием владелец открывает приложение Meta AI на смартфоне. Он поворачивает голову, улыбается и отвечает на несколько вопросов. Система запоминает мимику, одежду и фон. Обработка на серверах занимает несколько минут.

На платформе Quest функция работает в 3D-формате в натуральную величину. Когда два пользователя Quest общаются по видеосвязи через WhatsApp**, они сначала видят аватары друг друга в 3D-окне. Нажатие кнопки рядом с окном переключает звонок в полноэкранный режим. Тогда виртуальный аватар собеседника появляется перед пользователем почти в реальном размере.

Нынешняя версия требует улучшений. Размер персонажа может немного отличаться от реальных людей. Такие детали, как глаза, в некоторых ситуациях выглядят грубовато. Если пользователь слишком сильно наклоняет экран в сторону, виртуальный персонаж искажается.

Версия для Ray-Ban Display показывает только лицо и плечи. Функция Hologram станет доступна этой осенью в раннем доступе для пользователей в США. Очки Ray-Ban Display продаются за 799 долларов.

* Meta признана экстремистской, ее деятельность запрещена на территории России.

** Принадлежит компании Meta (признана в РФ экстремистской организацией и запрещена).