Nvidia представила виртуального помощника на базе ИИ

R2X использует алгоритмы Nvidia для анимации и рендеринга, а также поддерживает интеграцию с GPT-4o от OpenAI и Grok от xAI. Пользователи могут взаимодействовать с аватаром с помощью текстовых или голосовых команд, загружать документы для обработки или даже предоставлять доступ к экрану компьютера.

Во время демонстрации на CES R2X помогал работать с инструментом Generative Fill в Adobe Photoshop. Ассистент смог загрузить изображение, но иногда давал некорректные инструкции или терял доступ к экрану.

Одна из ключевых функций R2X — анализ документов с использованием технологии Retrieval Augmented Generation (RAG), которая позволяет извлекать информацию из файлов. Например, ассистент успешно обработал PDF-документ и ответил на вопросы о его содержании.

Однако технология сталкивается с рядом проблем. Аватар иногда зависает в неестественных позах, а его голос звучит странно.

Nvidia планирует сделать R2X открытой платформой в первой половине 2025 года. Это позволит разработчикам адаптировать ассистента для своих задач и интегрировать с любимыми ИИ-продуктами. Компания также работает над тем, чтобы R2X мог участвовать в видеоконференциях через Microsoft Teams и выполнять действия на компьютере.