Эпоха, когда мы выбирали ответы из трех заготовленных строчек, уходит в прошлое. На игровой выставке NVIDIA продемонстрировала работу платформы ACE (Avatar Cloud Engine), которая позволяет общаться с виртуальными персонажами голосом — прямо как с реальными людьми.

Игрок ведет живой диалог с цифровым персонажем, используя обычную гарнитуру. Нейросеть генерирует ответы и мимику на лету.

Представьте, что вы подходите к бармену в киберпанк-забегаловке или детективу в темном офисе, нажимаете кнопку микрофона и задаете абсолютно любой вопрос. И персонаж не просто понимает вас, но и отвечает собственным уникальным голосом, учитывая свой характер, настроение и контекст игры. Именно так работает NVIDIA ACE.

Как это устроено?

Технология объединяет сразу несколько продвинутых ИИ-моделей, которые обрабатывают ваш запрос за доли секунды:

  • Распознавание речи (Automatic Speech Recognition): система переводит ваш голос в текст.
  • Генерация ответа (LLM): большая языковая модель (например, от партнеров Inworld AI) мгновенно придумывает реплику персонажа, опираясь на его лор, знания о мире и текущую ситуацию в игре.
  • Озвучка (Text-to-Speech): текст превращается в естественную речь с нужной интонацией.
  • Анимация лица (Audio2Face): нейросеть автоматически подстраивает мимику и движение губ виртуального лица под сгенерированные слова, чтобы это выглядело естественно.

Живая демонстрация: детектив, который думает сам

В качестве демонстрации NVIDIA показала проект Covert Protocol, созданный совместно с Inworld AI на движке Unreal Engine 5. Игрок берет на себя роль детектива и должен допросить ИИ-персонажей.

В отличие от обычных квестов, здесь нет правильных цепочек диалогов. Игрок может импровизировать, задавать наводящие вопросы, блефовать или пытаться втереться в доверие. Персонажи реагируют на тон и характер беседы, могут заупрямиться, выдать ценную улику или вообще отказаться разговаривать, если заподозрят неладное. Каждый разговор получается уникальным.

«Технологии генеративного ИИ в корне изменят то, как мы взаимодействуем с виртуальными мирами. Теперь персонажи — это не просто декорации с записанным текстом, а активные участники истории», — отмечают разработчики.

Когда мы увидим это в играх?

NVIDIA уже активно сотрудничает со многими крупными игровыми студиями и разработчиками движков. Первые интеграции и небольшие проекты с поддержкой ACE и сторонних ИИ-моделей начинают появляться в ранних тестах и модах (например, для Skyrim и Cyberpunk 2077).

Конечно, для массовых AAA-блокбастеров разработчикам еще предстоит решить немало задач: от снижения задержки (сейчас ответ ИИ может занимать 1–2 секунды) до жесткого контроля «поведения» нейросети, чтобы персонажи не ломали атмосферу игры. Тем не менее, первый и самый сложный шаг к созданию по-настоящему живых игровых миров уже сделан.