ElevenLabs 携手 NVIDIA ACE 发布多语言 AI 语音技术,重塑游戏 NPC 与演讲体验

ADK ElevenLabs官方 / ADK编译 2024-06-02 4 分钟 165 次浏览
速览导读 / Summary

ElevenLabs 与 NVIDIA 宣布深度合作,利用 NVIDIA ACE 技术栈在 Computex 大会上展示突破性多语言 AI 语音能力。Jensen Huang 演示了仅用 7 分钟录音即可生成中英双语演讲,并展示了用于游戏 NPC 的实时交互技术。此次合作旨在打破语言壁垒,提升内容可访问性,并为开发者提供构建数字人类与沉浸式 NPC 的完整工具链。

录音时长 7 分钟 生成双语演讲所需的最少录音时间
生成速度 1 小时 从录音到完成双语演讲的总耗时
技术栈 NVIDIA ACE + ElevenLabs 核心合作技术组合

Key Insights / 核心看点

  • 1 仅用 7 分钟录音即可生成中英双语演讲,实现演讲者声音特质的完美保留。
  • 2 NVIDIA ACE NIM 微服务让开发者能轻松集成 AI NPC,打破传统游戏脚本限制。
  • 3 Covert Protocol 技术演示展示了极具情感变化与真实感的实时语音交互。
  • 4 构建端到端的多语言数字人类解决方案,提升全球内容可访问性。

ElevenLabs 携手 NVIDIA ACE 发布多语言 AI 语音技术,重塑游戏 NPC 与演讲体验

在 Computex 2024 大会上,ElevenLabs 与人工智能基础设施巨头 NVIDIA 宣布了一项具有里程碑意义的战略合作。双方旨在利用 NVIDIA ACE(Accelerated Computing for Emotion)技术栈,结合 ElevenLabs 的专有 AI 语音与语音克隆技术,彻底改变多语言内容创作与数字交互的范式。

突破性的多语言语音合成

本次合作最引人注目的成果是实现了多语言演讲的实时语音克隆。传统的关键note演讲通常依赖人工翻译或字幕来支持多语言受众,而新的解决方案能够保留演讲者的原始声音特质,实现真正的同声传译体验。

在演示环节,NVIDIA 创始人兼 CEO Jensen Huang 亲自示范了这一技术。他利用 ElevenLabs 平台,仅用7 分钟的录音素材,便在1 小时内成功生成了他在英文和中文两种语言下的演讲 AI 声音。这种技术不仅极大地降低了多语言内容制作的时间成本,更让内容能够以极具情感色彩的母语形式触达全球受众。

游戏 NPC 交互的革命

除了演讲领域,该合作还聚焦于游戏行业的非玩家角色(NPC)。传统的 NPC 交互往往局限于简短且预设的脚本,缺乏生命力。借助 NVIDIA ACE 的ACE NIM 微服务,开发者现在可以创建具有高度拟人化特征的动态 NPC。

这些 AI 驱动的 NPC 能够根据玩家的行为实时反应并适应,提供前所未有的沉浸式体验。在 Covert Protocol 技术演示中,ElevenLabs 的语音 AI 被用于驱动这些互动,其声音在语调、音高上的细腻变化获得了现场记者与行业人士的高度评价,被认为是增强玩家沉浸感的关键。

技术架构与生态价值

NVIDIA ACE 是一套旨在让数字人类“活”起来的生成式 AI 技术套件。其核心在于ACE NIM 微服务,这些模块化组件构成了数字人类、AI NPC 和互动虚拟形象的基础。开发者可以直接将这些微服务集成到自己的产品、工具、服务或游戏中,无需从零开始构建底层语音引擎。

ElevenLabs CEO Mati Staniszewski 表示:"NVIDIA 为生成式 AI 革命构建了加速计算基础设施,而我们致力于以可扩展、充满情感且个性化的方式,在任何语言中生成逼真的内容。"

这一合作标志着 AI 语音技术从单纯的文本转语音(TTS)向情感化、多语言、实时交互的下一代应用跨越,为内容创作者和游戏开发者打开了全新的可能性大门。

NVIDIA 为生成式 AI 革命构建了加速计算基础设施,而我们致力于以可扩展、充满情感且个性化的方式,在任何语言中生成逼真的内容。

ElevenLabs CEO Mati Staniszewski

同主题深度资讯

查看更多 →
产品动态 2026-09-15

Topview 发布 Codex 插件工作流:在 ChatGPT 生态内实现 AI 视频生成

Topview 正式宣布其插件工作流集成至 OpenAI 的 Codex 代理系统,支持在本地桌面端或 CLI 中直接调用生成式模型创建 AI 视频。文章详细区分了 ChatGPT 网页版插件目录与 Codex 本地代理的架构差异,明确了安装路径、OAuth 认证流程及 Canvas 画布工作流。该更新旨在解决开发者在 ChatGPT 生态内调用视频生成模型(如 Seedance, Wan 3.0 等)的碎片化问题,强调 Pro 及以上订阅计划对自动化工作流的必要性。

Topview官方 / ADK编译 5 分钟
产品动态 2026-09-06

Adobe Photoshop 与 Upscale.media 联手:AI 驱动图像超分辨率技术深度解析

Adobe Photoshop 与 AI 图像增强工具 Upscale.media 宣布深度整合,旨在为专业用户提供更高效的图像超分辨率解决方案。此次合作利用先进的 AI 算法,在不依赖复杂软件学习曲线的情况下,实现从低分辨率到高清图像的无损转换。文章详细阐述了该技术在保留细节、修复模糊以及支持多格式处理方面的核心优势,并展示了从上传到下载的完整操作流程,标志着图像增强领域向更智能化、便捷化方向迈出了重要一步。

Upscale.media官方 / ADK编译 4 分钟
产品动态 2026-09-06

Adobe Photoshop 2025 图像分辨率优化指南:超分辨率与智能放大技巧

Adobe Photoshop 2025 在图像分辨率处理上带来了显著优化,重点介绍了如何利用内置的“超分辨率”功能无损放大 JPEG 图像。本文详细解析了从基础图像尺寸调整到高级 Camera Raw 滤镜应用的完整流程,帮助设计师和摄影师在保持画质的前提下提升输出质量。

Upscale.media官方 / ADK编译 4 分钟
产品动态 2026-09-06

Upscale.media 发布智能图像增强方案:AI 驱动高清修复与细节重构

Upscale.media 推出全新图像增强指南,详解如何利用 AI 技术将低分辨率图片转化为高清视觉内容。文章解析了图像上采(Upscaling)的核心原理,涵盖分辨率、锐度、色彩准确性等关键质量指标,并展示了该工具在商业展示、印刷输出及个人创作中的实际应用价值,旨在帮助用户摆脱像素化困扰,实现无损画质提升。

Upscale.media官方 / ADK编译 4 分钟
audio · 免费+付费
★ 5.0 · 120评测
E

ElevenLabs

AI文本转语音,支持包含中文在内的29种语言

ElevenLabs 是AI文字转语音平台,为开发者、创作者和企业提供逼真的语音合成解决方案。核心产品包括文本转语音(支持包括中文在内的 29+ 语言、10,000+ 声音)、AI 配音、语音克隆、音乐生成等功能。平台以超低延迟、情感丰富的语音质量著称,广泛应用在有声书、视频配音、客服中心和内容本地化等场景。

查看 ElevenLabs 使用教程与功能