GTC 2024期间,NVIDIA不仅带来了全新的顶级AI GPU加速器、超级计算系统、车载计算平台,还进一步拓展了AI PC的能力,包括数字人技术商业和游戏应用、Chat with RTX全面更新、NIM微服务正式发布,等等。
对于AI PC,各家都有自己的定义,但是就算力和生态而言,RTX GPU无疑是最重要的一环,专用的Tensor Core AI加速器可以显著提升AI性能。
GeForce RTX 40系列的算力最高就可达1300 AI TOPS,而没有独立 GPU 的 AI PC 的算力仅为 10 至 45 AI TOPS,因此GeForce RTX 40系列能让PC用户在本地也可以执行以往云端才能实现的要求极为苛刻的应用。
目前,NVIDIA正在借助RTX AI的能力,打造世界级的数字人技术,为商业应用和动态游戏角色创建栩栩如生的化身。
NVIDIA最新打造的NVIDIA ACE(Avatar Cloud Engine)微服务,可以利用基于NVIDIA Audio2Face的面部动画、基于NVIDIA Riva自动语音识别(ASR)/文本转语音(TTS)的语音交流,让虚拟数字人物真正鲜活起来。
NVIDIA Riva自动语音识别(ASR)现在包括在 HuggingFace Open ASR 排行榜上名列前茅的模型 — Canary、Parakeet ASR 系列的多语言(英语、法语、德语和西班牙语)和多任务 ASR 以及双向翻译模型和英语转录模型 —以及英语和西班牙语/普通话/日语代码转换 ASR 模型。文本转语音(TTS)现在提供 P-Flow 模型,该模型可以创建仅适用于企业的 3 秒音频样本的自定义语音(该模型赢得了 LIMMITS'24 挑战赛)以及 5 种语言的男女语音(英语)、德语、意大利语、普通话、西班牙语——根据上下文调整语音情绪(快乐、平静、中性、悲伤、恐惧、愤怒)。翻译支持多达 32* 种语言的语音到文本、语音到语音 API 和文本到文本翻译,以及针对特定领域用例的模型定制。用于问答聊天机器人的语音驱动检索增强生成(RAG)示例应用。
NVIDIA ACE微服务非常灵活,允许模型根据本地GPU的性能,决定在云端还是PC上运行。
责任编辑:kj005
文章投诉热线:182 3641 3660 投诉邮箱:7983347 16@qq.com