NVIDIA推出首个可互动的真实感数字人——“詹姆斯”
全球GPU巨头英伟达公司展示了其在数字人技术上的最新进展——“詹姆斯”,一个具备情感表达的真实感数字人。通过结合ChatGPT和其他人工智能模型以及GeForce RTX技术,NVIDIA实现了与AI助手的交互方式从传统的文本界面跃升至真实感十足的数字人交流。在2024年的SIGGRAPH大会上,NVIDIA CEO黄仁勋和“詹姆斯”一同亮相。
数字人“詹姆斯”的构建基于NVIDIA的NIM微服务架构,这是一种能够说话、与你进行眼神交流,并以富有同情心的方式动画化的AI,你可以选择将你的ChatGPT AI与数字人相连,或者将数字人与我们的检索增强生成(RAG)客户服务AI相连。无论你选择哪一部分使用,它们都是完全开源的。
如果你与AI交谈,它生成文字;这些文字转化为声音,即文本转语音;这些声音驱动着面部动画的产生,接着,RTX路径追踪处理数字人的渲染。开发者可以自由使用这些技术,选择他们想要的部分。由于这项技术是开源的并且分为多个组件,例如NVIDIA的Audio2Face技术,负责处理语音动画,开发者可以根据需要挑选和使用其中。