NVIDIA推進AI PC時代為AI PC用戶帶來AI加速和新功能
供稿 / 2024-03-22 09:341501中國北京,2024 年 3 月 20日 — GTC — NVIDIA 宣布領先 AI 應用開發者正在用 NVIDIA 數字人技術為商業應用和動態游戲角色創建栩栩如生的化身。其他展示內容包括:Chat with RTX全面更新,AI Workbench現已就緒,NIM(NVIDIA Microservices)發布。行業專家、開發者和研究員組成的夢之隊齊聚GTC2024,共同推動 AI 和加速計算的未來發展。
在此前的GDC 2024大會上,NVIDIA發布RTX技術全新集成:《黑神話:悟空》(Black Myth: Wukong)和《永劫無間》(NARAKA:BLADEPOINT)將支持全景光線追蹤和 NVIDIA DLSS 3.5;現已有超過 500 款游戲和應用支持NVIDIA RTX技術;更新NVIDIA RTX SDK,以幫助開發者簡化創建游戲世界的流程。
NVIDIA RTX AI平臺包括工具和軟件開發工具包,可幫助Windows開發人員創建領先的生成式AI功能,并令AI PC提供最佳性能支持。
什么是AI PC
● 2018年,隨著 RTX 技術和首款專為 AI 打造的消費級 GPU (GeForce RTX) 的推出,NVIDIA 加速了向 AI 計算的轉變。
● AI PC定義:AI PC 是搭載專用AI加速硬件的計算機。在 RTX GPU 上,這些專用的 AI 加速器被稱為 Tensor Core。在運行要求極為嚴苛的工作和娛樂應用時,Tensor Core 能夠顯著加速 AI 性能,并為 PC 用戶引入了以前在云端才能運行的新功能。
● 如何衡量AI PC 的性能:衡量 AI 性能的一種方法是以 teraops 為單位。teraops 即“萬億次運算/秒”(TOPS)。與發動機的馬力等級類似,TOPS 可作為單一指標讓用戶了解 PC 的 AI 性能。
● 在 PC上本地運行AI應用的好處:運行在 GeForce RTX PC 系統上,因此其速度很快,同時用戶的數據保存在本地。用戶可以在本地 PC 上處理敏感數據,因此無需與第三方共享數據或連接互聯網。
為什么RTX是AI PC的核心
無與倫比的AI能力:這一代GeForce RTX GPU可提供的算力,涵蓋了從200 AI TOPS到1300 AI TOPS,包括筆記本電腦和臺式電腦的多樣選擇。與之相比,目前沒有獨立 GPU 的 AI PC 的算力僅為 10 至 45 TOPS。
用戶群和生態:2018年,隨著 RTX 技術和首款專為 AI 打造的消費級 GPU (GeForce RTX) 的推出,NVIDIA 加速了向 AI 計算的轉變。從那時起,基于 RTX PC 的 AI 蓬勃發展,目前已成為擁有超過 1 億用戶和 500 款 AI 應用的生態。
先進的AI應用:無論是居家還是辦公,在使用提升工作效率和娛樂體驗的軟件時,都能充分利用 RTX AI 的力量。得益于GeForce RTX GPU提供的AI特性 -- 游戲玩家可以在更高分辨率下,以更高幀率暢玩鐘愛的游戲;創作者則可專注于創意本身,而無需在等待系統加載或重復乏味工作上浪費時間;開發者亦可以使用生成式 AI 進行原型設計和自動化調試,從而簡化工作流。
● 世界級的數字人技術
- NVIDIA ACE 微服務讓AI角色栩栩如生。
NVIDIA ACE 微服務可幫助開發者利用由NVIDIA Audio2Face 提供支持的面部動畫以及由NVIDIA ? Riva自動語音識別(ASR)和文本轉語音(TTS)提供支持的語音交流,讓虛擬數字人物栩栩如生。ACE微服務非常靈活,允許模型根據本地GPU的性能在云端和PC上運行,以確保用戶獲得最佳體驗。采用ACE的中國開發者和平臺包括 米哈游、網易游戲、完美世界游戲、掌趣科技和騰訊。
- NVIDIA RTX — RTX全局光照 (RTXGI) 和 DLSS 3.5等渲染技術的集合,可在游戲和應用中實現實時路徑追蹤。
- NVIDIA ACE為游戲帶來栩栩如生的NPC
○ Covert Protocol 是Inworld AI公司與NVIDIA合作開發的一項全新技術Demo,它突破了游戲中角色互動的界限。Inworld AI 擎集成NVIDIA Riva 和NVIDIA Audio2Face,前者可實現精確的語音轉換文字,后者可提供逼真的面部表情。
○ Inworld AI引擎采用多模態方法來展示非玩家角色(NPC),將認知、感知和行為系統集成在一起,在精心制作的環境中呈現令人驚嘆的 RTX 渲染角色,以實現身臨其境的敘事效果。
Inworld AI Covert Protocol 技術Demo
- 育碧 NEO NPCs 利用 Inworld 和 NVIDIA ACE 技術探索數字人在游戲中可能性
○ NEO NPCs 由育碧巴黎工作室的多學科團隊開發,是育碧創作者與生成式 AI 技術領先合作伙伴 NVIDIA 和 Inworld AI 密切合作的成果。Inworld 的角色引擎和 LLM 技術使育碧的敘事團隊能為每個 NPC 建立完整的背景、知識庫和對話風格,而NVIDIA ACE 技術套件中的 NVIDIA Audio2Face 則用于實現實時面部動畫。
○ 育碧通過三個獨立技術 Demo 展示了 NEO NPC 的功能。每個場景都側重于 NPC 行為、環境和上下文意識的不同方面;一系列實時反應和動畫;以及連續對話、協作和戰略決策。這些實驗發現突破了游戲設計和沉浸感的界限。
○ 育碧的敘事團隊利用 Inworld AI 技術打造出兩個 NEO NPCs:Bloom 和 Iron,他們擁有自己的背景故事、知識庫和不同的對話風格,在技術 Demo 宇宙中建立獨特的角色。
○ Inworld 技術還為 NEO NPC 提供有關周圍環境的內在知識,并通過 Inworld 的 LLM 提供交互式響應。Audio2Face 為兩個 NPC 的面部提供實時面部表情和口型同步。
育碧 NEO NPCs 技術Demo
● DLSS 3.5 樹立全新游戲標準,通過AI增強光線追蹤功能
○ DLSS:自2019 年起,已有超過 500 款游戲和應用利用光線追蹤、DLSS 和AI技術徹底改變人們的游戲和創作方式。
○ 在 GDC 上,NVIDIA 宣布兩款新游戲將支持DLSS 3.5光線重建(Ray Reconstruction)和全景光線追蹤技術,實現畫質和性能的大幅提升,為 GeForce 玩家帶來極致體驗。備受期待的《黑神話:悟空》(Black Myth: Wukong)將于8月20日發布。《永劫無間》(NARAKA: BLADEPOINT)即將在PVP和PVE模式下的三個地圖中添加全景光線追蹤,之后也將在更多地圖中陸續支持全景光線追蹤。
○ 《黑神話:悟空》(Black Myth: Wukong)備受期待,在 GDC 發布后獲得大量報道。#《黑神話:悟空》(Black Myth: Wukong) DLSS 3.5預告片# 在 嗶哩嗶哩上的搜索量排名第一。在GDC 發布后的90分鐘內,所有平臺的瀏覽量超過 30 萬。
● Chat with RTX,聽得更多,看得更多,聊得更多
○ Chat with RTX (或簡稱ChatRTX), 使用檢索增強生成、NVIDIA TensorRT-LLM 軟件和 NVIDIA RTX 加速,將本地生成式AI功能引入到支持 RTX 的 Windows系統中。用戶可快速、輕松地將本地文件作為數據集連接到開放式大語言模型(如 Mistral 或 Llama 2),快速查詢與上下文相關的答案。
○ 除文本外,Chat with RTX 還將很快增加對語音、圖像和新模型的支持。除了谷歌的 Gemma,Chat with RTX也將在未來的更新中支持ChatGLM 。
● 中國領先剪輯軟件剪映率先采用RTX AI平臺加速產品功能
○ NVIDIA正在和國內深受用戶喜愛的剪輯軟件剪映專業版共同探索推進生成式AI在PC端的落地。目前,NVIDIA已通過TensorRT推動剪映AI藝術字功能上線,并正在通過RTX AI平臺加速生成式AI在剪映產品功能中的應用。
○ 剪映產品經理表示:“長期以來剪映和NVIDIA一直都是非常緊密的合作伙伴,在RTX GPU的加速下剪映專業版可以實現更高的性能表現。我們期待RTX AI PC強大的性能表現以及加速優化對AI模型的處理能力能幫助剪映的用戶更高效、智能地進行創作。”
● 面向開發者的RTX AI 工具:推動創新的 AI 解決方案
○ NIM 微服務--預構建的AI "容器"采用行業標準 API,包括必要的軟件組件,優化整體體驗,有助于將部署時間從數周縮短到數分鐘。
○ NVIDIA AI Workbench--現已全面上市,可幫助開發者利用 PC 級性能和顯存占用空間快速創建、測試和定制預訓練生成式 AI 模型和 LLM。
○ TensorRT 加速--幫助開發者充分利用 RTX GPU中的Tensor Core的加速庫軟件。TensorRT加速現可通過TensorRT-LLM for Windows用于基于文本的應用。開發者還可訪問 OpenAI Chat API 的 TensorRT-LLM 封裝程序。
以上介紹的RTX AI工具,在 GTC 和 GDC 上發布的諸多新聞以及展示的技術Demo,正在幫助開發者推動創新的 AI 解決方案,更讓RTX PC用戶感受到生成式 AI的未來可期。
NVIDIA推進AI PC時代為AI PC用戶帶來AI加速和新功能














滬公網安備 31010702005758號
發表評論注冊|登錄