NVIDIA為1億RTX PC用戶和開發(fā)者更新AI應(yīng)用和工具

中國北京,2024 年 3 月 20日 — GTC?—?NVIDIA 宣布領(lǐng)先 AI 應(yīng)用開發(fā)者正在用 NVIDIA 數(shù)字人技術(shù)為商業(yè)應(yīng)用和動態(tài)游戲角色創(chuàng)建栩栩如生的化身。其他展示內(nèi)容包括:Chat with RTX全面更新,AI Workbench現(xiàn)已就緒,NIM(NVIDIA Microservices)發(fā)布。行業(yè)專家、開發(fā)者和研究員組成的夢之隊齊聚GTC2024,共同推動 AI 和加速計算的未來發(fā)展。

在此前的GDC 2024大會上,NVIDIA發(fā)布RTX技術(shù)全新集成:《黑神話:悟空》(Black Myth: Wukong)和《永劫無間》(NARAKA:BLADEPOINT)將支持全景光線追蹤和 NVIDIA DLSS 3.5;現(xiàn)已有超過 500 款游戲和應(yīng)用支持NVIDIA RTX技術(shù);更新NVIDIA RTX SDK,以幫助開發(fā)者簡化創(chuàng)建游戲世界的流程。

NVIDIA RTX AI平臺包括工具和軟件開發(fā)工具包,可幫助Windows開發(fā)人員創(chuàng)建領(lǐng)先的生成式AI功能,并令A(yù)I PC提供最佳性能支持。

什么是AI PC

● ? ? ? ?2018年,隨著 RTX 技術(shù)和首款專為 AI 打造的消費級 GPU (GeForce RTX) 的推出,NVIDIA 加速了向 AI 計算的轉(zhuǎn)變。

● ? ? ??AI PC定義:AI PC 是搭載專用AI加速硬件的計算機。在 RTX GPU 上,這些專用的 AI 加速器被稱為 Tensor Core。在運行要求極為嚴(yán)苛的工作和娛樂應(yīng)用時,Tensor Core 能夠顯著加速 AI 性能,并為 PC 用戶引入了以前在云端才能運行的新功能。

● ? ? ? ?如何衡量AI PC 的性能:衡量 AI 性能的一種方法是以 teraops 為單位。teraops 即“萬億次運算/秒”(TOPS)。與發(fā)動機的馬力等級類似,TOPS 可作為單一指標(biāo)讓用戶了解 PC 的 AI 性能。

● ? ? ??在 PC上本地運行AI應(yīng)用的好處:運行在 GeForce RTX PC 系統(tǒng)上,因此其速度很快,同時用戶的數(shù)據(jù)保存在本地。用戶可以在本地 PC 上處理敏感數(shù)據(jù),因此無需與第三方共享數(shù)據(jù)或連接互聯(lián)網(wǎng)。

為什么RTX是AI PC的核心

無與倫比的AI能力:這一代GeForce RTX GPU可提供的算力,涵蓋了從200 AI TOPS到1300 AI TOPS,包括筆記本電腦和臺式電腦的多樣選擇。與之相比,目前沒有獨立 GPU 的 AI PC 的算力僅為 10 至 45 TOPS。

用戶群和生態(tài):2018年,隨著 RTX 技術(shù)和首款專為 AI 打造的消費級 GPU (GeForce RTX) 的推出,NVIDIA 加速了向 AI 計算的轉(zhuǎn)變。從那時起,基于 RTX PC 的 AI 蓬勃發(fā)展,目前已成為擁有超過 1 億用戶和 500 款 AI 應(yīng)用的生態(tài)。

先進的AI應(yīng)用:無論是居家還是辦公,在使用提升工作效率和娛樂體驗的軟件時,都能充分利用 RTX AI 的力量。得益于GeForce RTX GPU提供的AI特性 -- 游戲玩家可以在更高分辨率下,以更高幀率暢玩鐘愛的游戲;創(chuàng)作者則可專注于創(chuàng)意本身,而無需在等待系統(tǒng)加載或重復(fù)乏味工作上浪費時間;開發(fā)者亦可以使用生成式 AI 進行原型設(shè)計和自動化調(diào)試,從而簡化工作流。

● ? ? ? ?世界級的數(shù)字人技術(shù)

- ? ? ? ?NVIDIA ACE 微服務(wù)讓AI角色栩栩如生。

NVIDIA ACE 微服務(wù)可幫助開發(fā)者利用由NVIDIA Audio2Face 提供支持的面部動畫以及由NVIDIA ? Riva自動語音識別(ASR)和文本轉(zhuǎn)語音(TTS)提供支持的語音交流,讓虛擬數(shù)字人物栩栩如生。ACE微服務(wù)非常靈活,允許模型根據(jù)本地GPU的性能在云端和PC上運行,以確保用戶獲得最佳體驗。采用ACE的中國開發(fā)者和平臺包括 米哈游、網(wǎng)易游戲、完美世界游戲、掌趣科技和騰訊。

- ? ? ? ? ?NVIDIA RTX?— RTX全局光照 (RTXGI) 和 DLSS 3.5等渲染技術(shù)的集合,可在游戲和應(yīng)用中實現(xiàn)實時路徑追蹤。

- ? ? ? ?NVIDIA ACE為游戲帶來栩栩如生的NPC

○ ? ? ? ?Covert Protocol 是Inworld AI公司與NVIDIA合作開發(fā)的一項全新技術(shù)Demo,它突破了游戲中角色互動的界限。Inworld AI 擎集成NVIDIA Riva 和NVIDIA Audio2Face,前者可實現(xiàn)精確的語音轉(zhuǎn)換文字,后者可提供逼真的面部表情。

○ ? ? ? ?Inworld AI引擎采用多模態(tài)方法來展示非玩家角色(NPC),將認(rèn)知、感知和行為系統(tǒng)集成在一起,在精心制作的環(huán)境中呈現(xiàn)令人驚嘆的 RTX 渲染角色,以實現(xiàn)身臨其境的敘事效果。

Inworld AI Covert Protocol 技術(shù)Demo

- ? ? ? ?育碧 NEO?NPCs?利用?Inworld?和?NVIDIA?ACE?技術(shù)探索數(shù)字人在游戲中可能性

○ ? ? ? ?NEO NPCs 由育碧巴黎工作室的多學(xué)科團隊開發(fā),是育碧創(chuàng)作者與生成式 AI 技術(shù)領(lǐng)先合作伙伴 NVIDIA 和 Inworld AI 密切合作的成果。Inworld 的角色引擎和 LLM 技術(shù)使育碧的敘事團隊能為每個 NPC 建立完整的背景、知識庫和對話風(fēng)格,而NVIDIA ACE 技術(shù)套件中的 NVIDIA Audio2Face 則用于實現(xiàn)實時面部動畫。

○ ? ? ? ?育碧通過三個獨立技術(shù) Demo 展示了 NEO NPC 的功能。每個場景都側(cè)重于 NPC 行為、環(huán)境和上下文意識的不同方面;一系列實時反應(yīng)和動畫;以及連續(xù)對話、協(xié)作和戰(zhàn)略決策。這些實驗發(fā)現(xiàn)突破了游戲設(shè)計和沉浸感的界限。

○ ? ? ? ?育碧的敘事團隊利用 Inworld AI 技術(shù)打造出兩個 NEO NPCs:Bloom 和 Iron,他們擁有自己的背景故事、知識庫和不同的對話風(fēng)格,在技術(shù) Demo 宇宙中建立獨特的角色。

○ ? ? ? ?Inworld 技術(shù)還為 NEO NPC 提供有關(guān)周圍環(huán)境的內(nèi)在知識,并通過 Inworld 的 LLM 提供交互式響應(yīng)。Audio2Face 為兩個 NPC 的面部提供實時面部表情和口型同步。

育碧 NEO NPCs 技術(shù)Demo

● ? ? ? ?DLSS 3.5 樹立全新游戲標(biāo)準(zhǔn),通過AI增強光線追蹤功能

○ ? ? ? ?DLSS:自2019 年起,已有超過 500 款游戲和應(yīng)用利用光線追蹤、DLSS 和AI技術(shù)徹底改變?nèi)藗兊挠螒蚝蛣?chuàng)作方式。

○ ? ? ? ? 在 GDC 上,NVIDIA 宣布兩款新游戲?qū)⒅С諨LSS 3.5光線重建(Ray Reconstruction)和全景光線追蹤技術(shù),實現(xiàn)畫質(zhì)和性能的大幅提升,為 GeForce 玩家?guī)順O致體驗。備受期待的《黑神話:悟空》(Black Myth: Wukong)將于8月20日發(fā)布。《永劫無間》(NARAKA: BLADEPOINT)即將在PVP和PVE模式下的三個地圖中添加全景光線追蹤,之后也將在更多地圖中陸續(xù)支持全景光線追蹤。

○ ? ? ? ?《黑神話:悟空》(Black Myth: Wukong)備受期待,在 GDC 發(fā)布后獲得大量報道。#《黑神話:悟空》(Black Myth: Wukong) DLSS 3.5預(yù)告片# 在 嗶哩嗶哩上的搜索量排名第一。在GDC 發(fā)布后的90分鐘內(nèi),所有平臺的瀏覽量超過 30 萬。

● ? ? ? ?Chat with RTX,聽得更多,看得更多,聊得更多

○ ? ? ? ?Chat with RTX (或簡稱ChatRTX), 使用檢索增強生成、NVIDIA TensorRT-LLM 軟件和 NVIDIA RTX 加速,將本地生成式AI功能引入到支持 RTX 的 Windows系統(tǒng)中。用戶可快速、輕松地將本地文件作為數(shù)據(jù)集連接到開放式大語言模型(如 Mistral 或 Llama 2),快速查詢與上下文相關(guān)的答案。

○ ? ? ? ?除文本外,Chat with RTX 還將很快增加對語音、圖像和新模型的支持。除了谷歌的 Gemma,Chat with RTX也將在未來的更新中支持ChatGLM 。

● ? ? ? ?中國領(lǐng)先剪輯軟件剪映率先采用RTX AI平臺加速產(chǎn)品功能

○ ? ? ? ?NVIDIA正在和國內(nèi)深受用戶喜愛的剪輯軟件剪映專業(yè)版共同探索推進生成式AI在PC端的落地。目前,NVIDIA已通過TensorRT推動剪映AI藝術(shù)字功能上線,并正在通過RTX AI平臺加速生成式AI在剪映產(chǎn)品功能中的應(yīng)用。

○ ? ? ? ?剪映產(chǎn)品經(jīng)理表示:“長期以來剪映和NVIDIA一直都是非常緊密的合作伙伴,在RTX GPU的加速下剪映專業(yè)版可以實現(xiàn)更高的性能表現(xiàn)。我們期待RTX AI PC強大的性能表現(xiàn)以及加速優(yōu)化對AI模型的處理能力能幫助剪映的用戶更高效、智能地進行創(chuàng)作?！?/p>

● ? ? ? ?面向開發(fā)者的RTX AI 工具:推動創(chuàng)新的 AI 解決方案

○ ? ? ? ?NIM 微服務(wù)--預(yù)構(gòu)建的AI "容器"采用行業(yè)標(biāo)準(zhǔn) API,包括必要的軟件組件,優(yōu)化整體體驗,有助于將部署時間從數(shù)周縮短到數(shù)分鐘。

○ ? ? ? ?NVIDIA AI Workbench--現(xiàn)已全面上市,可幫助開發(fā)者利用 PC 級性能和顯存占用空間快速創(chuàng)建、測試和定制預(yù)訓(xùn)練生成式 AI 模型和 LLM。

○ ? ? ? ?TensorRT 加速--幫助開發(fā)者充分利用 RTX GPU中的Tensor Core的加速庫軟件。TensorRT加速現(xiàn)可通過TensorRT-LLM for Windows用于基于文本的應(yīng)用。開發(fā)者還可訪問 OpenAI Chat API 的 TensorRT-LLM 封裝程序。

以上介紹的RTX AI工具,在 GTC 和 GDC 上發(fā)布的諸多新聞以及展示的技術(shù)Demo,正在幫助開發(fā)者推動創(chuàng)新的 AI 解決方案,更讓RTX PC用戶感受到生成式 AI的未來可期。

###

關(guān)于NVIDIA 自1993年成立以來,NVIDIA (NASDAQ: NVDA) 一直是加速計算領(lǐng)域的先驅(qū)。NVIDIA 1999年發(fā)明的GPU驅(qū)動了PC游戲市場的增長,并重新定義了現(xiàn)代計算機圖形,開啟了現(xiàn)代AI時代,正在推動跨市場的工業(yè)數(shù)字化。NVIDIA現(xiàn)在是一家全棧計算公司,其數(shù)據(jù)中心規(guī)模的解決方案正在重塑整個行業(yè)。更多信息,請訪問https://nvidianews.nvidia.com/ 。

# # #

媒體咨詢:

Jade Li

NVIDIA GeForce, Studio PR

郵箱:jadli@nvidia.com