中國,2024年4月25日?—?NVIDIA近日舉行RTX?AI?媒體品鑒會,宣布大量AI相關內容更新,包括:NVIDIA與火星時代教育聯(lián)合發(fā)布《NVIDIA?TensorRT?Stable?Diffusion創(chuàng)作加速指南》和使用案例;NVIDIA與吐司/Tensor.Art聯(lián)合發(fā)布《個人用戶玩轉Stable?Diffusion?的GPU配置推薦》,聚焦SD?1.5?和SDXL?1.0,全面測試RTX?40系顯卡和筆記本電腦GPU在Stable?Diffusion推理和LoRA模型訓練的表現(xiàn),全面評估RTX?40系顯卡的Stable?Diffusion性能;在智譜AI端云一體大模型解決方案中,NVIDIA?TensorRT-LLM?助力智譜AI?ChatGLM?模型推理加速。此外,現(xiàn)場還有大量展示Demo:NVIDIA?ACE、ChatRTX、Stable?Diffusion、DLSS?3.5、NVIDIA?app以及來自土豆人tudou_man、Simon阿文、海辛、言蕭等AI藝術家基于RTX?40系列AI?PC創(chuàng)作的AIGC作品。

??NVIDIA?加速了向?AI?計算的轉變,于2018年推出?RTX?技術和首款專為?AI?打造的消費級?GPU?(GeForce?RTX)?。AI?PC?是搭載專用AI加速硬件的計算機,在?RTX?GPU?上,這些專用的?AI?加速器被稱為?Tensor?Core。運行要求極為嚴苛的工作和娛樂應用時,Tensor?Core?能夠顯著加速?AI?性能,并為?PC?用戶引入了以前在云端才能運行的新功能。

??衡量?AI?性能的一種方法是以?teraops?為單位。teraops?即“萬億次運算/秒”(TOPS),TOPS?可作為單一指標讓用戶了解?PC?的?AI?性能,GeForce?RTX?40系列GPU可提供的算力,涵蓋從200?AI?TOPS到1300?AI?TOPS,包括筆記本電腦和臺式電腦的多樣選擇。與之相比,目前沒有獨立?GPU?的輕量級?AI?PC?的算力僅為?10?至?45?TOPS。

??NVIDIA?TensorRT軟件開發(fā)者套件可加速深度學習推理性能。TensorRT?能加速非常熱門的生成式?AI?模型,如?Stable?Diffusion?1.5和?SDXL等。全新的?UL?Procyon?AI?圖像生成基準測試現(xiàn)已支持?TensorRT?加速,內部測試表明該基準測試可以比較準確地反映目前的實際性能表現(xiàn)。將?Tensor?Core?與?TensorRT?結合后,本地RTX?AI?PC?可獲得卓越的生成式?AI?性能。

??RTX?AI?PC目前已成為擁有超過?1?億用戶和?500?款?AI?應用的生態(tài)。

??火星時代教育發(fā)布《NVIDIA?TensorRT?Stable?Diffusion創(chuàng)作加速指南》

??《NVIDIA?TensorRT?Stable?Diffusion創(chuàng)作加速指南》是火星時代教育為AI設計愛好者和創(chuàng)作者基于RTX?40?系GPU提升Stable?Diffusion創(chuàng)作效率的實操性教程。指南包括:安裝與設置,加速引擎構建,加速效果對比以及NVIDIA?TensorRT在實際商業(yè)創(chuàng)作場景的應用(海報設計、電商設計、室內效果圖設計、插畫設計),幫助使用者在創(chuàng)作過程中借助詳細教程和加速工具實現(xiàn)商業(yè)創(chuàng)意落地,提升創(chuàng)作效率。指南由火星時代教育AI設計教研團隊主要研發(fā),NVIDIA?技術團隊提供技術支持,未來將根據(jù)應用軟件版本優(yōu)化并迭代升級。

??火星時代教育創(chuàng)始人王琦表示:“火星時代是?NVIDIA?Studio?中國區(qū)生態(tài)合作伙伴,雙方共同探索AI軟件在設計流程中的輔助作用,并在火星影視學院部分專業(yè)引入NVIDIA?Studio?AI應用做教學試點,在2023年共同開發(fā)AI設計方向創(chuàng)作加速的公開課,此次聯(lián)合發(fā)布《NVIDIA?TensorRT加速Stable?Diffusion創(chuàng)作加速指南》是火星時代和NVIDIA聚焦‘科技+教育’在設計領域的積極實踐,充分激發(fā)學習者對于科技發(fā)展的關注,擁抱AI前沿技術,為個人效率加速,為商業(yè)創(chuàng)作賦能?！?/p>

??吐司/Tensor.Art發(fā)布《個人用戶玩轉Stable?Diffusion?的GPU配置推薦》

??吐司/Tensor.Art是行業(yè)*家實現(xiàn)在線生圖的AI模型社區(qū)(Tensor.Art是吐司的國際版)。致力于緊跟*前沿的AI技術和國際視角幫助AI創(chuàng)作者降低創(chuàng)作門檻。在《個人用戶玩轉Stable?Diffusion?的GPU配置推薦》中,吐司/Tensor.Art聚焦SD?1.5?和SDXL?1.0,使用第三方測試軟件UL?Procyon?AI基準測試完整測試RTX?40?系列多款型號的顯卡、筆記本電腦GPU在Stable?Diffusion的推理性能表現(xiàn),其中在UL?Benchmark?SD1.5?TRT?vs.?OpenVINO的對比測試中RTX?4090筆記本電腦GPU相對于iGPU(Arc?Graphics)有超過27倍的性能提升。?

??使用吐司基準測試完整LoRA模型在Stable?Diffusion的訓練性能,還對不同型號RTX?40系顯卡和筆記本電腦GPU在Stable?Diffusion任務中的性能進行全面評估,旨在為AIGC愛好者在后期LoRA模型訓練和設備選擇時給予參考。

??AI模型平臺吐司/Tensor.Art?創(chuàng)始人沈振宇表示:“目前吐司和Tensor.Art上已經有超過16w+的模型數(shù)量。此次與英偉達聯(lián)合發(fā)布《個人用戶玩轉Stable?Diffusion?的GPU配置推薦》旨在讓關注AIGC領域的入門用戶以及不同垂類場景的用戶在選擇RTX?AI?PC設備進行模型訓練和應用時提供客觀、公正的配置參考,提升用戶使用AIGC的生產效率。”

??游戲中的?AI

??ACE?是眾多?NVIDIA?AI?技術之一,可將游戲提升到新的水平。

??●?NVIDIA?DLSS?是一項突破性圖形技術,可在?GeForce?RTX?GPU?上利用?AI?提高幀率并改善圖像質量。?DLSS?3.5?樹立全新游戲標準,通過AI增強光線追蹤表現(xiàn),備受期待的《黑神話:悟空》(Black?Myth:?Wukong)和《永劫無間》(NARAKA:?BLADEPOINT)即將支持DLSS?3.5光線重建(Ray?Reconstruction)和全景光線追蹤技術,實現(xiàn)畫質和性能的大幅提升,為?GeForce?玩家?guī)順O致體驗。

??●?NVIDIA?RTX?Remix?可讓?Modder?輕松截取游戲素材,使用生成式?AI?工具自動增強材質,以及借助全景光線追蹤和?DLSS?快速創(chuàng)建令人驚艷的?RTX?重制版游戲。

??●?NVIDIA?Freestyle?將通過全新的?NVIDIA?app?Beta版提供,可讓用戶通過實時后處理濾鏡個性化定制超過?1200?款游戲的視覺美學效果,并具有?RTX?HDR、RTX?Dynamic?Vibrance(RTX?數(shù)字自然飽和度)等功能。

??●?NVIDIA?Broadcast?應用可將任何房間變成家庭工作室,為直播提供?AI?增強型語音和視頻工具,包括噪音和回音消除、虛擬背景和?AI?綠幕、面部追蹤、視頻降噪和目光接觸

??NVIDIA?ACE為游戲帶來栩栩如生的NPC

??●?Covert?Protocol?是Inworld?AI公司與NVIDIA合作開發(fā)的一項全新技術Demo,它突破了游戲中角色互動的界限。Inworld?AI?引擎集成NVIDIA?Riva?和NVIDIA?Audio2Face,前者可實現(xiàn)精確的語音轉換文字,后者可提供逼真的面部表情。

??●?Inworld?AI引擎采用多模態(tài)方法來展示非玩家角色(NPC),將認知、感知和行為系統(tǒng)集成在一起,在精心制作的環(huán)境中呈現(xiàn)令人驚嘆的?RTX?渲染角色,以實現(xiàn)身臨其境的敘事效果。

??Chat?with?RTX,聽得更多,看得更多,聊得更多

??●?Chat?with?RTX?(或簡稱ChatRTX)?使用檢索增強生成、NVIDIA?TensorRT-LLM?軟件和?NVIDIA?RTX?加速,將本地生成式AI功能引入到支持?RTX?的?Windows系統(tǒng)中。用戶可快速、輕松地將本地文件作為數(shù)據(jù)集連接到開放式大語言模型(如:來自智譜AI的ChatGLM3),快速查詢與上下文相關的答案。

??●?ChatGLM是基于GLM預訓練框架的雙語對話模型,采用了獨創(chuàng)的多階段增強預訓練方法,包括6B、12B、32B、66B等多種尺寸。同時ChatGLM3?支持多樣的加速工具,包括NVIDIA?TRT-LLM框架,使模型性能在合理的精度損失下實現(xiàn)推理加速提升。

??●?智譜AI副總裁吳瑋杰表示:“大模型加持的AI?PC將帶來生產力范式革命,讓AI生產力普惠每個人。隨著端側算力和大模型能力的演進,支撐AI?PC的大模型解決方案應該是端云一體的混合AI。端側和云側大模型無縫協(xié)同,共同為用戶提供“智力”強大、隨時在線、極速響應、安全可信、個性化的AI?PC應用。我們的大語言模型?ChatGLM3-6B?支持?NVIDIA?TensorRT-LLM?等加速框架,使模型推理性能實現(xiàn)加速提升,讓用戶在AI?PC上可以獲得更加流暢的體驗?！?/p>

??●?此外,ChatRTX?還將很快增加對語音、圖像和新模型的支持。

??創(chuàng)作中的AI應用

??●?SD專業(yè)工作流:RTX?4090?D?GPU在復雜的控制工作流和出圖質量中表現(xiàn)出真正的生產力,通過人像生成控制模型InstantID,讓用戶足不出戶就能快速通過搭載RTX?4090?D的RTX?AI?PC上由普通攝像頭的自拍照生成高質量影棚級別的肖像照。而目前,RTX?GPU能為Stable?Diffusion用戶帶來生產力級別的體驗。

??●?SD一秒生成8張圖:作為市面上*快的Stable?Diffusion?計算出圖方案,用戶開箱即用就能在RTX?4090?D?GPU享受到高達每秒8張圖的生成速度。使用當前*快的Stable?Diffusion?加速方法TensorRT,再配合開發(fā)者進一步的性能優(yōu)化,目前RTX?4090?D?GPU*高能實現(xiàn)每秒超過100張圖的生成速度,因此Stable?Diffusion用戶也能像游戲玩家一樣通過高幀率享受絲滑的創(chuàng)作體驗。

??●?聲音克隆:基于?RTX?GPU?加速的聲音克隆可僅用5秒錄音來克隆聲音,實現(xiàn)無需訓練的個性化聲音生成。基于開源的GPT-SoVITS項目,聲音克隆快速使用5秒聲音樣本,根據(jù)其發(fā)音特征由文本生成個性化語音片段,實現(xiàn)高質量的聲音克隆;在RTX?AI的加速下,僅僅五分鐘就能完成;而基于更多樣本(1分鐘)的微調訓練實現(xiàn)更高質量接近1:1復刻的聲音克隆。

??●?實時建筑渲染:在建筑設計領域,即致AI基于擴散模型和蒸餾技術,通過RTX?GPU的加速,實現(xiàn)了秒級的AI實時繪畫。結合即致AI自研的全網(wǎng)下載量超50W國內建筑行業(yè)大模型,幫助建筑設計師享受AI實時渲染劃時代的快捷、便利的同時,依然可以保證極高的出圖效果。

??●?剪映編輯器AI方向產品負責人伍凡表示:“對于創(chuàng)意應用來說,我們非常關注AI能力如何和用戶實際的工作流相結合。剪映陸續(xù)上線了一系列生成式AI能力,例如音色克隆、視頻翻譯、數(shù)字人和AI生成文字模板/貼紙,其中AI生成文字模板和貼紙功能在?NVIDIA?TensorRT?的加速下可以實現(xiàn)更高的性能提升。長期以來剪映和NVIDIA一直都是非常緊密的合作伙伴,我們期待RTX?AI?PC強大的AI性能表現(xiàn)以及TensorRT加速優(yōu)化對AI模型的處理能力能幫助剪映的用戶更高效、智能地進行創(chuàng)作?！?/p>

??●?數(shù)字藝術家?&?策展人土豆人Tudou_Man?表示:“每天有大量AIGC內容涌現(xiàn),宛如微小的青苔連續(xù)改寫當下。不久,我們的文明也將被數(shù)字所覆蓋。通過RTX?40系列AI?PC平臺的運算加持,震驚之余,我使用RTX?40系列?RTX?AI?PC創(chuàng)作了《復寫苔原》系列作品,RTX?平臺為像我這樣的數(shù)字藝術家提供高效的AI算力加速。我將AIGC作品注入人的思考與靈魂,在不可逆的數(shù)據(jù)洪流中保持本真?！?/p>

??●?Blender?藝術家、AI創(chuàng)作者Simon阿文表示:“‘AI?如何塑造我們的工作與生活’?這個在過去聽起來是少數(shù)大公司才有資格討論的問題,但在如今這個問題的答案由AI社區(qū)和創(chuàng)作者塑造。包括央視春晚AI動畫等作品在內,從文字、圖像到影像,我的許多探索是基于本地?RTX?4090?完成的。AIGC的可能性是一片藍海,AI?PC是我的帆船?！?/p>

??●?AIGC行業(yè)資深顧問、艾哎集瑟科技聯(lián)合創(chuàng)始人言蕭表示:“作為一名經常使用AI工具的建筑師,我對RTX平臺的加速優(yōu)勢深有體會。它極大提高了AI圖形生成軟件的性能,特別是如Stable?Diffusion等工具,在建筑設計的方案概念階段尤為重要。通過RTX平臺,我們能夠快速獲得高質量的渲染圖像,有效加速設計過程,增強視覺表現(xiàn)力,極大促進了創(chuàng)意的快速迭代和方案的優(yōu)化。這種技術進步不僅提升了設計效率,也為建筑師提供更廣闊的創(chuàng)作空間?！?/p>

??●?Morph?Studio?產品經理、上海國際電影節(jié)創(chuàng)投評委海辛表示:“我*開始進入到這個行業(yè),就是從有一塊自己的RTX顯卡開始的。RTX?40?系顯卡給了我探索?AI?在文字、圖像、影像可能性的機會?！?/p>

??###

??關于NVIDIA

??自1993年成立以來,NVIDIA?(NASDAQ:?NVDA)?一直是加速計算領域的先驅。NVIDIA?1999年發(fā)明的GPU驅動了PC游戲市場的增長,并重新定義了現(xiàn)代計算機圖形,開啟了現(xiàn)代AI時代,正在推動跨市場的工業(yè)數(shù)字化。NVIDIA現(xiàn)在是一家全棧計算公司,其數(shù)據(jù)中心規(guī)模的解決方案正在重塑整個行業(yè)。更多信息,請訪問https://nvidianews.nvidia.com/?。

??關于火星時代教育

??火星時代教育,創(chuàng)始人王琦在1994年出版中文CG教材——《三維動畫速成》,成為初代從業(yè)者的啟蒙圖書。三十年致力于推動中國數(shù)字創(chuàng)意產業(yè)發(fā)展,為影視,游戲,室內設計,互動媒體等熱門數(shù)字領域,培養(yǎng)數(shù)十萬計CG人才。2023年初火星時代課程全面融合AI,將持續(xù)聚焦AI及元宇宙雙域,把前沿領域技術融入課程,為求學者把脈就業(yè)風向,培養(yǎng)數(shù)字時代全能型CG人才。

??關于吐司/Tensor.Art

??吐司/Tensor.Art創(chuàng)立于2023年,由上海必有回響智能可以有限公司投資創(chuàng)立,團隊成員由國內AI前沿技術開發(fā)者和致力于興趣社群運營的小伙伴們組成。作為行業(yè)里*家實現(xiàn)在線生圖的AI模型平臺及興趣社區(qū)(Tensor.Art是吐司的國際版)目前我們擁有超過16w+的模型數(shù)量,海量可選的模型不僅能下載還能支持在線運行,生成的圖片作品可以一鍵分享到社區(qū)。我們相信模型是未來AI時代信息交流的媒介,且一直致力于緊跟*前沿的AI技術和國際視角,來幫助AI創(chuàng)作者降低創(chuàng)作門檻,讓更多的小白用戶以及不同垂類場景的用戶使用AIGC提高生產效率。

??關于智譜AI

??智譜AI致力于打造新一代認知智能大模型,專注于做大模型的中國創(chuàng)新。公司于2020年底研發(fā)GLM預訓練架構,2021年訓練完成百億參數(shù)模型GLM-10B,同年利用MoE架構成功訓練出收斂的萬億稀疏模型,2022年合作研發(fā)了中英雙語千億級超大規(guī)模預訓練模型GLM-130B并開源。2023?年,智譜?AI?推出千億基座對話模型ChatGLM并兩次升級,開源版本的?ChatGLM-6B?讓大模型開發(fā)者的本地微調和部署成為可能,在開源社區(qū)受到廣泛歡迎。基于全自研基座大模型的強大能力,智譜?AI?面向AI?PC構建了端云一體的大模型解決方案。

??###

??媒體咨詢:

??Jade?Li

??NVIDIA?GeForce,?Studio?PR

??郵箱:jadli@nvidia.com