芯東西(公眾號:aichip001)
作者 |? 云鵬
編輯 | ?漠影

短短半年多時(shí)間,AI PC已經(jīng)從概念興起進(jìn)入了應(yīng)用大范圍落地階段,在大模型技術(shù)快速迭代的當(dāng)下,越來越多的生成式AI應(yīng)用開始落地端側(cè)。

AI開始改變?nèi)藗兩?、工作、娛樂的方式,消費(fèi)者離不開PC,企業(yè)生產(chǎn)力離不開PC,AI PC快速深入各行各業(yè),而AI技術(shù)的快速迭代、深度應(yīng)用,離不開軟硬件技術(shù)的底層支持。

從RTX GPU、CUDA生態(tài)、各類基于RTX技術(shù)加速的軟件應(yīng)用,到基于英偉達(dá)RTX技術(shù)打造的各類AI PC產(chǎn)品,在AI PC的浪潮中,英偉達(dá)成為了AI變革生產(chǎn)力背后的關(guān)鍵支撐。

最近,英偉達(dá)亮出了一系列最新AI技術(shù)的重磅升級,從游戲領(lǐng)域的DLSS、NVIDIA ACE,到內(nèi)容創(chuàng)作領(lǐng)域的TensorRT加速ComfyUI、RTX Video,諸多現(xiàn)場Demo都給我們留下了深刻印象。

游戲NPC秒變真人,3D大片模型一鍵生成,RTX AI PC正讓這一切走入現(xiàn)實(shí)

在英偉達(dá)的RTX AI加速下,借助AI技術(shù),游戲體驗(yàn)天花板被打破,高幀率高畫質(zhì)得以兼顧,內(nèi)容創(chuàng)作的方式也產(chǎn)生了顛覆性革新,各種“一鍵生成”的AI新功能讓創(chuàng)作效率有了數(shù)倍的提升。

芯東西在現(xiàn)場與英偉達(dá)的工作人員進(jìn)行深入交流,對RTX AI PC在游戲和內(nèi)容創(chuàng)作領(lǐng)域如何賦能更先進(jìn)的AI進(jìn)行了深度探討。

游戲NPC秒變真人,3D大片模型一鍵生成,RTX AI PC正讓這一切走入現(xiàn)實(shí)

我們能夠看到,在AI領(lǐng)域耕耘數(shù)十年的英偉達(dá),已經(jīng)積累了深厚的技術(shù)護(hù)城河,在AI PC的浪潮中成為諸多關(guān)鍵技術(shù)的底層支撐者。

AI PC革命,英偉達(dá)正為整個(gè)產(chǎn)業(yè)按下加速鍵。

一、從玩家到開發(fā)者,英偉達(dá)AI黑科技加速迭代,變革游戲產(chǎn)業(yè)

當(dāng)下游戲已經(jīng)成為深受生成式AI影響的一大領(lǐng)域,不論是從游戲玩家的體驗(yàn)角度,還是從游戲廠商的開發(fā)角度,游戲內(nèi)容創(chuàng)作的范式、游戲玩家的體驗(yàn)都在迎來顛覆式升級,而英偉達(dá)成為其中最關(guān)鍵的基礎(chǔ)支撐,加速先進(jìn)AI技術(shù)給游戲產(chǎn)業(yè)帶來的生產(chǎn)力變革。

我們不妨通過幾個(gè)代表性的技術(shù)來一探究竟。

1、DLSS:用AI實(shí)現(xiàn)幀率和畫質(zhì)的兼顧,大幅降低硬件門檻

DLSS技術(shù)一直是英偉達(dá)在游戲領(lǐng)域的“看家本領(lǐng)”之一,英偉達(dá)也是業(yè)內(nèi)最早推出此類技術(shù)的廠商。經(jīng)過多輪迭代,如今應(yīng)用了AI技術(shù)的DLSS 3正在越來越多的游戲中落地。

在現(xiàn)場體驗(yàn)的過程中,我看到很多畫質(zhì)精良的大型游戲在4K分辨率仍然可以獲得144幀甚至是240幀以上的“電競級”流暢體驗(yàn)。

比如在《三角洲行動》中,即使是開啟了光線追蹤后,借助DLSS 3游戲的幀數(shù)仍然可以保持在144幀以上,在激烈對戰(zhàn)的場景中,也可以保持不錯的流暢度。關(guān)閉DLSS 3后,游戲幀數(shù)僅為80幀左右,DLSS技術(shù)對于游戲體驗(yàn)的改善是非常直觀的。

游戲NPC秒變真人,3D大片模型一鍵生成,RTX AI PC正讓這一切走入現(xiàn)實(shí)

此外,在《漫威爭鋒》、《鳴潮》等游戲中,開啟DLSS 3和Reflex技術(shù),都可以獲得相當(dāng)高的幀數(shù),同時(shí)兼顧畫質(zhì),游戲的響應(yīng)速度也得到保證。

游戲NPC秒變真人,3D大片模型一鍵生成,RTX AI PC正讓這一切走入現(xiàn)實(shí)

可以看到,隨著越來越多的游戲加入DLSS的生態(tài)中,DLSS 3基本上已經(jīng)成為游戲開發(fā)行業(yè)普遍采納的技術(shù)標(biāo)準(zhǔn)。

游戲NPC秒變真人,3D大片模型一鍵生成,RTX AI PC正讓這一切走入現(xiàn)實(shí)

值得一提的是,雖然目前行業(yè)內(nèi)其他廠商也推出了類似DLSS的技術(shù),但英偉達(dá)是最早推出這類技術(shù)的廠商,多年的深耕、大量技術(shù)研發(fā)投入、大量試錯都是對手難以追趕的,也正因如此,DLSS技術(shù)的穩(wěn)定性、生態(tài)完整度都是最高的。

游戲NPC秒變真人,3D大片模型一鍵生成,RTX AI PC正讓這一切走入現(xiàn)實(shí)

2、NVIDIA ACE:AI真正與游戲人物深度融合,游戲自由度劃時(shí)代改變

NVIDIA ACE一直是對廣大游戲玩家吸引力極高的一項(xiàng)技術(shù),其最直觀的效果就是看可以讓游戲中的NPC像真人一樣與游戲玩家溝通交流,游戲的互動方式、體驗(yàn)都有顯著不同。

這次NVIDIA ACE相關(guān)技術(shù)進(jìn)一步升級,很多AI技術(shù)被轉(zhuǎn)移到端側(cè)運(yùn)行,AI引擎集成了Riva自動語音識別功能,可實(shí)現(xiàn)準(zhǔn)確的語音轉(zhuǎn)文本,同時(shí)AI引擎集成的NVIDIA Audio2Face則可以提供逼真的面部動畫。

游戲NPC秒變真人,3D大片模型一鍵生成,RTX AI PC正讓這一切走入現(xiàn)實(shí)

從現(xiàn)場體驗(yàn)來看,NPC的可互動性更強(qiáng)了,響應(yīng)速度更快,NPC的個(gè)性和動機(jī)更加鮮明,NPC的故事背景也可以進(jìn)行定制,動態(tài)響應(yīng)能力有所提升。

從2023年NVIDIA ACE的Demo首次亮相至今,ACE技術(shù)已經(jīng)遠(yuǎn)不止于一個(gè)Demo,且已經(jīng)向各個(gè)行業(yè)的公司開放。沒錯,借助NVIDIA ACE技術(shù),任何廠商都可以快速高效地開發(fā)出屬于自己的栩栩如生的“虛擬數(shù)字人”。

游戲NPC秒變真人,3D大片模型一鍵生成,RTX AI PC正讓這一切走入現(xiàn)實(shí)

▲基于NVIDIA ACE技術(shù),Colorful定制的專屬數(shù)字人

相比于當(dāng)前行業(yè)中的其他虛擬數(shù)字人解決方案,英偉達(dá)可以發(fā)揮自己長期在游戲領(lǐng)域深耕積累下的技術(shù)。虛擬人的質(zhì)量、面部表情的真實(shí)程度、與人交互的自然程度,相比傳統(tǒng)的虛擬人,可以說是“次時(shí)代”級別的。

值得一提的是,英偉達(dá)還為NVIDIA ACE技術(shù)提供了各種配套的開發(fā)適配工具,如NVIDIA NIM等,對于企業(yè)來說,NIM可以大大化簡ACE的部署時(shí)間,并讓NVIDIA ACE在RTX AI PC中運(yùn)行,企業(yè)只需要將自己的知識庫進(jìn)行對接,英偉達(dá)已經(jīng)幫他們解決掉了幾乎所有技術(shù)層面的問題。

這正是英偉達(dá)對于企業(yè)的關(guān)鍵價(jià)值:英偉達(dá)提供的不只是一個(gè)技術(shù),而是技術(shù)以及配套的全鏈條開發(fā)工具,企業(yè)應(yīng)用AI新技術(shù)的成本,被極大降低了。

3、G-Assist項(xiàng)目:從游戲指導(dǎo)到系統(tǒng)設(shè)置,AI成為你的最佳玩伴

如今智能助手是各大科技巨頭都聚焦的領(lǐng)域,英偉達(dá)也發(fā)揮自己在游戲領(lǐng)域的積累優(yōu)勢,在前不久的COMPUTEX上亮出了AI游戲助手——G-Assist項(xiàng)目。

作為真正的“游戲助手”,G-Assist可以提供游戲指導(dǎo),幫你進(jìn)行電腦的系統(tǒng)設(shè)置,提高性能,甚至還可以給你的GPU超頻進(jìn)而提升游戲幀率。

游戲NPC秒變真人,3D大片模型一鍵生成,RTX AI PC正讓這一切走入現(xiàn)實(shí)

▲G-Assist幫玩家繪制60秒PC延遲曲線圖

值得一提的是,為了讓這些功能可以更快捷地應(yīng)用在游戲中,英偉達(dá)為開發(fā)者建立各種模型和框架,以便他們在游戲、創(chuàng)作等更加廣泛的領(lǐng)域創(chuàng)建和部署這些AI助手。

不論是DLSS、ACE還是G-Assist項(xiàng)目,我們或許可以用一個(gè)形象的比喻來理解英偉達(dá)所做的事:對于消費(fèi)者,英偉達(dá)“授之以魚”,讓消費(fèi)者直接享受到最好的體驗(yàn),不需要顧慮其他。而對于開發(fā)者和企業(yè),英偉達(dá)“授之以漁”,讓企業(yè)和開發(fā)者快速掌握技能,擁有最便捷高效的開發(fā)工具,具備能夠給消費(fèi)者提供優(yōu)質(zhì)內(nèi)容的能力。

二、AI顛覆內(nèi)容創(chuàng)作范式,“一鍵即得”背后,英偉達(dá)為開發(fā)者鋪平AI之路

除了游戲,在內(nèi)容創(chuàng)作領(lǐng)域,AI技術(shù)的升級同樣帶來了創(chuàng)作范式的改變,無數(shù)優(yōu)秀的內(nèi)容創(chuàng)作者已經(jīng)借助基于RTX GPU以及相關(guān)軟件技術(shù)加速的生成式AI創(chuàng)作工具產(chǎn)出了眾多優(yōu)秀作品,AI給他們的工作流帶來了數(shù)倍甚至數(shù)百倍的效率提升。

RTX AI PC,正成為每一個(gè)優(yōu)秀創(chuàng)作者的必備的生產(chǎn)力利器。

1、幾筆勾勒生成精美3D模型,性能之上,英偉達(dá)AI蘊(yùn)含諸多“隱性優(yōu)勢”

這次在活動現(xiàn)場,我們看到了B站知名UP主特效小哥008利用生成式AI輔助制作的特效短片,他們的團(tuán)隊(duì)使用基于Stable Diffusion的ComfyUI為3D模型制作了具有多種材質(zhì)通道的高質(zhì)量AI貼圖,同時(shí)輔以TripoSR實(shí)現(xiàn)生成式的3D模型構(gòu)建。

游戲NPC秒變真人,3D大片模型一鍵生成,RTX AI PC正讓這一切走入現(xiàn)實(shí)

▲B站知名UP主特效小哥008介紹如何利用生成式AI輔助制作特效短片

比如我們只需要幾筆手繪一個(gè)潦草的“小鳥”,AI就會生成一只真正的活靈活現(xiàn)的畫面精美的小鳥圖片,并且直接生成對應(yīng)的3D模型,我們還可以直接把這個(gè)3D的小鳥模型插入到對應(yīng)的視頻中,十分方便。

游戲NPC秒變真人,3D大片模型一鍵生成,RTX AI PC正讓這一切走入現(xiàn)實(shí)

▲手繪小鳥草圖轉(zhuǎn)換3D模型

可以說,大量的手繪和雕刻工作都被AI工具替代,短片制作效率大幅提升。當(dāng)然,這背后離不開RTX GPU的支撐以及TensorRT對Stable Diffusion中最熱門的應(yīng)用之一ComfyUI的加速。

在短片的最終合成與渲染環(huán)節(jié),Blender Cycles渲染器可以由RTX GPU進(jìn)行加速。從3D模型制作、短片制作到最終的渲染,英偉達(dá)的AI技術(shù)在整個(gè)創(chuàng)作工作流中都起到了關(guān)鍵作用。

在現(xiàn)場,我們還看到了一個(gè)SuperHero工作流的案例,Stable Diffusion的生圖能力配合InstantID、IPAdapter和ControlNet等一系列細(xì)節(jié)控制技術(shù),我們只需要上傳一張自己的照片,就可以馬上轉(zhuǎn)換成指定風(fēng)格的圖片,甚至連給定圖片中人物的動作都能很好的還原。

游戲NPC秒變真人,3D大片模型一鍵生成,RTX AI PC正讓這一切走入現(xiàn)實(shí)

▲SuperHero工作流

比如你可以生成一張“超人飛天”的自己、生成一張“擺帥氣POSS”的自己。值得一提的是,這一功能基于NVIDIA RTX GPU運(yùn)行的性能優(yōu)勢能夠達(dá)到CPU的百倍左右。

客觀來說,在AI視頻創(chuàng)作、圖像創(chuàng)作領(lǐng)域,英偉達(dá)的RTX GPU已經(jīng)擁有了行業(yè)天花板級別的性能,提供了頂級的生產(chǎn)力效率,但這并不是全部。

創(chuàng)作者們使用RTX GPU還帶來了一系列隱性優(yōu)勢,比如穩(wěn)定性、應(yīng)用生態(tài)的兼容性、軟件的易用性,這一系列看似“不起眼”的優(yōu)勢,實(shí)際上對創(chuàng)作者們來說至關(guān)重要。

試想,如果一個(gè)重要的視頻因技術(shù)升級提升了1倍的渲染效率,但因?yàn)椤癇UG”而不得不重頭再來,那么實(shí)際上創(chuàng)作者并未受益,相反體驗(yàn)是十分糟糕的。

對于生產(chǎn)力場景的AI工具,英偉達(dá)在背后實(shí)際上做了海量的工作,從協(xié)調(diào)產(chǎn)業(yè)鏈各方、到進(jìn)行技術(shù)研發(fā)、調(diào)優(yōu)、適配,英偉達(dá)把最難的工作留給了自己,最終創(chuàng)作者看到的就是“一鍵部署”。

這一點(diǎn),正是英偉達(dá)的關(guān)鍵價(jià)值和不可替代性所在。

2、分辨率、色彩、亮度全面提升,AI讓視頻內(nèi)容擺脫“枷鎖”

最后,在AI技術(shù)普惠、讓更多人更方便更高效地使用AI這件事上,英偉達(dá)同樣是跑在最前面的,比如RTX Video的一系列優(yōu)秀技術(shù),已經(jīng)面向開發(fā)者開放,進(jìn)一步加速AI技術(shù)在視頻領(lǐng)域的應(yīng)用。

最具代表性的就是可以提升視頻分辨率、讓圖像更加清晰銳利的RTX視頻超分辨率(VSR)功能以及將SDR視頻內(nèi)容轉(zhuǎn)換為HDR內(nèi)容的RTX Video HDR功能。

游戲NPC秒變真人,3D大片模型一鍵生成,RTX AI PC正讓這一切走入現(xiàn)實(shí)

▲RTX VSR功能

消費(fèi)者們很早就可以在使用Chrome、Edge、Firefox瀏覽器和VLC播放器觀看視頻時(shí),體驗(yàn)基于這兩項(xiàng)RTX Video技術(shù)實(shí)現(xiàn)的4K HDR視頻。

最近英偉達(dá)向開發(fā)者們開放了這些能力,例如Davinci Resolve、萬興喵影等熱門的剪輯工具已經(jīng)開始支持這些AI技術(shù)。

游戲NPC秒變真人,3D大片模型一鍵生成,RTX AI PC正讓這一切走入現(xiàn)實(shí)

▲萬興喵影在應(yīng)用中支持RTX Video技術(shù)

受限于當(dāng)時(shí)拍攝設(shè)備、條件,一些珍貴的老視頻可能并沒有高清的畫質(zhì)和優(yōu)秀的色彩、亮度表現(xiàn),但借助RTX Video技術(shù),這些內(nèi)容可以獲得更好的畫面精細(xì)度提升、色彩表現(xiàn)提升。

更多內(nèi)容創(chuàng)作者,甚至是普羅大眾都可以更快捷地創(chuàng)作更高質(zhì)量的視頻并進(jìn)行分享。AI降低了高質(zhì)量視頻制作的門檻,也降低了普通消費(fèi)者享受高質(zhì)量視頻的門檻。

當(dāng)然,英偉達(dá)為創(chuàng)作者們提供的優(yōu)秀AI創(chuàng)作工具還有很多,比如RTX Remix就可以直接讓經(jīng)典作品與現(xiàn)代技術(shù)融合,打破技術(shù)的時(shí)空邊界。

一些經(jīng)典的老游戲作品都可以借助RTX Remix快速利用上全景光線追蹤、DLSS 3.5這樣的最新游戲技術(shù)。英偉達(dá)在這個(gè)過程中做了大量的優(yōu)化,不斷簡化開發(fā)者、Mod愛好者的工作流程。

不論是ComfyUI背后各類RTX軟硬件技術(shù)的加速,還是RTX Video于視頻創(chuàng)作的進(jìn)一步賦能,英偉達(dá)毫無疑問都已經(jīng)成為整個(gè)創(chuàng)作產(chǎn)業(yè)擁抱生成式AI的最優(yōu)解。

結(jié)語:推動前沿AI技術(shù)落地,RTX AI PC加速變革千行百業(yè)

可以看到,不論是在游戲還是內(nèi)容創(chuàng)作領(lǐng)域,英偉達(dá)都基于自身優(yōu)秀的軟硬件技術(shù)及生態(tài)能力賦能了大批開發(fā)者,讓創(chuàng)作流程實(shí)現(xiàn)顛覆式效率提升,同時(shí)也給普通消費(fèi)者帶來了實(shí)打?qū)嵉挠螒蝮w驗(yàn)、視頻觀影體驗(yàn)的升級。

當(dāng)下AI技術(shù)迭代日新月異,所有的芯片巨頭都在“All in AI”,很多競爭對手也在推出與英偉達(dá)類似的技術(shù),希望能夠有所突破。

誠然,產(chǎn)業(yè)的共同進(jìn)步是好事,對于全行業(yè)來說都頗具積極意義。但同時(shí)我們也能清楚地看到:

過硬的硬件技術(shù)實(shí)力、行業(yè)天花板級別的產(chǎn)品性能表現(xiàn)、繁榮的軟件生態(tài)、CUDA的堅(jiān)實(shí)支撐、數(shù)十年積累下來的開發(fā)者們的認(rèn)可和口碑,所有這些,都是英偉達(dá)在AI PC時(shí)代前行不可替代的獨(dú)特優(yōu)勢。

用RTX AI PC加速變革千行百業(yè),英偉達(dá)是認(rèn)真的。