Nvidia公司的研究人員宣布了一系列創(chuàng)新，可以幫助開(kāi)發(fā)者和藝術(shù)家將人工智能與計(jì)算機(jī)圖形軟件結(jié)合起來(lái)，將他們的創(chuàng)造性想法變成現(xiàn)實(shí)。

Nvidia發(fā)布計(jì)算機(jī)圖形方面的突破性AI研究

該公司表示將在8月6日至10日舉行的SIGGRAPH 2023年會(huì)上發(fā)布不少于18篇新的研究論文詳細(xì)介紹其創(chuàng)新成果，該會(huì)議是一個(gè)專注于計(jì)算機(jī)圖形的年度會(huì)議。這些論文是與美國(guó)、歐洲和以色列的幾十所大學(xué)的研究人員合作完成的，涵蓋了將文本轉(zhuǎn)化為圖像的生成式人工智能模型、可以將靜止圖像轉(zhuǎn)化為三維版本的逆渲染工具、使用人工智能模擬復(fù)雜三維元素的物理模型等等。

Nvidia在一篇博文中解釋說(shuō)，創(chuàng)作者已經(jīng)可以使用各種生成式人工智能模型將文本轉(zhuǎn)化為圖像。這類工具被廣泛用于創(chuàng)建概念藝術(shù)、電影故事板、視頻游戲和3D虛擬世界等任務(wù)。然而，它們?nèi)杂幸欢ǖ木窒扌裕貏e是在藝術(shù)家有非常具體的想法的時(shí)候。例如，一個(gè)廣告主管可能正在計(jì)劃圍繞一款新的泰迪熊進(jìn)行宣傳，并希望創(chuàng)造出各種場(chǎng)景，在不同的情況下（例如泰迪熊的茶會(huì)）展示這個(gè)玩具。

現(xiàn)有的工具無(wú)法很好地創(chuàng)造出這樣的特定內(nèi)容，所以Nvidia的研究人員設(shè)計(jì)出了一種技術(shù)，讓生成式人工智能能夠使用一張示例圖像，以非常具體的方式定制輸出的內(nèi)容。第二種技術(shù)描述了一種名為Perfusion的高度緊湊模型，它允許用戶將多個(gè)個(gè)性化元素和一些概念圖結(jié)合起來(lái)，利用AI創(chuàng)建出更具體的視覺(jué)效果。

另外，將2D圖像渲染成3D環(huán)境的過(guò)程非常耗時(shí)，Nvidia的研究人員也一直專注于加快這個(gè)過(guò)程。第三篇研究論文圍繞的是一種新技術(shù)，Nvidia稱該技術(shù)能夠在傳統(tǒng)筆記本電腦上運(yùn)行，用一張2D肖像生成3D頭部和肩部模型。該公司表示，這是一項(xiàng)重大突破，能夠極大地加快3D頭像的創(chuàng)建，對(duì)視頻會(huì)議和虛擬現(xiàn)實(shí)應(yīng)用具有重大影響。

Nvidia的另一項(xiàng)舉措是與斯坦福大學(xué)的研究人員合作，為3D任務(wù)生成逼真的運(yùn)動(dòng)。例如，用戶可以向模型提供網(wǎng)球比賽的視頻，然后將這些逼真的運(yùn)動(dòng)轉(zhuǎn)移到3D網(wǎng)球運(yùn)動(dòng)員的角色上。Nvidia表示，然后這個(gè)模擬球員可以與其他角色進(jìn)行長(zhǎng)時(shí)間的對(duì)攻。該模型的獨(dú)特之處在于它能夠解決具有不同技能和逼真運(yùn)動(dòng)的3D角色的問(wèn)題，而且不需要昂貴的動(dòng)作捕捉視頻數(shù)據(jù)。

Nvidia還將其AI智能應(yīng)用于神經(jīng)渲染，這是一種模擬光線在虛擬場(chǎng)景中反射的物理學(xué)的技術(shù)。它的研究展示了如何利用紋理、材料和體積的人工智能模型，為電子游戲和虛擬世界實(shí)時(shí)創(chuàng)建電影級(jí)、逼真的物體視覺(jué)效果。

該公司介紹了其最新的神經(jīng)渲染壓縮技術(shù)能夠如何大幅提高此類場(chǎng)景的真實(shí)性，捕捉到比以往格式更清晰的細(xì)節(jié)，例如，在以往格式中模糊不清的文字變得更加清晰。

最后，Nvidia的研究人員展示了他們?cè)谏窠?jīng)材料研究方面的最新進(jìn)展。該論文詳細(xì)介紹了一個(gè)人工智能系統(tǒng)，該系統(tǒng)可以學(xué)習(xí)光線如何從擬真多層材料中反射出來(lái)，然后將這些資產(chǎn)的復(fù)雜程度降低到更小的神經(jīng)網(wǎng)絡(luò)可以實(shí)時(shí)運(yùn)行的程度。Nvidia的研究人員表示，其結(jié)果是著色速度提高了10倍。下面這張神經(jīng)渲染的茶壺圖片中展現(xiàn)了它所能達(dá)到的極端真實(shí)水平，準(zhǔn)確地表現(xiàn)了陶瓷材料及其透明釉面涂層的不完美性質(zhì)，以及指紋、污點(diǎn)和灰塵。

Nvidia表示，所有的最新研究都將在今年的SIGGRAPH會(huì)議上公布。它希望開(kāi)發(fā)者和企業(yè)能夠擁抱這些新技術(shù)，用它們生成合成物體和人物，為機(jī)器人和自動(dòng)駕駛汽車培訓(xùn)等應(yīng)用填充虛擬世界。此外，它還希望藝術(shù)家、建筑師、電影制片人和視頻游戲設(shè)計(jì)師等創(chuàng)作者利用這些技術(shù)，生產(chǎn)出比以往質(zhì)量更高的視覺(jué)效果。