1993年,是英偉達(dá)誕生之年,是Web大規(guī)劃普及的一年,也是電影《侏羅紀(jì)公園》問世的一年,預(yù)示著3D核算機(jī)圖形年代的到來。
智東西8月10日?qǐng)?bào)導(dǎo),在今日舉行的核算機(jī)圖形學(xué)年會(huì)SIGGRAPH上,英偉達(dá)Omniverse和仿真技能副總裁Rev Lebaredian談到自1993年以來,2022年將是核算機(jī)圖形職業(yè)大的轉(zhuǎn)折點(diǎn),本年的SIGGRAPH“可能將載入史冊(cè)”。
在SIGGRAPH的主題講演期間,英偉達(dá)宣告了一系列由AI驅(qū)動(dòng)的元國際新東西,包含實(shí)時(shí)協(xié)作與仿真渠道Omniverse的新版本、能協(xié)助開發(fā)者更快構(gòu)建高質(zhì)量虛擬人的Avatar云引擎,并發(fā)布一項(xiàng)將“元國際言語”USD運(yùn)用于工業(yè)元國際的多年開展路線圖。
今日,英偉達(dá)現(xiàn)已是專心于3D核算機(jī)圖形學(xué)的重要的公司之一。
英偉達(dá)創(chuàng)始人兼CEO黃仁勛說:“人工智能和核算機(jī)圖形學(xué)的結(jié)合將為元國際供給動(dòng)力,即互聯(lián)網(wǎng)的下一次演化!盧ev Lebaredian亦談道:“咱們看到的是互聯(lián)網(wǎng)新年代的開端,一個(gè)被廣泛稱作「元國際」的年代!
迄今為止,咱們看到的元國際概念仍然雜亂,整個(gè)生態(tài)還處于混沌階段。不過短暫的紊亂并不會(huì)影響久遠(yuǎn)的走向,整個(gè)信息技能產(chǎn)業(yè)都在走向真假結(jié)合,并將影響力輻射至各行各業(yè)。因而英偉達(dá)所擅長的圖形烘托、人工智能(AI)核算等才能,未來將持續(xù)有很大的增加空間。
在此前多數(shù)公共場(chǎng)所中,英偉達(dá)并不經(jīng)常談?wù)摗霸獓H”這個(gè)概念,但從它近年的布局能夠看到,在構(gòu)建元國際所需的軟硬件根底設(shè)施布局上,英偉達(dá)現(xiàn)已走得相當(dāng)之遠(yuǎn)。
一、助攻構(gòu)建虛擬人!推Avatar云引擎,大降開發(fā)門檻
虛擬形象的邊界正在迅速擴(kuò)展,從游戲界開展向娛樂、銀行、交通和酒店等更多職業(yè)。如今,游戲中的虛擬形象愈發(fā)傳神生動(dòng),虛擬人唱歌跳舞、帶貨直播、客戶服務(wù)也不是什么罕見的事。
但要打造滿足傳神的、神態(tài)天然、能與人類流通互動(dòng)的虛擬人,對(duì)技能有較高的要求。
而英偉達(dá)正在做的事,就是設(shè)法下降虛擬人、虛擬化身、3D虛擬頭像的開發(fā)門檻。
為此,英偉達(dá)今日發(fā)布了一個(gè)用于高效創(chuàng)立和布置3D虛擬形象的云原生AI模型和服務(wù)——Omniverse Avatar Cloud Engine(ACE)。
ACE建立在英偉達(dá)的統(tǒng)一核算結(jié)構(gòu)根底之上,內(nèi)置有許多雜亂的AI技能,為用戶供給豐富的軟件東西和API。
它基本覆蓋了虛擬人所需的各種中心功用,如完成了解多種言語、響應(yīng)語音提示、智能視頻分析、高功用推薦系統(tǒng)、與環(huán)境互動(dòng)并供給智能建議等等。這些東西使開發(fā)者足以解鎖交互式虛擬人所需的大部分技能,并做到先進(jìn)水平。
比如ACE內(nèi)置的AI東西Audio2Face,能夠用音頻文件直接創(chuàng)立面部動(dòng)畫,并供給有推理和生成傳神情緒的新功用;Audio2Gesture能用能用音頻文件生成傳神的身體姿勢(shì)動(dòng)作;Project Tokkio則能供給視覺、感知和智能對(duì)話才能,讓虛擬形象供給建議、進(jìn)步餐廳等場(chǎng)所的客戶服務(wù)水平。
憑借此類東西,虛擬人能夠具有像實(shí)在人類一樣雜亂的面部信息、流通天然的表情和動(dòng)作,以及與說話內(nèi)容契合的口型。
ACE的模型和服務(wù)都在云端,因而企業(yè)不用擔(dān)心算力問題,任何規(guī)劃的企業(yè)都能夠當(dāng)即取得構(gòu)建布置虛擬形象所需的大規(guī)劃算力。
這對(duì)游戲、談天機(jī)器人、虛擬人、數(shù)字孿生和虛擬國際的大規(guī)劃出產(chǎn)作業(yè)都會(huì)很有協(xié)助。
二、元國際東西包再晉級(jí),Omniverse新版本發(fā)布
在元國際熱潮迸發(fā)前,英偉達(dá)的Omniverse渠道就在持續(xù)打磨和預(yù)熱。如今該渠道在構(gòu)建虛擬國際方面的價(jià)值日益凸顯,這也成為黃仁勛頗具遠(yuǎn)見性的又一例子。在本屆SIGGRAPH上,黃仁勛發(fā)布了Omniverse的新版本。
Omniverse是一個(gè)用于構(gòu)建虛擬國際的多GPU可擴(kuò)展核算渠道,已被全球約700家搶先的公司用于改善修建和產(chǎn)品規(guī)劃、簡化視覺效果作業(yè)流程以及構(gòu)建工廠、城市和地球的數(shù)字孿生。黃仁勛將其描繪為“一個(gè)USD渠道,一個(gè)構(gòu)建元國際運(yùn)用的東西包,一個(gè)運(yùn)轉(zhuǎn)虛擬國際的核算引擎”。
此次針對(duì)Omniverse的擴(kuò)展包含多項(xiàng)AI東西和功用,它們讓藝術(shù)家、開發(fā)者和工程師能夠比以往愈加輕松地構(gòu)建虛擬國際和內(nèi)容,而且愈加無縫地銜接當(dāng)今搶先的3D運(yùn)用。
其間,Omniverse Kit是用于構(gòu)建本地Omniverse擴(kuò)展和運(yùn)用程序的東西包,里面用于優(yōu)化物理仿真的PhysX和進(jìn)步3D作業(yè)流程協(xié)作效率的OmniLive Workflows均得到更新;Omniverse Machinima則用于輕松構(gòu)建3D電影和動(dòng)畫電影,里面有來自數(shù)百個(gè)游戲的全新免費(fèi)3D財(cái)物。
咱們運(yùn)用谷歌、百度等查找引擎查資料現(xiàn)已是粗茶淡飯,英偉達(dá)相同打造了一款專門用來查找3D視覺數(shù)據(jù)的查找引擎DeepSearch。
DeepSearch運(yùn)用AI技能,準(zhǔn)確地在巨大的、未符號(hào)的3D視覺財(cái)物數(shù)據(jù)庫中進(jìn)行查找。運(yùn)用者用天然言語文本就能在DeepSearch上進(jìn)行查找,F(xiàn)在該查找引擎已面向Omniverse Enterprise客戶敞開。
物理機(jī)器學(xué)習(xí)結(jié)構(gòu)NVIDIA Modulus現(xiàn)在也能夠用作Omniverse擴(kuò)展程序。之前科學(xué)家和工程師用這個(gè)結(jié)構(gòu)創(chuàng)立數(shù)字孿生。
經(jīng)Modulus練習(xí)的物理機(jī)器學(xué)習(xí)模型能供給近實(shí)時(shí)的功用,根據(jù)不同的運(yùn)用,其速度可進(jìn)步4000乃至100000倍,而且具有前所未有、更挨近高保真模仿的準(zhǔn)確性。
此外,英偉達(dá)與工業(yè)、規(guī)劃、模仿和CAD軟件生態(tài)系統(tǒng)中的協(xié)作伙伴一同發(fā)布了11個(gè)新的Omniverse銜接器(Connector),這些根據(jù)USD的插件進(jìn)一步向工業(yè)界和科學(xué)界的公司敞開Omniverse作業(yè)流程。Omniverse USD生態(tài)系統(tǒng)中的銜接器總數(shù)現(xiàn)已達(dá)到112個(gè)。這些銜接器將進(jìn)一步解鎖元國際作業(yè)流程。
英偉達(dá)還發(fā)布了多項(xiàng)中心仿真模仿技能的嚴(yán)重更新。這些技能在元國際國際中用于表明原料、物理和光線。NVIDIA MDL原料規(guī)范一向支撐物理級(jí)精確的3D原料體現(xiàn),現(xiàn)已徹底開源,使開發(fā)者能夠?yàn)槿魏魏嫱衅鲙碓辖缯f言語支撐。
其他新發(fā)布還有下一代OpenVDB(存儲(chǔ)體積數(shù)據(jù)開源庫)NeuralVDB,它能為稀少體積數(shù)據(jù)集帶來了AI和GPU優(yōu)化,并將這些海量數(shù)據(jù)集的內(nèi)存占用率下降了多達(dá)100倍。
三、開源USD資源與測(cè)驗(yàn)套件,支撐工業(yè)元國際運(yùn)用
通用場(chǎng)景描繪(USD)一種3D國際的開源和可擴(kuò)展言語,是在動(dòng)畫和視覺效果作業(yè)流程中完成3D數(shù)據(jù)交換規(guī)范化的一種方式。
USD在視覺特效和動(dòng)畫、工業(yè)、規(guī)劃和科學(xué)運(yùn)用等方面都呈現(xiàn)出快速增加的氣勢(shì)。媒體、游戲、機(jī)器人、工業(yè)自動(dòng)化、零售和百貨職業(yè)的創(chuàng)新者現(xiàn)已開端將USD作為他們首選的元國際言語。
今日,英偉達(dá)宣告了一項(xiàng)開展USD的大型方案,預(yù)備將USD開展成為敞開元國際和3D互聯(lián)網(wǎng)的根底。其方案包含讓一切國家和言語的用戶都能參與USD的國際字符支撐、完成城市規(guī)劃和行星規(guī)劃數(shù)字孿生的地理空間坐標(biāo)支撐,以及完成數(shù)字孿生與物理國際同步開展的物聯(lián)網(wǎng)數(shù)據(jù)實(shí)時(shí)流式傳輸。
英偉達(dá)將與USD的發(fā)明者皮克斯以及Adobe、Autodesk、西門子等多家職業(yè)界搶先的企業(yè)協(xié)作,施行一項(xiàng)多年開展路線圖,將USD的功用擴(kuò)展到視覺效果運(yùn)用之外,使其能夠更好地支撐修建、工程、制造業(yè)、科學(xué)核算、機(jī)器人、工業(yè)數(shù)字孿生等范疇的工業(yè)元國際運(yùn)用,助力3D藝術(shù)家、規(guī)劃師、開發(fā)者等人員,在構(gòu)建虛擬國際時(shí)能夠在不同的作業(yè)流程和運(yùn)用中進(jìn)行協(xié)作。
“USD是皮克斯動(dòng)畫制作流程的基石!逼た怂箘(dòng)畫作業(yè)室首席技能官Steve May認(rèn)為,“英偉達(dá)將協(xié)助USD開展成為徹底可互操作3D渠道的敞開根底,造福一切職業(yè)!
工業(yè)巨頭西門子就在跟英偉達(dá)協(xié)作完成未來的規(guī)劃、工程和協(xié)作空間——工業(yè)元國際。西門子數(shù)字工業(yè)首席技能官Dirk Didascalou說:“咱們十分高興能在西門子Xcelerator渠道上支撐USD,并方案與英偉達(dá)協(xié)作開發(fā)下一代USD格局!
沃爾沃汽車高檔可視化專家Mattias Wikenmalm 亦認(rèn)可USD的巨大開展前景:“沃爾沃在第一時(shí)間了解到敞開、可擴(kuò)展、可互操作的3D場(chǎng)景描繪對(duì)咱們?cè)獓H項(xiàng)目的價(jià)值。經(jīng)過保持統(tǒng)一的財(cái)物來歷并完成它們?cè)诓煌摂M國際之間的交換,沃爾沃將打造出實(shí)在無縫的3D互聯(lián)網(wǎng)消費(fèi)者運(yùn)用。
為了加速USD的開發(fā)和選用,英偉達(dá)宣告開發(fā)一個(gè)敞開的USD兼容性測(cè)驗(yàn)和認(rèn)證套件,開發(fā)者能夠自由運(yùn)用該套件來測(cè)驗(yàn)他們運(yùn)用USD構(gòu)建的項(xiàng)目并驗(yàn)證結(jié)果是否契合預(yù)期。
此外,英偉達(dá)正在發(fā)布一系列免費(fèi)資源來加速USD的選用規(guī)模,其間包含數(shù)千種專門用于協(xié)助不具有3D專業(yè)知識(shí)的用戶構(gòu)建敞開虛擬國際的USD財(cái)物。英偉達(dá)還供給數(shù)百個(gè)可按需挑選的教程、文檔和開發(fā)者東西來協(xié)助普及USD教育。
NVIDIA還宣告投資構(gòu)建能夠?qū)⒘餍械?D軟件生態(tài)系統(tǒng)銜接到NVIDIA Omniverse的USD插件。
NVIDIA還在SIGGRAPH上匯集了USD生態(tài)系統(tǒng)中的數(shù)百名工程和產(chǎn)品負(fù)責(zé)人,并組成作業(yè)委員會(huì),協(xié)助NVIDIA調(diào)整USD開發(fā)的優(yōu)先事項(xiàng)并獲取關(guān)于要點(diǎn)開發(fā)方向的反應(yīng)。
現(xiàn)在,Adobe、Autodesk、皮克斯和西門子等眾多公司都在為USD的開展供給協(xié)助和支撐。
四、推神經(jīng)圖形東西包,簡化虛擬國際構(gòu)建進(jìn)程
為了進(jìn)一步簡化虛擬國際建模進(jìn)程,進(jìn)步建模速度,英偉達(dá)發(fā)布了多個(gè)運(yùn)用AI和神經(jīng)圖形規(guī)范研討的軟件開發(fā)東西包。
神經(jīng)圖形用于模仿和烘托一個(gè)動(dòng)態(tài)的虛擬國際。英偉達(dá)人工智能研討副總裁Sanja Fidler說:“神經(jīng)圖形將人工智能和圖形交織在一起,為未來合適從數(shù)據(jù)中學(xué)習(xí)的圖形流水線鋪平了路途!
構(gòu)建虛擬國際,3D內(nèi)容創(chuàng)造是要害部分。而神經(jīng)圖形旨在引導(dǎo)內(nèi)容創(chuàng)造者為元國際國際創(chuàng)造“有趣的內(nèi)容”,不僅是藝術(shù)家,交際媒體用戶也能夠憑借它來輕松地?fù)?jù)照片創(chuàng)立3D內(nèi)容。
一個(gè)運(yùn)用例子是將掃描的2D圖像帶入虛擬現(xiàn)實(shí)。Fidler談道,曾經(jīng)要做件事,藝術(shù)家有必要運(yùn)用不同的東西,很費(fèi)時(shí),而英偉達(dá)的“神經(jīng)重建”進(jìn)程將其變成了一個(gè)統(tǒng)一結(jié)構(gòu)。
憑借英偉達(dá)研制的軟件Instant NeRF,藝術(shù)家能夠用攝像頭掃描并運(yùn)用神經(jīng)圖形進(jìn)行快速捕捉,從2D圖像創(chuàng)立物體或場(chǎng)景的3D模型,并能夠當(dāng)即將其導(dǎo)入虛擬國際。
英偉達(dá)新發(fā)布的Kaolin Wisp,是深度學(xué)習(xí)東西庫Kaolin的彌補(bǔ),能讓工程師幾天內(nèi)就施行新的練習(xí)模式;還有用AI大幅削減3D模型數(shù)據(jù)內(nèi)存占用的NeuralVDB,這是對(duì)體積數(shù)據(jù)存儲(chǔ)OpenVDB職業(yè)規(guī)范的改善。
結(jié)語:英偉達(dá)的元國際雄心
從本年英偉達(dá)在SIGGRAPH上的主題講演,咱們能夠看到英偉達(dá)現(xiàn)已將支撐元國際所需的技能及產(chǎn)品,視作拉動(dòng)未來增加的重要引擎。
元國際也被稱作“3D版互聯(lián)網(wǎng)”,而假如要讓它像現(xiàn)在大多數(shù)上網(wǎng)用戶都非常習(xí)氣的互聯(lián)網(wǎng),那么它有必要具有讓普通用戶也能輕松獲取、構(gòu)建3D內(nèi)容的根底條件。
現(xiàn)在,英偉達(dá)顯然正試圖接過這一重?fù)?dān)。
英偉達(dá)供給的Omniverse渠道以及一系列元國際構(gòu)建相關(guān)東西,都在為開發(fā)者供給打通物理國際和虛擬國際之間的快捷東西,即讓虛擬人、虛擬物體、虛擬國際的創(chuàng)立都更快捷,同時(shí)愈加趨近于實(shí)在的國際。
這些軟件東西越是好用,就越是會(huì)招引更多開發(fā)者進(jìn)入英偉達(dá)的生態(tài)、采購英偉達(dá)的硬件產(chǎn)品,從而推動(dòng)英偉達(dá)的業(yè)績走向新的高度。
在圖形處理年代和人工智能年代,英偉達(dá)都是底層硬件根底設(shè)施的中心供應(yīng)商,跟著人們預(yù)備邁向元國際年代,英偉達(dá)相同雄心壯志,意圖占有硬件中心之位。
正如NVIDIA Omniverse和仿真模仿技能副總裁Rev Lebaredian所言:“元國際蘊(yùn)含的商機(jī)價(jià)值數(shù)萬億美元,任何企業(yè)組織都不肯錯(cuò)過它! |