作者卜淑情 編輯硬AI
對于未來AI的發(fā)展方向,英偉達CEO黃仁勛又有了新的判斷。他在稍早前舉辦的英偉達日本峰會上提到了兩個AI趨勢:
AI的可擴展性和多模態(tài)能力。這意味著AI能夠處理和理解多種類型的數(shù)據(jù),如文本、語音、圖像和視頻,并將這些數(shù)據(jù)類型相互關(guān)聯(lián),從而在多種應(yīng)用場景中發(fā)揮作用。
AI應(yīng)用的“寒武紀(jì)大爆發(fā)”。AI應(yīng)用的爆炸性增長,將創(chuàng)造許多新的行業(yè)和公司。黃仁勛將這一時期比作“寒武紀(jì)大爆發(fā)”,一個生物多樣性急劇增加的地質(zhì)時期。
他強調(diào),盡管芯片是AI系統(tǒng)的核心組件之一,但AI的真正價值和潛力在于整個系統(tǒng)的綜合能力和廣泛的應(yīng)用前景。
黃仁勛認(rèn)為,未來有兩種類型的AI會非常受歡迎:數(shù)字AI工作者(AI代理)和物理AI(機器人技術(shù))。數(shù)字AI工作者能執(zhí)行多種任務(wù),如營銷、客戶支持等,像數(shù)字員工一樣運作。物理AI則體現(xiàn)在機械系統(tǒng)中,如自動駕駛汽車和工業(yè)機器人,它們能在現(xiàn)實世界中執(zhí)行復(fù)雜任務(wù)。
黃仁勛將英偉達視為一家模擬技術(shù)公司,專注于模擬物理學(xué)、虛擬世界和智能,通過模擬幫助預(yù)測未來,更像是在造時間機器。他說,英偉達未來布局聚焦于AI技術(shù)和生態(tài)系統(tǒng)合作,通過加速計算和GPU強化CPU,同時提供豐富的軟件和庫支持AI發(fā)展。
他還說,一個新的行業(yè)——人工智能制造——正在誕生,屆時每家公司都將成為AI制造商。
黃仁勛演講亮點:
- 本質(zhì)上,英偉達是一家模擬技術(shù)公司。我們模擬物理、虛擬世界和智能。通過我們的模擬技術(shù),我們幫助您預(yù)測未來。因此,在許多方面,英偉達就像制造了時間機器。
- 英偉達發(fā)明了加速計算,但并沒有取代CPU。事實上,我們幾乎是計算機領(lǐng)域唯一一家不想取代CPU的公司。我們的目標(biāo)是通過將計算密集型的工作負(fù)載轉(zhuǎn)移到GPU上,從而釋放CPU的能力。
- 在過去的十年里,我們讓人工智能和機器學(xué)習(xí)的規(guī)模提高了 100 萬倍。通過把機器學(xué)習(xí)的規(guī)模提升100萬倍,我們實現(xiàn)了一個巨大的突破,也正是這個突破,催生了如今的 ChatGPT——人工智能的到來。
- 軟件1.0 就是編寫在 CPU 上運行的代碼。現(xiàn)在我們進入了軟件2.0時代,因為計算機速度已經(jīng)非???,你可以給它提供大量的樣本數(shù)據(jù),讓它自己學(xué)習(xí)并預(yù)測函數(shù)。我們稱之為軟件 2.0。
- 現(xiàn)在的軟件不再是手寫的代碼,而是在GPU上運行的神經(jīng)網(wǎng)絡(luò)。這些在GPU上運行的神經(jīng)網(wǎng)絡(luò)正在形成一種新的操作系統(tǒng),一種新的使用計算機的方式,也就是現(xiàn)代計算機的操作系統(tǒng),特別是大型語言模型。
- 這種機器學(xué)習(xí)方法已被證明具有令人難以置信的可擴展性。你可以用它做各種各樣的事情,包括數(shù)字化文本、聲音、語音、圖像和視頻。它可以是多模態(tài)的。你可以教它氨基酸序列,教它理解任何有大量觀察數(shù)據(jù)的內(nèi)容。現(xiàn)在AI應(yīng)用正在以寒武紀(jì)時代的速度爆炸式增長,而我們才剛剛開始。
- AI不單單是芯片的問題。(GPU)系統(tǒng)不能單獨工作。即使是世界上最先進的計算機也無法單獨為人工智能工作。有時它必須與成千上萬的其他計算機一起工作,像這樣的節(jié)點一起作為一臺計算機。有時他們必須分開工作,因為他們正在響應(yīng)不同的客戶、不同的查詢,有時是單獨的,有時是作為一個整體。
- 我認(rèn)為有兩種類型的人工智能會非常受歡迎。一個是數(shù)字化的,我們稱之為AI代理,你可以在辦公室里使用它們與你的員工合作。第二個是物理AI系統(tǒng)機器人。這些物理AI將是公司構(gòu)建的產(chǎn)品。因此,公司將使用AI來提高員工的生產(chǎn)力,我們將使用AI來推動和授權(quán)我們銷售的產(chǎn)品。車企未來會有兩個工廠,一個工廠造汽車,一個工廠生產(chǎn)汽車?yán)镞\行的AI。
- 現(xiàn)在我們有了一個以前從未存在過的新行業(yè)(人工智能制造)——人工智能位于計算機行業(yè)的頂端,但它被每個行業(yè)利用和創(chuàng)造。每個行業(yè)、每個公司、每個國家都必須生產(chǎn)自己的AI,這是一場新的工業(yè)革命。
- 為了實現(xiàn)機器人技術(shù),我們需要建造三臺計算機。第一臺計算機訓(xùn)練AI,就像我們之前給你們舉的所有例子一樣。第一臺是模擬AI。你需要給AI一個練習(xí)的地方,一個學(xué)習(xí)的地方,一個撤退的地方,接收它可以學(xué)習(xí)的合成數(shù)據(jù)。Omniverse平臺,它使您能夠創(chuàng)建AI。最終你想要的是AI。最終,你所期望的 AI,將會看到一個世界,它能識別視頻、周圍的環(huán)境以及你的需求,并生成相應(yīng)的動作。
歡迎來到英偉達AI峰會。你剛才看到的一切都是模擬的。沒有動畫。本質(zhì)上,英偉達是一家模擬技術(shù)公司。我們模擬物理、虛擬世界和智能。通過我們的模擬技術(shù),我們幫助您預(yù)測未來。因此,在許多方面,英偉達就像制造了時間機器。今天,我們將與您分享我們的一些最新突破。但最重要的是,這是一個關(guān)于日本生態(tài)系統(tǒng)的活動。我們在這里有很多合作伙伴,包括350家初創(chuàng)公司、250,000名開發(fā)者和數(shù)百家公司。我們來這里已經(jīng)很久了。自公司成立以來,日本市場對我們非常重要。在日本,我們有許多“第一次”嘗試。第一個與我們合作的游戲開發(fā)者是世嘉的鈴木裕,他是一位著名的3D游戲開發(fā)者,首先與我們合作將世嘉令人驚嘆的3D游戲移植到英偉達的圖形處理器上。東京工業(yè)大學(xué)首次使用英偉達CUDA構(gòu)建超級計算機Subamer 1.2,使我們能夠利用我們的圖形處理器推動科學(xué)計算。日本在許多方面都是第一。這也是我們首次能夠創(chuàng)建移動處理器,這催生了我們非常重要的項目之一——任天堂Switch。如此多的“第一次”。現(xiàn)在我們正處于一個新時代的開始,AI革命,一個新的行業(yè),非凡的技術(shù)變革。這是一個非常令人興奮的時刻,但也非常關(guān)鍵。因此,我們在這里與日本生態(tài)系統(tǒng)的優(yōu)秀公司合作,將AI引入日本,以便我們能夠充分利用眼前這個非凡的機會。今天我們在這里有許多合作伙伴,我要感謝GMO互聯(lián)網(wǎng)集團、惠普、微軟Azure、三井集團等白金贊助商。我想感謝你們所有人。還有其他56個贊助商。感謝大家的到來,感謝大家的支持。英偉達發(fā)明了加速計算,但并沒有取代CPU。事實上,我們幾乎是計算機領(lǐng)域唯一一家不想取代CPU的公司。我們的目標(biāo)是通過將計算密集型的工作負(fù)載轉(zhuǎn)移到GPU上,從而釋放CPU的能力。這是GPU,這是CPU。通過結(jié)合這兩者,我們可以利用這兩種處理器的最佳功能:CPU非常擅長順序處理,而圖形處理器則非常擅長并行處理。我稍后會詳細(xì)討論這個,但這就是加速計算,不僅僅是并行計算,而是CPU和GPU的協(xié)同工作。這種計算模型對世界來說是全新的。事實上,CPU自1964年開始就已經(jīng)存在了,也就是我出生的第二年,至今已有60年。我們今天在計算機上看到的絕大多數(shù)運行在CPU上的軟件。但現(xiàn)在有一個新的變化,計算模型正在發(fā)生根本性變化。然而,為了實現(xiàn)這一點,你不能僅僅將順序運行的CPU軟件放到GPU上并行運行。我們必須創(chuàng)建一大堆新的算法,就像OpenGL使計算機圖形應(yīng)用程序能夠通過圖形處理器連接到加速一樣,我們必須為許多不同的應(yīng)用程序創(chuàng)建許多特定領(lǐng)域的庫。這些是我們公司擁有的350個不同庫中的一些,非常重要的庫。Kulethos是一個用來加速計算光刻的工具,這是芯片制造過程中的一個步驟。計算光刻是一個復(fù)雜的過程,通常需要數(shù)周時間來計算許多層的圖案。但使用Kulethos后,這個時間可以縮短到幾個小時。當(dāng)然,我們能夠縮短芯片制造的周期,但同樣重要的是,我們能夠讓光刻技術(shù)的算法變得更加復(fù)雜,這意味著我們可以推動半導(dǎo)體技術(shù)達到更高的精度,比如2納米、1納米甚至更小的尺度。因此,計算光刻的過程將通過Kulethos和Spark Solver的DSSAI Ariel技術(shù)得到加速。我今天將會詳細(xì)討論這個話題。這個新開發(fā)的庫非常了不起,它使計算機能夠運行5G無線電的技術(shù)棧。簡單來說,就是可以在Nvidia的CUDA加速器上實時操作一個無線電。此外,CUDA也被用于量子模擬,比如模擬量子電路。還有用于基因測序的配對技術(shù),以及KUV技術(shù),這是一種用于存儲向量數(shù)據(jù)的技術(shù),也用于索引和查詢向量數(shù)據(jù)庫,這些數(shù)據(jù)庫在人工智能領(lǐng)域特別有用。NumPy是一個用于數(shù)值計算的庫。它是世界上最流行的數(shù)值處理庫之一,大約有五百萬不同的開發(fā)者在使用。這個庫非常受歡迎,僅在上個月就達到了3000萬次的下載量,這是一個驚人的數(shù)字。現(xiàn)在,NumPy已經(jīng)完全支持在多個GPU和多個計算節(jié)點上進行加速計算,這使得它在處理大規(guī)模數(shù)據(jù)時更加強大。建議你去了解一下這個庫,它的強大功能確實令人難以置信。QDF是一個用于處理數(shù)據(jù)幀和結(jié)構(gòu)化數(shù)據(jù)的庫,它支持像SQL、Pandas、Polars等數(shù)據(jù)處理技術(shù),以及解決復(fù)雜的旅行商問題(TSP,一種組合優(yōu)化問題)。這個庫極大地加速了這些問題的解決,速度提升了數(shù)百倍。接下來提到的是KUDNN,這是我們創(chuàng)建的最重要的庫之一,全稱是深度神經(jīng)網(wǎng)絡(luò)的qdnn。這個庫負(fù)責(zé)處理深度學(xué)習(xí)模型中不同層次的數(shù)據(jù)。通過創(chuàng)建qdnn并推動深度學(xué)習(xí)的普及和加速,在過去的十年里,我們讓人工智能和機器學(xué)習(xí)的規(guī)模提高了 100 萬倍。通過把機器學(xué)習(xí)的規(guī)模提升100萬倍,我們實現(xiàn)了一個巨大的突破,也正是這個突破,催生了如今的 ChatGPT——人工智能的到來。簡而言之,KUDNN庫對于推動人工智能的發(fā)展起到了關(guān)鍵作用。Qdnn做了一些特別的事情,它改變了我們編寫和使用軟件的方式。軟件 1.0 就是編寫在 CPU 上運行的代碼?,F(xiàn)在我們進入了軟件2.0時代,因為計算機速度已經(jīng)非??欤憧梢越o它提供大量的樣本數(shù)據(jù),讓它自己學(xué)習(xí)并預(yù)測函數(shù)。我們稱之為軟件 2.0。這樣它就能自我學(xué)習(xí)并預(yù)測函數(shù)是什么,這就是機器學(xué)習(xí)。所以,現(xiàn)在的軟件不再是手寫的代碼,而是在GPU上運行的神經(jīng)網(wǎng)絡(luò)。這些在GPU上運行的神經(jīng)網(wǎng)絡(luò)正在形成一種新的操作系統(tǒng),一種新的使用計算機的方式,也就是現(xiàn)代計算機的操作系統(tǒng),特別是大型語言模型。這種機器學(xué)習(xí)方法已被證明具有令人難以置信的可擴展性。你可以用它做各種各樣的事情,包括數(shù)字化文本、聲音、語音、圖像和視頻。它可以是多模態(tài)的。你可以教它氨基酸序列,教它理解任何有大量觀察數(shù)據(jù)的內(nèi)容。理解數(shù)據(jù)含義的第一步是,通過研究互聯(lián)網(wǎng)上的大量文本,我們能夠理解單詞、詞匯、語法,甚至通過找到模式和關(guān)系來理解單詞的含義。使用相同的方法,我們現(xiàn)在不僅能夠理解連接到不同模態(tài)的不同數(shù)據(jù)類型的含義,例如,單詞和圖像之間的關(guān)系(例如,單詞“cat”的圖像和貓的圖像現(xiàn)在連接在一起)。通過學(xué)習(xí)多模態(tài),我們現(xiàn)在甚至可以翻譯和生成各種智能信息。如果你觀察所有那些令人驚嘆的新興公司和他們創(chuàng)造的應(yīng)用程序,你會發(fā)現(xiàn)它們可以被歸為兩種類型,這些類型在一張幻燈片上從一側(cè)到另一側(cè)展示。第一種是文本到文本的應(yīng)用,包括文本的總結(jié)、問答系統(tǒng)、文本生成和講故事。第二種是視頻到文本的應(yīng)用,比如為視頻生成字幕。還有圖像到文本的應(yīng)用,比如圖像識別,以及文本到圖像的應(yīng)用,比如圖像生成,例如Mid Journey這樣的服務(wù)。還有文本到視頻的創(chuàng)作,比如Runway ML這樣的平臺。所有這些不同的組合都是真正的突破。你甚至可以用蛋白質(zhì)發(fā)短信,解釋蛋白質(zhì)的作用,給化學(xué)物質(zhì)發(fā)短信,描述一種可能成為成功藥物的化學(xué)物質(zhì)的特性。對于藥物發(fā)現(xiàn),您甚至可以擁有視頻和文本到機器人的應(yīng)用。這些組合中的每一個都是一個新的行業(yè)、新的公司、新的應(yīng)用程序用例。現(xiàn)在AI應(yīng)用正在以寒武紀(jì)時代的速度爆炸式增長,而我們才剛剛開始。當(dāng)然,機器學(xué)習(xí)的一個特性是,大腦越大,我們能教給它的數(shù)據(jù)越多,它就變得越聰明。我們稱之為比例定律。有充分的證據(jù)表明,隨著我們擴大模型的規(guī)模,訓(xùn)練數(shù)據(jù)的數(shù)量、有效性、質(zhì)量和智力的表現(xiàn)每年都在提高。該行業(yè)正在將模型的大小擴大2倍左右,相應(yīng)地需要2倍的數(shù)據(jù)。因此我們需要四倍的計算量。將人工智能推向下一個水平所需的計算資源量是非凡的。我們稱之為縮放律,訓(xùn)練縮放律。預(yù)培訓(xùn)是其中的一部分,后培訓(xùn)包括強化學(xué)習(xí)、人類反饋、強化學(xué)習(xí)、AI反饋?,F(xiàn)在有很多不同的方法在后期訓(xùn)練階段使用合成數(shù)據(jù)生成。因此,培訓(xùn)、預(yù)培訓(xùn)和后培訓(xùn)正在享受非常顯著的擴展,我們繼續(xù)看到出色的結(jié)果。好吧,當(dāng)草莓或開放AIS01,1被宣布時,向世界展示了一種新型的推理是當(dāng)你與AI互動時,就像ChatGPT一樣。但ChatGPT是一次性的。你問一個問題,你讓它為你做點什么。無論你有什么問題,無論你通過一次拍攝提供了什么提示,它都能給出答案。然而,我們知道思考往往不僅僅是一次性的。思考需要我們做多重計劃,多個潛在的答案,從中選擇最好的一個。就像我們思考時一樣,我們可能會在給出答案之前反思答案。反思,我們可能會把一個問題分解成一步步的思維鏈。我們發(fā)明了許多不同的技術(shù),隨著我們應(yīng)用越來越多的計算,推理的表現(xiàn)越來越好。現(xiàn)在我們有了第二個縮放定律,推理縮放定律,不僅僅是生成下一個單詞,思考,反思,規(guī)劃。這兩個同時存在的比例定律將要求我們驅(qū)動計算超快的速度。每次我們交付新一代、新架構(gòu)時,我們都會將性能提高X倍,但我們也會將功率降低相同的X倍。我們將成本降低相同的X因子。因此,提高性能與降低成本完全相同。提高性能與降低能量完全相同。因此,隨著世界繼續(xù)吸收和擁抱人工智能,我們的使命是,我們有責(zé)任盡可能快地不斷提高性能。在此過程中,擴大人工智能的覆蓋范圍,提高其有效性,降低成本,降低功耗。這就是我們選擇一年周期的原因。不過,AI不單單是芯片的問題。這些AI系統(tǒng)是巨大的。這是Blackwell系統(tǒng),Blackwell一款GPU的名稱,但它也是整個系統(tǒng)的名稱。GPU本身就是非凡的。有兩種Blackwell芯片。每個Blackwell芯片都是世界上最大的芯片,擁有1040億個晶體管,由臺積電在最先進的4納米節(jié)點制造。這兩個Blackwell芯片通過每秒10TB的低能鏈路連接在一起。就在中間,那條線,那條縫,兩種芯片之間的數(shù)千個相互連接,每秒10TB。它由八個HBM3E存儲器連接,這些存儲器加在一起每秒運行8TB。這兩個GPU連接到另一個低能耗、非常節(jié)能的城市的CPU,每秒1TB。每個GPU都通過MVLink以每秒1.8TB的速度連接。那是每秒很多TB。原因是這個系統(tǒng)不能單獨工作。即使是世界上最先進的計算機也無法單獨為人工智能工作。有時它必須與成千上萬的其他計算機一起工作,像這樣的節(jié)點一起作為一臺計算機。有時他們必須分開工作,因為他們正在響應(yīng)不同的客戶、不同的查詢,有時是單獨的,有時是作為一個整體。為了使MV和GPU能夠一體工作,我們當(dāng)然有網(wǎng)絡(luò)2 CX Sevens將這個GPU與數(shù)千個其他GPU連接起來。但是我們?nèi)匀恍枰@個MV鏈接,讓我們能夠?qū)讉€GPU連接到我身后的一個機架上。一個機架連接到這個MV每秒5.8 TB。帶寬是世界上最高的帶寬網(wǎng)絡(luò)的35倍,這使我們能夠?qū)⑺羞@些GPU連接到這個MV鏈路交換機上。一個機架中有九個MV鏈接交換機。每個機架有72臺這樣的電腦。通過這個脊柱連接它。這是MV鏈接脊柱。這是電纜,銅,50磅的銅直接由這個令人難以置信的谷神星驅(qū)動,我們稱之為MV鏈接。它們以這種方式連接到計算機MV鏈接,這個開關(guān)將所有這些計算機連接在一起。因此,結(jié)果是72臺這些計算機連接為一個大型GPU,一個非常大的GPU。從軟件的角度來看,它只是一艘巨輪。這些架子,這些MB連接72個系統(tǒng),這個架子重3000磅。不可能登上這個舞臺。否則,我給你看,是3000磅120千瓦。那就是,我有我的朋友在這里,那是許多Nintendo Switch的力量。它不便攜,但非常強大。這就是黑墻系統(tǒng)。我們設(shè)計它,使它可以像這樣配置為一個Superpod,或者一個巨大的數(shù)據(jù)中心,有成千上萬個,希望有成千上萬個,它們通過交換機連接到它們。其中一些是量子無限帶交換機。如果您想擁有專用的AI工廠或Spectrum X,英偉達 Spectrum X革命性的以太網(wǎng)系統(tǒng),您可以將其集成到現(xiàn)有的以太網(wǎng)環(huán)境中。我們可以用這些建造AI超級計算機。我們可以將它們集成到企業(yè)數(shù)據(jù)中心、超大規(guī)模服務(wù)器或為邊緣配置它們。Blackwall系統(tǒng)不僅功能強大,而且適應(yīng)性極強,可以適應(yīng)世界計算基礎(chǔ)設(shè)施的每個角落。當(dāng)然,計算機,但最重要的是,如果沒有運行在其上的所有軟件,這臺計算機就根本無法操作。當(dāng)你看到這些電腦,所有的液體冷卻,所有的電線,你的大腦會爆炸。你如何編寫這樣一臺令人難以置信的計算機?這就是英偉達軟件堆棧的地方,這就是我們在Cuda Nickel的所有努力,我們所有的Megatron核心,我們創(chuàng)建的所有軟件,Tensor,RTLM,Triton,我們多年來創(chuàng)建的所有軟件集成到系統(tǒng)中,使每個人都有可能在世界各地部署AI超級計算機。當(dāng)然,最重要的是,我們有AI軟件,可以讓人們輕松構(gòu)建AI。那么什么是AI?我們用很多不同的方式談?wù)揂I,但我認(rèn)為有兩種類型的人工智能會非常受歡迎。我認(rèn)為有兩個模型非常有幫助。這對我很有幫助。第一,數(shù)字AI工作者。這些AI工人可以理解,他們可以計劃,他們可以采取行動。有時,數(shù)字AI工作者被要求執(zhí)行營銷活動,支持客戶,制定制造供應(yīng)鏈計劃,優(yōu)化芯片,幫助我們編寫軟件,也許是研究助理,藥物發(fā)現(xiàn)行業(yè)的實驗室助理。也許這個代理人,你知道,是CEO的導(dǎo)師。也許我們所有的員工都有一個導(dǎo)師,AI,這些數(shù)字AI工作者,我們稱之為AI代理人,本質(zhì)上就像數(shù)字員工。就像數(shù)字員工一樣,你必須培訓(xùn)他們,你必須創(chuàng)建數(shù)據(jù)來歡迎他們加入你的公司,教他們了解你的公司。你訓(xùn)練他們的特定技能,取決于你希望他們具備的功能。你在完成培訓(xùn)后評估他們,以確保他們學(xué)到了應(yīng)該學(xué)的東西。你保護他們,確保他們完成他們被要求做的工作,而不是他們沒有被要求做的工作。當(dāng)然,你操作它們。你部署他們,從Blackwell向他們提供能量,從Blackwell向他們提供AI令牌,他們與其他代理互動,作為一個團隊解決問題。你會看到各種各樣的代理,我們創(chuàng)造了一些東西,讓生態(tài)系統(tǒng)更容易為公司建立AI代理。英偉達不從事服務(wù)業(yè)務(wù),我們不創(chuàng)造,不提供最終產(chǎn)品,也不提供解決方案。但我們確實提供了支持技術(shù),使生態(tài)系統(tǒng)能夠創(chuàng)造AI,提供AI,不斷改進AI。AIAgent生命周期庫,生命周期平臺稱為Nemo。Nemo有我提到的每個階段的庫,從數(shù)據(jù)管理到訓(xùn)練到微調(diào)到合成數(shù)據(jù)生成到評估再到防護欄桿。在那里,這些庫被集成到世界各地的工作流程和框架中。我們正在與AI初創(chuàng)企業(yè)、埃森哲和德勤等服務(wù)提供商以及世界各地的公司合作,將這一點帶給所有大公司。我們還與Service Now等Isv合作,以便他們可以創(chuàng)建使用Service Now的代理。今天,您通過許可平臺使用服務(wù),您的員工與服務(wù)平臺交互以獲得幫助。在未來。服務(wù)現(xiàn)在還將提供大量你可以租用的AI代理,本質(zhì)上是你可以租用的數(shù)字員工來幫你解決問題。我們現(xiàn)在正在使用服務(wù)。我們正在與SAP、Cadence、ANSYS、世界各地的公司、世界各地的雪花公司合作,這樣我們都可以構(gòu)建有助于您提高公司生產(chǎn)力的代理。現(xiàn)在這些代理人能夠理解原因,計劃,采取行動。這些代理人,我們的AI模型的集合或系統(tǒng),不僅僅是一個AI模型,而是一個AI模型的系統(tǒng)。尼莫幫助我們建造這些。我們還創(chuàng)建了預(yù)訓(xùn)練的AI模型,我們將其打包在所謂的Nim中。所以這些NIM是微服務(wù)。它們基本上是AI舊時代打包的,軟件打包在一個盒子里,它們帶有CDROM。今天,AI被打包在一個微服務(wù)中,軟件內(nèi)部是智能的。您可以與軟件交談,您可以與軟件交談,因為它理解您的意思,并且您可以將軟件與其他軟件連接起來。您可以將此AI與其他AI連接在一起,您可以創(chuàng)建一個代理,一個AI代理。所以這是第一件事。讓我給你舉一個這些代理的例子。代理AI正在使用復(fù)雜的推理和迭代規(guī)劃來解決復(fù)雜的多步驟問題,從而改變每個企業(yè)。AI代理通過即時洞察幫助營銷活動更快地上線,幫助優(yōu)化供應(yīng)鏈運營,節(jié)省數(shù)億美元的成本,并通過幫助分析師對漏洞進行分類,將軟件安全流程從幾天縮短到幾秒鐘。使AI如此強大的是它將數(shù)據(jù)轉(zhuǎn)化為知識,將知識轉(zhuǎn)化為行動的能力。本例中的數(shù)字代理可以通過一組信息密集的研究論文向個人提供見解。它是使用英偉達AI藍圖構(gòu)建的。這些參考工作流包含英偉達加速庫、SDK和Nim微服務(wù),可幫助您快速構(gòu)建和部署AI應(yīng)用。多模態(tài)PDF數(shù)據(jù)提取藍圖有助于建立數(shù)據(jù)攝取管道,而數(shù)字人藍圖提供流暢的類人交互。嗨,我是James,一個數(shù)字代理攝取PDF研究論文,包括圖像、圖表和表格等復(fù)雜數(shù)據(jù),并通過交互式數(shù)字人機界面生成高級摘要。天氣預(yù)報取得了令人興奮的突破。新生成模型cordiff的開發(fā)是準(zhǔn)確預(yù)測天氣模式的重要一步。通過將單位回歸模型與擴散模型相結(jié)合,凝聚法院。James還可以根據(jù)論文回答問題或生成新內(nèi)容。英偉達AI使企業(yè)能夠自動化流程、利用實時洞察力并提高工作流程效率。
AI代理商,3部分,尼茂名稱和藍圖。這些都是參考資料。它們以源代碼形式提供給您,以便您可以隨心所欲地使用它并構(gòu)建您的AI代理勞動力。這些特工沒有一個能100%完成任何人的任務(wù),任何人的工作。沒有一個代理可以做到100%。但是,所有代理都可以為您的50%工作做工作。這是偉大的成就。而不是想著AI代替50%人的工作。你應(yīng)該認(rèn)為AI會為100%的人做50%的工作。通過這樣想,你意識到AI將有助于提高公司的生產(chǎn)力,提高你的生產(chǎn)力。你知道,人們問我,你知道,AI會接受你的工作嗎?我總是說,因為這是真的,AI不會接受你的工作。別人用的AI會搶走你的工作。所以一定要盡快使用AI激活。第一個是數(shù)字AI代理,數(shù)字,這些是數(shù)字人工智能。第二個應(yīng)用是物理AI。同樣的基本技術(shù)現(xiàn)在被體現(xiàn)在一個機械系統(tǒng)中。當(dāng)然,機器人技術(shù)將成為世界上最重要的行業(yè)之一。到目前為止,機器人技術(shù)一直受到限制,原因很清楚。事實上,在日本,世界上50%的制造機器人是制造的。川崎、發(fā)尼克、安川、三菱,四家制造了世界一半機器人系統(tǒng)的領(lǐng)導(dǎo)者。就像機器人一樣,推動了制造業(yè)的生產(chǎn)力,并且很難擴展。機器人行業(yè)長期以來基本持平,原因是因為它過于具體,不夠靈活,無法適用于不同的場景、不同的條件和不同的工作。我們需要更靈活的AI,它可以自己適應(yīng)和學(xué)習(xí)。請注意我們到目前為止描述的技術(shù),代理AI,無論你是誰,你都應(yīng)該能夠與代理進行交互。它可以給你回應(yīng)。當(dāng)然,有時反應(yīng)不如你所能產(chǎn)生的反應(yīng)好,但事實上,許多反應(yīng)甚至比我們所能產(chǎn)生的還要好。因此,我們現(xiàn)在可以將這種通用AI技術(shù)應(yīng)用到具身AI或物理AI或被稱為機器人的世界中。為了實現(xiàn)機器人技術(shù),我們需要建造三臺計算機。第一臺計算機訓(xùn)練AI,就像我們之前給你們舉的所有例子一樣。第一臺是模擬AI。你需要給AI一個練習(xí)的地方,一個學(xué)習(xí)的地方,一個撤退的地方,接收它可以學(xué)習(xí)的合成數(shù)據(jù)。我們稱之為omniverse是我們的虛擬世界數(shù)字孿生庫套件,可用于創(chuàng)建物理AIS機器人。全能宇宙。然后經(jīng)過驗證、訓(xùn)練、評估,然后您可以將模型放入物理機器人中。在其中,我們有專為機器人技術(shù)設(shè)計的處理器。我們叫它Jetson。Thor是專為人類機器人設(shè)計的機器人處理器。為了實現(xiàn)機器人技術(shù),我們需要建造三臺計算機。第一臺計算機訓(xùn)練AI,就像我們之前給你們舉的所有例子一樣。第一臺是模擬AI。你需要給AI一個練習(xí)的地方,一個學(xué)習(xí)的地方,一個撤退的地方,接收它可以學(xué)習(xí)的合成數(shù)據(jù)。這個循環(huán)一直持續(xù)下去。正如有一個NemoAI代理生命周期平臺一樣,Omniverse平臺,它使您能夠創(chuàng)建AI。最終你想要的是AI。最終,你所期望的 AI,將會看到一個世界,它能識別視頻、周圍的環(huán)境以及你的需求,并生成相應(yīng)的動作。你告訴它你想要什么,這個AI會產(chǎn)生關(guān)節(jié)運動。就像我們獲取文本一樣,我們可以生成視頻,我們可以獲取文本并生成化學(xué)物質(zhì)。對于藥物,我們可以獲取文本并生成關(guān)節(jié)運動。好的,這個概念非常類似于生成AI。這就是為什么我們認(rèn)為現(xiàn)在我們在Omniverse和我們建造的所有計算機之間擁有必要的技術(shù),這三臺計算機,以及最新的生成AI技術(shù),人類或機器人技術(shù)的時代已經(jīng)到來。現(xiàn)在為什么類人機器人技術(shù)如此困難?好吧,顯然,為人類機器人開發(fā)的軟件非常努力。然而,好處是不可思議的。只有兩個機器人系統(tǒng)可以輕松部署到世界上。第一個機器人是自動駕駛汽車,原因是我們創(chuàng)造了適應(yīng)汽車的世界。第二個是人類或機器人。這兩個機器人系統(tǒng)可以部署在世界任何地方的棕色田野中,因為我們?yōu)槲覀儎?chuàng)造了世界。這是一項非常困難的技術(shù),時機已經(jīng)成熟,但影響可能是巨大的。上周在機器人學(xué)習(xí)會議上,我們宣布了一個非常重要的新框架。它被稱為艾薩克實驗室,是一個強化學(xué)習(xí)的虛擬模擬系統(tǒng),允許你教人類或機器人如何成為人類或機器人。最重要的是,我們創(chuàng)建了幾個工作流程。第一個工作流程是Groot Mimic Group。Mimic是一個框架,用于向機器人演示如何執(zhí)行任務(wù)。您使用人類演示,然后使用域隨機化模擬該環(huán)境,生成數(shù)百個其他示例,例如您的演示,以便機器人可以學(xué)習(xí)泛化。否則,它只能使用mimic執(zhí)行非常特定的任務(wù),我們可以泛化它的學(xué)習(xí)。第二個是分組Gen組建。使用Omniverse中的生成AI技術(shù),我們可以創(chuàng)建大量的I隨機域環(huán)境和我們希望機器人執(zhí)行的動作的隨機示例。所以我們正在生成一大堆測試、評估系統(tǒng)、評估場景,機器人可以嘗試執(zhí)行和改進自己,學(xué)習(xí)如何成為一個好的機器人。第三個是群體控制,是一個模型蒸餾框架,它允許我們將我們學(xué)到的所有技能提煉成一個統(tǒng)一的模型,允許機器人執(zhí)行運動學(xué)技能。機器人不僅將是自主的,而且請記住,未來的工廠也將是機器人的。因此,這些工廠將成為機器人工廠,它們正在編排機器人,構(gòu)建機器人機械系統(tǒng)。讓我給你看。當(dāng)然。物理AI體現(xiàn)了機器人,如安全導(dǎo)航現(xiàn)實世界的自動駕駛汽車、執(zhí)行復(fù)雜工業(yè)任務(wù)的機械手和與US協(xié)同工作的人形機器人。工廠將由物理AI體現(xiàn),能夠監(jiān)控和調(diào)整其操作或與我們交談。英偉達制造了三臺計算機,使開發(fā)人員能夠創(chuàng)建物理AI。模型首先在DGX上進行訓(xùn)練,然后使用強化學(xué)習(xí)和Omniverse中的物理反饋對AI進行微調(diào)和測試。訓(xùn)練有素的AI在英偉達杰森AGX機器人計算機上運行。英偉達 Omniverse是一個基于物理的操作系統(tǒng),用于物理AI模擬。機器人在艾薩克實驗室學(xué)習(xí)和微調(diào)他們的技能。基于Omniverse構(gòu)建的機器人健身房,具有Group Gym等小組工作流程,可生成多樣化的學(xué)習(xí)環(huán)境和布局。Group Mimic基于少量真實世界捕獲和神經(jīng)全身控制的組控制生成大規(guī)模合成運動數(shù)據(jù)集。這只是一個機器人。未來的工廠將協(xié)調(diào)機器人團隊,并通過數(shù)千個傳感器監(jiān)控整個操作。對于工廠數(shù)字雙胞胎,他們使用名為Mega的全能藍圖。有了Mega,工廠的數(shù)字孿生體中充滿了虛擬機器人,它們的AI模擬了機器人的大腦。機器人通過感知環(huán)境、推理、規(guī)劃下一個動作并最終將其轉(zhuǎn)換為動作來執(zhí)行任務(wù)。Omniverse中的World Simulator在環(huán)境中模擬這些動作,機器人大腦通過Omniverse傳感器模擬感知結(jié)果。根據(jù)傳感器模擬,機器人大腦決定下一步行動,循環(huán)繼續(xù),而Mega精確跟蹤工廠中所有東西的狀態(tài)和位置。數(shù)字孿生。這種軟件在環(huán)測試將軟件定義的流程帶到物理空間和實施例中,讓工業(yè)企業(yè)在部署到物理世界之前模擬和驗證全方位數(shù)字孿生的變化,從而節(jié)省了巨大的風(fēng)險和成本。物理AI時代已經(jīng)到來,改變著世界的重工業(yè)和機器人技術(shù)。難以置信的時代。所以我們有兩個機器人系統(tǒng),一個是數(shù)字化的,我們稱之為AI代理,你可以在辦公室里使用它們與你的員工合作。第二個是物理AI系統(tǒng)機器人。這些物理AI將是公司構(gòu)建的產(chǎn)品。因此,公司將使用AI來提高員工的生產(chǎn)力,我們將使用AI來推動和授權(quán)我們銷售的產(chǎn)品。車企未來會有兩個工廠,一個工廠造汽車,一個工廠生產(chǎn)汽車?yán)镞\行的AI。好吧,這就是機器人革命。世界各地都有如此多的活動。我無法想象還有哪個國家比日本更能引領(lǐng)機器人AI革命。原因是,如你所知,這個國家喜歡機器人。你喜歡機器人。你創(chuàng)造了一些世界上最好的機器人。這些是我們一起長大的機器人。這些是我們一生都喜歡的機器人。我甚至沒有展示我最喜歡的一些。Majin Gazi, 我希望日本能夠利用人工智能的最新突破,并將其與您的專業(yè)知識和大型電子學(xué)相結(jié)合。世界上沒有哪個國家比日本擁有比超級電子一體化更高的技能。這是什么,這是一個你必須抓住的非凡機會。所以我希望我們能共同努力,讓這個夢想成為可能。英偉達在日本的AI做得非常好。我們這里有很多合作伙伴。我們有正在構(gòu)建大型語言模型的合作伙伴。東京科學(xué)技術(shù)研究所,樂天。自助銀行,直覺,NTT,富士通NEC,名古屋大學(xué),Kota Bar Technologies。如果你去右上角,我們還有AI云,還有軟銀、櫻花互聯(lián)網(wǎng)、轉(zhuǎn)基因互聯(lián)網(wǎng)集團。嗨,Rezzo KDDI Rutilia,在這里建造AI云,讓生態(tài)系統(tǒng)在日本蓬勃發(fā)展。因此,許多機器人公司開始了解AI現(xiàn)在提供的利用這一機會的能力。安川、豐田、川崎、Repute、Reputa、醫(yī)學(xué)成像系統(tǒng)、佳能、富士膠片、奧林巴斯,都在利用AI。因為在未來,這些醫(yī)療器械將更加自主。這幾乎就像是醫(yī)療器械內(nèi)部的護士AI,幫助護士指導(dǎo)診斷。藥物發(fā)現(xiàn)行業(yè)有這么多不同的方式,AI有這么多不同的方式被使用。所以我對這里的進步感到高興,我們希望更快地利用AI革命。嗯,這個行業(yè)正在發(fā)生變化,正如我之前所說,計算機行業(yè)已經(jīng)從運行在CPU上的編碼根本性地轉(zhuǎn)變?yōu)楝F(xiàn)在運行在GPU上的機器學(xué)習(xí)。我們從一個生產(chǎn)軟件的行業(yè),現(xiàn)在已經(jīng)成為一個制造人工智能的行業(yè)。人工智能是在工廠生產(chǎn)的。他們正在運行247。當(dāng)您許可軟件時,您將其安裝到您的計算機中。該軟件的制造、分發(fā)已完成。然而,智能永遠不完整。你正在與所有的人工智能互動,不管它們是AI代理還是AI機器人。Token,智能以Token表示,Token是智能的單位。這是一個數(shù)字。這些數(shù)字被構(gòu)成,這些符號以智能和語言的方式構(gòu)成。智能和方向盤、自動駕駛汽車的智能、用于表達人類機器人的智能電機、蛋白質(zhì)和化學(xué)物質(zhì)的智能以及藥物發(fā)現(xiàn)。所有這些Token都是在這些工廠生產(chǎn)的。這些基礎(chǔ)設(shè)施,這些工廠以前從未存在過。這是一個全新的事物,這就是為什么我們在世界各地看到如此多的發(fā)展。我們第一次有了一個新的行業(yè),一個新的工廠,生產(chǎn)我們稱之為人工智能的全新事物。這些工廠將由公司建造。它們將被建造,每個公司都將成為AI制造商。當(dāng)然,任何公司都不能不制造、生產(chǎn)人工智能。任何公司怎么能負(fù)擔(dān)得起不生產(chǎn)智能產(chǎn)品呢?一個國家怎么能不生產(chǎn)情報呢?你不必生產(chǎn)芯片。你不必生產(chǎn)軟件,但你必須生產(chǎn)智能。這是至關(guān)重要的。這是你的核心。這是我們的核心。所以我們有了新工業(yè)AI工廠,這就是我稱之為新工業(yè)革命的原因。上一次發(fā)生這種情況是300年前,當(dāng)時電力被發(fā)現(xiàn),電力的產(chǎn)生和分配,一種新型工廠被創(chuàng)造出來。那個新工廠不是發(fā)電廠。然后一個新的行業(yè)被創(chuàng)造出來,叫做能源。幾百年前,還沒有能源工業(yè)。它發(fā)生在工業(yè)革命期間。現(xiàn)在我們有了一個以前從未存在過的新行業(yè)——人工智能位于計算機行業(yè)的頂端,但它被每個行業(yè)利用和創(chuàng)造。你必須創(chuàng)建自己的AI。制藥業(yè)創(chuàng)造了你自己的AI。汽車行業(yè)創(chuàng)造你自己的AI。機器人行業(yè)創(chuàng)造你自己的AI。每個行業(yè)、每個公司、每個國家都必須生產(chǎn)自己的AI,這是一場新的工業(yè)革命。我今天有一個非常重要的宣布。我們宣布,我們將與軟銀合作,為日本帶來、建設(shè)和AI基礎(chǔ)設(shè)施。我們將一起建造日本最大的AI工廠,英偉達,它將由英偉達DGX建造。當(dāng)它建成時,它將有25AIx的翻牌。請記住,最近世界上最大的超級計算機是1倍的翻牌。這是一個AI工廠生產(chǎn)AI的25倍翻牌。但是為了分發(fā)AI,軟銀將整合英偉達的阿里爾,這是我之前提到的在Cuda運行5G無線電的引擎。通過這樣做,我們可以統(tǒng)一和組合無線電計算機、基帶和5G運行的AI計算機。我們現(xiàn)在可以將電信網(wǎng)絡(luò)發(fā)展和改造成AIRAM。它將能夠承載語音、數(shù)據(jù)、視頻,但在未來,我們還將承載AI,一種新型的信息智能。這將分布在軟銀在日本的20萬個站點,為5500萬客戶提供服務(wù)。AI工廠和區(qū)生產(chǎn)AIAI分銷網(wǎng)絡(luò)分銷AI跑分銷AI。我們還將在其上建立一種新型商店,一種AI商店。以便軟銀創(chuàng)建的人工智能和第三方創(chuàng)建的AIS可以提供給5500萬客戶。因此,我們將在英偉達AI企業(yè)之上構(gòu)建這些應(yīng)用程序,我之前提到過,向您展示過。還會有一家新店,讓每個人都能AI。這只是一個宏偉的發(fā)展。結(jié)果將是一個橫跨日本的AI電網(wǎng)。現(xiàn)在這個AI電網(wǎng)將成為基礎(chǔ)設(shè)施的一部分,也是最重要的基礎(chǔ)設(shè)施之一。記住,你需要工廠和道路作為基礎(chǔ)設(shè)施的一部分,這樣你才能制造和分銷商品?;A(chǔ)設(shè)施需要能源和通信部分。每次你為基礎(chǔ)設(shè)施創(chuàng)造了一些全新的東西,新的產(chǎn)業(yè)和新的公司就會被創(chuàng)造出來,新的經(jīng)濟機會,新的繁榮。如果沒有道路和工廠,我們怎么會有工業(yè)革命?如果沒有能源和通信,我們怎么會有IT革命?這些新基礎(chǔ)設(shè)施中的每一個都開辟了新的機會。因此,與軟銀合作在日本實現(xiàn)這一目標(biāo)對我來說非常令人興奮。米婭·卡瓦桑的團隊,他們應(yīng)該在觀眾席上。與您合作是不可思議的,我們非常高興能夠這樣做。這完全是革命性的。這是第一次將電信網(wǎng)絡(luò)、通信網(wǎng)絡(luò)轉(zhuǎn)變?yōu)锳I網(wǎng)絡(luò)。好的,讓我向你展示你能做什么。你可以做一些驚人的事情。例如,我站在一個基站下面,一個無線電塔,汽車有視頻,汽車的視頻被流式傳輸?shù)綗o線電塔,無線電塔有AI。這個無線電塔有視頻智能。它具有視覺智能。所以它能看到汽車看到的東西,也能理解汽車看到的東西。那個AI模型可能放在車?yán)锖苤兀旁诨纠锊粫?。使用該流到基站的視頻,它可以理解汽車和周圍發(fā)生的任何事情。好的,這只是在邊緣使用AI來保護人們安全的一個例子,也許這就是空中交通管制,本質(zhì)上是為了自動駕駛汽車。應(yīng)用是無窮無盡的。我們也可以用這個基本概念把整個工廠變成AI。這邊是一個工廠,有很多攝像頭。攝像機被流式傳輸?shù)交尽A钊梭@奇的是,由于AI中所有的相機和AI模型,現(xiàn)在這家工廠成了AI。你可以和工廠談?wù)?,問問工廠發(fā)生了什么。問工廠,有沒有發(fā)生事故?有什么異常發(fā)生嗎?今天有人受傷嗎?給你一份每日報告。你只需要問工廠,因為工廠現(xiàn)在已經(jīng)變成了一個AI。AI模型不必在工廠運行。這種AI模式可以在軟銀廣播中運行。好的,這是另一個例子。但是無數(shù)的例子,你基本上可以把每一個物理對象變成AI,體育場、道路、工廠、倉庫、辦公室、建筑......它們都可以變成AI,你可以和它說話,就像你可以和GPT聊天一樣。好的,這是通道的狀況,有任何阻塞或溢出嗎?你只是在和工廠說話。工廠觀察一切,理解它所看到的,它可以推理,它可以計劃行動,或者只是和你說話。這里說,不,倉庫的過道沒有任何障礙物、溢出物或危險。視頻中的過道條件看起來井然有序、干凈,沒有障礙物或危險。好的,你正在和工廠交談。太不可思議了。你在和倉庫說話,你在和汽車說話,因為所有這些現(xiàn)在都變得智能了。
?星標(biāo)華爾街見聞,好內(nèi)容不錯過?
本文不構(gòu)成個人投資建議,不代表平臺觀點,市場有風(fēng)險,投資需謹(jǐn)慎,請獨立判斷和決策。