來源 | APPSO

今天凌晨，在美國丹佛舉行的第 51 屆SIGGRAPH圖形大會上，英偉達創始人兼 CEO 黃仁勛和 meta 創始人兼 CEO 馬克·扎克伯格舉行爐邊談話。

他們討論了 AI、開源大模型、仿真模擬的未來、下一代計算平臺，以及智能眼鏡及其與 AI 的集成等眾多熱議話題。

在現場，扎克伯格與黃仁勛也上演了一場「球衣交換」。 扎克伯格特地訂購了一件黑色毛領皮大衣，而黃仁勛也將自己標志性的皮外套與扎克伯格交換。

扎克伯格調侃道，「你的這件衣服顯然更值錢，因為它是被穿過的。」

部分金句如下：

黃仁勛：

我認為很少有人意識到，推薦系統是世界上設計出的最大計算系統之一。

我認為 Lama 2 可能是去年 AI 領域最重大的事件。

當我們面對一個任務或問題時，我們通常會考慮多個選項，甚至可能構建一個決策樹來考慮每種可能的選擇所帶來的不同結果。這就是我們在進行規劃的過程。未來的 AI 也將執行類似的操作。

扎克伯格：

meta AI 的概念是擁有一個能夠幫助處理各種任務的 AI 助手

如果你回顧過去，蘋果在封閉系統方面有所作為。但微軟，雖然它不是一個完全開放的公司，但與蘋果相比，Windows 運行在有不同的 OEM 和不同的軟件、硬件上，形成了一個更加開放的生態系統。

我們確實會做一些封閉源代碼的項目。我們發布的并不都是開源的。但我認為，對于整個行業正在構建的計算平臺，尤其是軟件開源，這將為整個行業帶來巨大的價值。

至少我不認為會有一個主要的 AI 代理，每個人都在同一水平上與之交流。我不認為會有一個模型被每個人使用。

我認為智能課程和混合現實頭戴設備都將存在于我們的世界中。我認為智能課程將類似于移動手機，是下一個計算平臺的一種始終在線的版本。

我們離擁有全息眼鏡還有一段時間。不過，我認為在一副時尚的、更厚框架的眼鏡中實現這一點并不遙遠。

以下是黃仁勛和扎克伯格的對話實錄（有刪減）：

黃仁勛：這里是SIGGRAPH。你知道，這里聚集了眾多博士。

SIGGRAPH最棒的地方在于，它是計算機圖形學、圖像處理、AI 和機器人技術融合的盛會。多年來，許多公司在這里展示了他們的驚人成就，包括迪士尼、皮克斯、Adobe 和 Epic Games。

當然，英偉達今年在這里也取得了顯著成果。我們在 AI 和模擬的交叉領域推出了 20 篇論文。

因此，我們正在使用 AI 進行幫助模擬，規模更大，速度更快。AI，我們正在使用仿真來創建用于合成數據生成的仿真環境。

這兩個領域真的融合在一起了，我為我們在 meta 所做的工作感到非常自豪。你們做了驚人的 AI 工作。

請記住， 我們都受益于 meta 開發的 PyTorch，它在計算機視覺、語言模型以及實時翻譯等領域取得了開創性的成果。

我想問你的第一個問題是，你如何看待 meta 目前在生成式 AI 方面的進展，以及你是如何利用這些技術來優化運營或開發新能力的？

推薦系統是世界上設計出的最大計算系統之一

扎克伯格：是的，這里有很多內容需要探討。首先，我真的很高興能來到這里。你知道，meta 做了很多工作，并且多年來一直參與 SIGGRAPH 會議。

與你們這些資深參與者相比，我們還只是初來乍到，但我想那是在 2018 年，你那次著名的演講，對吧？我只是想說，謝謝你們歡迎我來到你們的地盤。

我認為是在 2018 年，我們展示了我們 VR 和混合現實頭戴設備的一些早期手部追蹤技術。

我想我們已經詳細討論了我們在高保真化身技術方面取得的進步，這些化身可以從消費者的頭戴設備中驅動，我們正逐步實現這一目標，對此我們感到非常興奮。

此外，我們在顯示系統方面也做了大量工作。我們正在進行的一些未來原型和研究旨在使混合現實頭戴設備變得更加輕薄。這需要使用先進的光學堆疊技術和集成顯示系統。

我們通常首先在這里展示我們的最新成果，所以今年能來參加感到非常興奮，我們不僅討論了反向工程的內容，還涉及了所有與 AI 相關的領域。

正如你所說，我們從 FAIR，即 AI 研究中心開始。那時還是 Facebook，現在是 meta，在我們成立 Reality Labs 之前，我們已經在這個領域耕耘了一段時間。

生成式 AI 技術正在引發一場有趣的革命。我認為它將最終以有趣的方式改變我們所做的每一個產品。我的意思是，我親歷了這一切的發展。

你可以看看我們已有的主要產品，比如 Facebook 和 Instagram 的動態和推薦系統。我們一直在不斷地發展這些產品，它們已經從最初的與朋友聯系功能發展到了更多。

排名功能一直非常重要，因為即使你只是關注朋友，如果有人分享了重要事件，比如你的表弟生了孩子，你當然希望這個消息能出現在動態的最上方。如果我們沒有把它突出顯示，而是讓它埋沒在動態中，你可能會對我們感到非常不滿。

排名功能一直很重要，但在過去幾年中，它已經發展到了一個新的階段，越來越多的內容變成了各種公共內容。

推薦系統因此變得至關重要，因為現在面對的不再是幾百或幾千個來自朋友的潛在帖子，而是數百萬個內容片段，這構成了一個極具挑戰性的推薦問題。

隨著生成式 AI 技術的進步，我相信我們很快就會進入一個新的階段，屆時 Instagram 上推薦給你的大部分內容將不僅僅是基于你關注的人，而是來自世界各地與你的興趣相匹配的內容。未來，大量內容也將通過這些工具被創造出來。其中一部分將是由創作者使用這些工具創作的新內容。

我認為，其中一部分內容最終將根據你的需求即時生成，或者是通過整合全球各地的不同資源來創造的。這正是我們核心業務將如何演變的一個例證。實際上，這種演變已經持續了 20 年。

黃仁勛 ：然而，我認為很少有人意識到， 推薦系統是世界上設計出的最大計算系統之一。

扎克伯格 ：確實，這是一個全新的方向，不是嗎？它并不是人們熱議的生成式 AI 領域，但我認為它就像是一種架構，所有的轉換都是架構。這就像是在構建越來越通用的模型，將非結構化數據轉化為有用的特征。

確實，推動質量提升的一個關鍵因素是，過去我們為每種內容類型都設計了不同的模型。

例如，我們曾有一個模型專門用于短視頻的排名和推薦，另一個模型則用于長視頻。通過產品開發，我們使得系統能夠在線顯示任何類型的內容。

隨著你創建出能夠覆蓋所有內容的通用推薦模型，這些模型會變得越來越精準。我認為，這部分是因為內容的流動性，就像經濟學中的概念，你從一個更廣泛的內容池中提取，這樣就避免了從不同池子中提取內容時可能出現的效率低下問題。

確實，隨著模型變得越來越強大和通用，它們的性能也會不斷提升。

我夢想著有一天，Facebook 或 Instagram 幾乎可以由一個單一的 AI 模型驅動，這個模型能夠整合不同的內容類型和系統，這些系統在不同的時間尺度上有著各自的目標。有些內容是向你展示今天你可能感興趣的有趣內容，而有些則是長期幫助你擴展社交網絡，你可能認識的人或你可能想關注的賬戶。

黃仁勛：多模態模型通常在識別模式和微弱信號方面表現更出色。人們總是對 AI 在你公司中的深度應用感到好奇，畢竟你們一直在構建 GPU 基礎設施，并且運行這些大型推薦系統已經有一段時間了。

扎克伯格：實際上，你在采用 GPU 技術方面確實有些滯后。

黃仁勛：是的，我幾乎是刻意想要表現得友好一些。

扎克伯格：我知道，可能表現得太過友好了。

黃仁勛：我確實試圖表現得友好，你知道嗎，我在上臺前在后臺準備時。

扎克伯格：你之前在談論關于承認錯誤的事情，對吧？

黃仁勛：你不必無緣無故地自己提出來。

扎克伯格：我想這個話題已經被充分討論過了。感覺就像我剛剛被狠狠地批評了一頓。

黃仁勛：現在，生成式 AI 真正酷的地方在于，當我使用 WhatsApp 時，我感覺我正在與它合作。我喜歡想象，當我打字時，它正在實時生成圖像。我回頭修改我的文字，它就會生成不同的圖像，你知道嗎？

所以那個中國老人在日落時，一邊品著威士忌，一邊被三只狗圍繞著，一只是金毛獵犬，一只是金毛混血犬，還有一只是伯恩山犬。

它生成了非常吸引人的一張圖片。是的，我們已經做到了，那是我每個月的樣子。確實，這更好了。現在你實際上可以在那里上傳我的照片。這是真的我嗎？

扎克伯格：是，這聽起來像是上周的事。

黃仁勛：是的，我對此非常興奮。

扎克伯格：想象一下，我花了很多時間與我的女兒們一起玩耍，想象她們變成美人魚等角色，過去的一周真是樂趣無窮。是的，這就是生成式 AI 的另一面。一方面，我認為它將為我們的工作流程和產品帶來一次重大升級。但另一方面，它還將催生出許多全新的創意。

因此，meta AI 的概念是擁有一個能夠幫助處理各種任務的 AI 助手，這將是極具創造性的，正如你所描述的那樣。但重要的是，它們非常通用，因此不必局限于特定用途。隨著時間的推移，它將能夠回答任何問題。

當我們從 Llama 3 類模型過渡到 Llama 4 類模型及其更高級版本時，這種體驗將不再局限于簡單的聊天機器人模式。不再是你給出提示，它就回應，然后你再給出提示，它再回應。

相反，它將迅速發展，能夠根據你的意圖獨立工作，跨越多個時間框架。我的意思是，它應該從一開始就確認你已經向它表達了你的意圖。

但我的意思是，我認為有些東西最終會加速計算工作，需要幾周或幾個月的時間，比如，當世界上發生了一些重大事件時。我認為這將具有非常強大的力量。

AI Studio將幫助每個創作者構建一個 AI 版本的自己

黃仁勛：因此， 今天的 AI 主要功能是接收輸入并做出回應。但當我們面對一個任務或問題時，我們通常會考慮多個選項，甚至可能構建一個決策樹來考慮每種可能的選擇所帶來的不同結果。這就是我們在進行規劃的過程。未來的 AI 也將執行類似的操作。

當我聽到你闡述關于創作者 AI 的愿景時，我感到非常興奮。這個想法確實令人振奮。請向大家介紹一下創作者 AI 以及這個 AI 工作室，它將如何幫助大家實現這一目標。

扎克伯格：確實，我們之前提到過，但今天我們正在將這個項目擴展到更廣泛的范圍。我們的愿景是，不會只有一個 AI 模型。有些公司似乎在構建一個中央代理，但我們會提供一個 meta AI 助手供大家使用。更重要的是，我們希望賦予所有使用我們產品的人創建自己代理的能力。

因此，無論是平臺上的眾多創作者，還是數以億計的小企業，我們最終希望能夠整合所有內容，并迅速創建一個業務代理，以便與你的客戶互動，進行銷售和客戶支持等。我們現在開始推廣的項目被稱為 AI Studio。

基本上，AI Studio 是一套工具，最終將幫助每個創作者構建一個 AI 版本的自己，作為社區可以與之互動的代理或助手。這里有一個基本問題：一天的時間有限。

如果你是一名創作者，你希望與社區有更多互動，但時間是個限制。同樣，你的社區也希望與你互動，但這同樣困難，因為時間有限。

因此，允許人們創建這些 AI 代理，實際上是一種替代方案。這些 AI 代理雖然不是創作者本人，但你可以訓練它們以你想要的方式代表你，就像創作藝術作品或發布內容一樣具有創造性。

顯然，這些代理不是直接與創作者本人互動，但我認為這是創作者在社交平臺上發布內容后，以另一種有趣的方式與觀眾互動的一種方式。

同樣，我相信人們將根據自己的需求和偏好創建各種用途的 AI 代理。有些可能是為了完成特定任務而設計的定制化實用工具，他們希望對其進行微調。還有些代理可能是為了娛樂目的而創建的。

有些人們創造的內容非常有趣，甚至有些荒謬，以各種不同的方式展現出來，或者對某些事情持有一種幽默的態度。這些內容可能不會被整合進 meta AI 作為一個助手功能，但我認為人們對于看到和與這些內容互動非常感興趣。另一個有趣的應用場景是，我們看到人們開始利用這些代理來獲取幫助。

讓我有些意外的是， meta AI 目前一個非常受歡迎的應用場景是人們用它來模擬即將面臨的復雜社交情境。

例如，在職場中：我想問我的經理，如何才能獲得晉升或加薪？或者我與朋友發生了爭執，再或者我和女朋友之間出現了棘手的問題。這樣的對話該如何展開？

這個平臺提供了一個完全無壓力的環境，你可以在這里模擬不同的對話場景，觀察對話的進展，并獲得有益的反饋。

然而，許多人并不滿足于只與單一類型的 AI 代理互動，無論是 meta AI、ChatGPT 還是其他流行的選擇。他們渴望創造屬于自己的內容。這就是我們 AI Studio 的發展方向。

這一切都是我們更大愿景的一部分，我們認為，人們不應該只與一個大型 AI 進行互動。我們相信，如果世界上存在更多這樣多樣化的內容，世界將變得更加美好和有趣。

黃仁勛：我認為這非常酷，如果你是一名藝術家并且擁有自己的風格，你可以將這種風格和你所有的作品集，微調成 AI 模型。現在，你可以向這個模型提出請求，讓它根據你的藝術風格來創作。

你甚至可以提供一件藝術品，如一幅畫或一個草圖，作為靈感。我可以為你生成作品。你可以通過我的 AI 來獲取這樣的服務。

未來，每家餐廳、每個網站可能都會有這樣的 AI。

扎克伯格：是的，我認為在不久的將來，就像現在每個企業都有一個電子郵件地址、網站和社交媒體賬戶一樣，未來每個企業都會有一個 AI 代理來與客戶互動。

歷史上，一些事情一直很難實現。例如，考慮任何一家公司，客戶支持通常是與銷售分開的部門。這并不是作為 CEO 希望看到的工作方式，因為這兩者需要不同的技能。

黃仁勛：你正在構建這些，你的客戶支持似乎是關于，是的，顯然我是。我的意思是，我記得作為 CEO 的 Mark 需要一些東西。我無法確定是什么，但他似乎并不是一個聊天機器人。

扎克伯格：不，嗯，我想這有點像是，是的。作為 CEO，你必須處理各種事務。但我的意思是，當你在組織中構建起這種抽象概念時，很多時候，像你這樣的組織是分開的，因為它們各自優化了不同的事情。但理想的狀況是，這些事情應該是一體的。作為客戶，你其實并不關心這些。

無論是購買商品還是處理購買后的問題，你都不希望遇到不同的處理方式。你只希望有一個地方可以解答你的疑問，并以不同的方式與企業互動。我認為這也適用于客戶服務。

與客戶的每一次互動，尤其是他們的投訴，都有助于提升公司的品質。

黃仁勛：是的，你說得對。通過與這個 AI 的互動，我們可以捕捉到組織內的知識。這些互動數據可以用于分析，從而提升我們的服務等方面。

扎克伯格：是的，我認為這個業務版本在集成方面做得更多，我們目前還處于早期的測試階段。但是 AI Studio 讓用戶能夠創建自己的用戶生成內容（UGC）代理和其他相關功能，并啟動創作者創造它們的良性循環。我對這個項目感到非常興奮。

黃仁勛：所以，我能否使用 AI Studio 來優化我的圖片，我的圖片集？

扎克伯格：是的，我們將會實現這個功能。

黃仁勛 ：然后我可以把我寫過的所有內容都加載進去，基本上把它當作我的個人助理，好嗎？每次我回來時，它都會重新加載記憶，記得我們上次對話停在哪里。然后我們可以繼續對話，就像之前從未中斷過一樣。

扎克伯格：是的，你看，我的意思是，就像所有產品一樣，它會隨著時間的推移而不斷改進。訓練工具也會變得更好。這不僅僅是你想要它說什么。通常，創作者和企業都有他們想要避免的話題，我們在這方面會不斷進步。

你知道，我認為理想的狀況不僅僅是文本，對吧？你幾乎希望能夠做到更多。這有點像是與你正在進行的柯達頭像工作的交叉。你基本上希望能夠與代理進行幾乎像是視頻聊天一樣的互動。

我相信我們很快就能實現這一目標。這些技術并不遙遠，而且發展速度非常快，這讓人感到非常興奮。有很多新的內容等待我們去創造。

即使基礎模型的進步現在停止了，但我認為這不會發生，我們仍然有大約五年的時間來進行產品創新，讓整個行業學會如何有效地利用已經開發出的所有技術。

但實際上，我認為基礎模型和基礎研究的進展正在加速，現在是一個非常激動人心的時期。你的愿景，你知道，這一切，你都已經實現了嗎？

黃仁勛 ：所以，感謝你在上一次對話中的支持。是的，你知道，作為 CEO，我們有時候會感到脆弱，我們需要很多鼓勵和支持。

扎克伯格：我們現在已經相當堅韌了。我認為我們是這個行業中資歷最深的兩位創始人，對吧？這是事實。

黃仁勛：的確如此，的確如此。

扎克伯格：我只是注意到，你的頭發已經變灰了，而我的只是變長了。

黃仁勛：我的頭發變灰了，而你的變卷了，這是怎么回事？

扎克伯格：它一直都是卷的，這就是為什么我一直保持短發。

黃仁勛：是的，我只是想，如果我知道成功需要這么長時間，我可能就不會開始了。不，我會像你一樣輟學。

扎克伯格：嗯，說實話，我們的性格差異很大。

黃仁勛：我認為在這些事情上，你有一個 12 年的領先優勢，這非常不錯。

扎克伯格：這確實很棒。你知道，你做得非常好。

黃仁勛 ：我會繼續前行。就讓我這樣說吧。是的，我喜歡你關于這個愿景的想法， 每個人都應該有一個 AI，每個企業都應該在我們的公司有一個 AI。我想讓每個工程師和每個軟件開發者都擁有一個或多個 AI。

我喜歡你的愿景的原因是，你也相信每個人和每個公司都應該能夠創造自己的 AI。所以，當你開源 Lama 時，我認為這是非常棒的。

順便說一下，Lama 2，我認為 Lama 2 可能是去年 AI 領域最重大的事件。

扎克伯格：關于那個原因，我的意思是，我原本認為是 H100，但你知道，這很遺憾。

黃仁勛：這是一個典型的「先有雞還是先有蛋」的問題。是的，哪一個先來？

扎克伯格：H100，實際上，Llama 2 并不是基于 A100 的。

meta 的開源哲學是什么？

黃仁勛：是的，它確實是 H100。是的，謝謝你。我之所以說它是最大的事件，是因為當它發布時，它激勵了每一家公司、每一個企業、每一個行業。突然間，每個醫療保健公司都在建立 AI，每個公司都在建立 AI，無論是大型公司、小型公司還是初創公司都在建立 AI。

它使得每一個研究人員都能重新啟動AI，因為他們有了一個起點來做事情。現在 3.1 已經發布。我想讓你知道，我們共同部署了 3.1，大家都很興奮。

我們正在將這項技術推廣到全球的企業。這種興奮程度非常高。我認為這將催生各種應用程序。但請告訴我你的開源哲學。你的觀點是怎樣的？

你開源了 PyTorch，現在它是進行 AI 的主要框架。現在你已經開源了 LMA 3.1 或 Lama。圍繞它建立了一個完整的生態系統。我認為這非常棒，但這一切的起源是什么？

扎克伯格：是的，所以在很多方面都有豐富的歷史。我的意思是，隨著時間的推移，我們已經做了很多開源工作。我認為其中一部分，你只是坦率地說，我們是在其他一些科技公司之后開始建設的，或者像分布式計算基礎設施和數據中心這樣的東西。

而且，你知道，正因為如此，當我們建造這些東西的時候，它已經不是一個競爭優勢了。所以我們就想，好吧，我們不妨將其開放，然后我們將從圍繞它的生態系統中受益。我們有很多這樣的項目。

我認為最大的影響可能是我們公布了服務器設計、網絡設計，最終是數據中心設計。通過使這些成為行業標準，供應鏈幾乎完全圍繞它組織起來，這對所有人都有節省成本的好處。因此，通過開源，我們實際上節省了數十億美元。

黃仁勛：開放計算使得我們為數據中心設計的 Nvidia hgx ISS 能夠在任何數據中心運行。

扎克伯格 ：太棒了，這是一個非常棒的體驗。然后我們用我們的一些基礎設施工具做了這件事，比如 React PyTorch。所以我認為當 Llama 出現時，我們傾向于為 AI 模型做這件事。我想有幾種方式可以看待這件事。

意思是，過去 20 年在公司里建造東西真的很有趣。其中最困難的事情之一是不得不處理我們通過競爭對手的移動平臺發布應用的事實。

所以一方面，移動平臺對整個行業來說是一個巨大的推動力，這非常棒。另一方面，通過競爭對手的平臺來發布你的產品是有挑戰性的。我也成長在一個時代，那時 Facebook 的第一版是在網頁上，是開放的。

然后當它轉向移動端時，好處是每個人都有一個計算機在他們的口袋里，這很棒。但缺點是，我們在可以做的事情上受到了更多的限制。

扎克伯格：所以當你觀察這些計算時代時，有一種很大的近期偏見，每個人都只關注移動端，認為，好吧，因為封閉的生態系統，蘋果基本上贏了，并設定了這些條件。

比如，是的，我知道實際上有更多 Android 手機，但蘋果基本上占據了更大的市場份額。并且，所有的利潤都集中在蘋果身上。

在發展上，Android 基本上都在追隨蘋果。所以我認為蘋果在這一代中顯然是贏家，但情況并不總是如此。

如果你回顧過去，蘋果在封閉系統方面有所作為。但微軟，雖然它不是一個完全開放的公司，但與蘋果相比，Windows 運行在所有不同的 OEM 和不同的軟件、硬件上，形成了一個更加開放的生態系統。

在個人電腦時代，Windows 是領先的生態系統，可以看作是開放生態系統 1。我對下一代的計算抱有希望，那就是我們將會回到開放生態系統占主導地位的那個時代。

再次強調，總是會有封閉的和開放的兩種選擇。我認為兩者都有其合理性，都有其好處。我并不是在這個問題上偏執。

我的意思是，我們確實會做一些封閉源代碼的項目。我們發布的并不都是開源的。但我認為，對于整個行業正在構建的計算平臺，尤其是軟件開源，這將為整個行業帶來巨大的價值。

因此，這確實影響了我對 AI 和 Llama，以及我們在 AR 和 VR 領域所做工作的看法。我們基本上是在為混合現實構建 Horizon OS，類似于 Android 或 Windows 的開放操作系統。

基本上，我們想讓所有不同種類的設備都能工作。我們基本上只是想讓生態系統恢復到那個水平，即成為一個開放的平臺。

我對下一代技術持樂觀態度，尤其是開放技術方面將取得勝利。我只是想確保我們有使用權。

這可能有點自私，但我的目標是，在接下來的 10 到 15 年里，確保我們能夠構建我們用來構建社交體驗的基礎技術。

我想要構建很多東西，然后卻被平臺提供商告知「不，你不能真正構建它」，在某種程度上，我就想說「nah, fuck that」。為了 下一代，我們想要從頭開始建造，并確保它去向何方。

黃仁勛 ：我想是像，嗶——

扎克伯格：你知道，我們做得還可以，至少可以罵 20 分鐘。 一提到封閉平臺，我就會變得憤怒。

黃仁勛：所以，嘿，這真是太好了。我認為這是一個很好的世界，有人致力于構建盡可能好的 AI。他們構建它并將其作為服務提供給世界。

但如果你想構建自己的 AI，你也可以自己構建。所以完全使用 AI 的能力，你知道，有些東西我不喜歡自己制作夾克。我更喜歡有人為我制作這件夾克，你知道我的意思嗎？

是的，但對我來說，皮革可以開源并不是一個有用的概念。但我認為你可以提供偉大的服務，令人難以置信的服務，同時保持開放性。這樣我們就能擁有整個范圍。

但你用 3.1 所做的真正偉大的事情是，你有 4 或 5B 的模型，70B 的模型，8B 的模型，你可以用它們來生成合成數據，用 LLM 模型來教授模型。雖然更大的模型會更通用，但它們也更不脆弱。

你仍然可以構建一個適合你所需的任何操作領域或操作成本的較小模型。你遇到了一個守衛，我認為是 Llama 守衛的護欄，非常棒。

因此，現在你建立模型的方式是透明的。你有世界一流的安全團隊和倫理團隊。你可以以這樣的方式建立它，讓每個人都知道它是如何正確建立的。我真的很喜歡這一點。

扎克伯格：是的，我想補充一下我之前被打斷的觀點。我認為我們的目標是一致的，我們正在建造它，因為我們希望它存在，我們希望它能從一些封閉的模型中脫穎而出。

但這不僅僅是一個你可以構建的軟件。你需要圍繞它建立一個生態系統。所以，如果我們沒有開源，它幾乎不會那樣工作得很好，對吧？

我們這樣做并不是因為我們很無私，即使我認為這對生態系統有幫助，我們也在這樣做。我們認為這會使我們正在構建的東西通過一個堅固的生態系統變得更好。

黃仁勛：看看有多少人為 PyTorch 生態系統做出了貢獻。是的，這完全正確。大量的工程工作，我的意思是，僅英偉達，我們就有幾百人致力于讓 PyTorch 變得更好、更可擴展和性能更高等等。

扎克伯格 ：是的，當某件事成為行業標準時，其他人會圍繞它進行工作，對吧？所以所有的硬件和系統最終都會被優化，以便非常高效地運行這個東西，這會造福所有人，并且也會很好地與我們正在構建的系統協同工作。

我認為這只是這種方法如何變得非常有效的例子之一。所以，是的，我認為開源策略作為商業策略將會是一個好策略。我認為人們仍然沒有完全理解這一點。

黃仁勛：我們非常喜歡它，圍繞它建立了一個生態系統。我們建立了這個基礎。

扎克伯格：是的，我的意思是，每次我們推出新產品，你們總是第一個發布并進行優化，使其正常工作。所以，我的意思是，我對此表示感激。

黃仁勛：但我能說什么呢？我們有優秀的工程師，不是嗎？所以，嗯，你總是能更快地抓住這些事情。是的，你知道我是個老年人，但我很靈活。這就是 CEO 們必須做的。我認識到一個重要的事情，我也認為 Llama 真的很重要。

我們構建了這個概念，圍繞 AI 建立了一個 AI 工廠，以便我們能夠幫助每個人建立和獲取 AI。對他們來說，擁有 AI 非常重要，因為這使得他們公司的機構知識得以編碼和嵌入到 AI 中。

所以他們不能讓這個 AI 飛輪、數據飛輪和經驗飛輪在其他地方。開源使他們能夠做到這一點，但他們真的不知道如何將這一切轉化為 AI。

因此，我們創建了一個名為 AI found 的平臺。我們提供工具、專業知識和技術支持。我們有能力幫助他們將所有這些內容轉化為 AI 服務。

當我們完成時，他們可以帶走并擁有它。它的輸出被稱為Nim。這個 Nim，即推理微服務，用戶只需下載并運行它，包括在預訓練和微調環境中。

我們擁有一個完整的生態系統，包括 OEM 合作伙伴，他們可以運行 Nims，以及我們已培訓并合作創建 Llama 的 GSI。

現在我們正在幫助全球企業進行這樣的操作。我的意思是，這真的是一件非常令人興奮的事情，是由 Llama 的開源引發的。

扎克伯格：是的， 我認為特別幫助人們從大型模型中提煉出自己的模型將是一件非常有價值的新事物，就像我們在產品方面討論的那樣。

至少我不認為會有一個主要的 AI 代理，每個人都在同一水平上與之交流。我不認為會有一個模型被每個人使用。

黃仁勛：我們擁有芯片設計的 AI，軟件編碼AI，以及理解我們的軟件編碼 AI，因為我們使用 USD 為 Omniverse 項目編碼。

我們還有理解 vlog 的軟件 AI，我們的 verlo，以及理解我們 bug 并知道如何幫助我們分類 bug 并將它們發送給正確工程師的軟件 AI。

所以每個 AI 都是從 Llama 衍生出來的，我們對其進行微調和設置護欄。如果我們有一個專門為芯片設計設計的 AI，我們不感興趣問它關于政治和宗教等問題，所以我們設置了護欄。

因此，我認為每個公司將為它們擁有的每一個功能擁有 AI，他們很可能為這些功能構建 AI。他們需要幫助來實現這一點。

扎克伯格：是的，我認為未來人們將面臨的一個問題是，他們將多大程度上使用更大的、更復雜的模型，而不是只為他們的特定用途訓練自己的模型。至少我會打賭，我們將看到大量不同模型的出現。

黃仁勛：我們使用的是最大的模型。原因是我們工程師的時間非常寶貴。所以我們現在使用的是 405B，這是為性能優化的。

正如你所知，405B 的規模太大，無法放入任何 GPU 中，無論其大小如何。這就是為什么英偉達性能如此重要的原因。我們的每個 GPU 都通過這種非阻塞開關連接。

例如，在 HGF 中，有兩個這樣的例子。我們使所有這些 GPU 能夠協同工作，并運行 405B，性能卓越。

我們之所以這樣做是因為工程師的時間對我們來說非常寶貴。我們想使用最好的模型，即使它的成本效益只高幾美分，那又有什么關系呢？所以我們只是想確保給他們呈現最好的結果質量。

扎克伯格：是的，嗯，我意思是，4 或 5 的成本大約是 GPT-4o 模型推理成本的一半。所以，在那個水平上，它已經相當不錯了。但是我的意思是，我認為人們正在設備上做些事情或想要更小的模型。

他們只是會提煉它。所以這就像 AI 運行的完全不同的服務集。

黃仁勛：假設我們雇傭那個 AI，用于芯片設計的 AI 可能每小時需要支付 10 美元，如果你經常使用它，并且與許多工程師共享這個 AI，那么每個工程師可能都有一個與他們坐在一起的 AI，成本并不高。我們付給工程師很多錢。

因此，對我們來說，每小時幾美元可以顯著提升某個非常有價值的人的能力。

扎克伯格：是的，我不需要被說服。

黃仁勛：如果你還沒有雇傭過 AI，那就馬上去做。這就是我們所說的全部。那么讓我們談談下一波，下一波。你知道的，我真的很喜歡你們所做的工作之一，計算機視覺。我們內部經常使用的模型之一是將一切都分段。

而且你知道我們現在正在視頻上訓練 AI 模型，以便我們能夠理解世界模型、我們的用例、我們的機器人和工業數字化的用例，將這些 AI 模型連接到全宇宙中，以便我們能夠更好地建模和表示物理世界。

擁有在這些全宇宙世界中運作的機器人。更好的雷朋眼鏡類應用程序，你將 AI 帶入虛擬世界的愿景真的很有趣。告訴我們這件事。你可能知道，我們現在正致力于通過視頻訓練 AI 模型，目的是更深入地理解世界模型。

這包括機器人和工業數字化領域的應用案例。我們將這些 AI 模型與 Omniverse 平臺相連接，以便更精確地模擬和呈現現實世界。

這樣，我們就能讓機器人在 Omniverse 的虛擬世界中順暢地運作。你提到的雷朋的 meta 類應用程序，以及將 AI 技術融入虛擬世界的創新愿景，都非常引人入勝。能否詳細分享一下這方面的信息

扎克伯格：是的，好吧，這里有很多內容需要展開。你提到的第二個「任何模型」，我們實際上在 SIGGRAPH的這個環節展示了它的下一個版本，名為 Anything two，現在它已經可以運行了。

它的速度更快，而且現在也能處理視頻了。我認為這些圖像實際上來自我在考艾島的牧場上的牛。

黃仁勛：下次我們再這樣做時，馬克來到我家，我們一起做了費城奶酪牛排。

扎克伯格：下次你帶來你做的東西，我更多的是扮演副廚師長的角色，但是天哪，那真的非常美味。非常棒。

黃仁勛：這是副主廚的評論。

扎克伯格：好的，聽著，那天晚上快結束時，你問我說：「嘿，你吃夠了嗎？」我回答說：「我不知道，我還能再吃一些。」你很驚訝地問：「真的嗎？」

黃仁勛：通常當你這么說的時候，我就會想，是的，我們確實在給自己增加更多的工作。

扎克伯格：還有一個。

黃仁勛：你吃飽了嗎？通常你的客人會說，哦，是的，我很好。

扎克伯格：再來一首歌唄，Jensen。給我做一個奶酪牛排。

黃仁勛：所以讓你知道他有多么強迫癥。我轉身準備奶酪牛排，對扎克伯格說：「切番茄。」然后我把刀遞給了他。

扎克伯格：我切割東西非常精確。

黃仁勛：所以他開始切番茄，每一片都切得非常精確，每一片都嚴格到毫米。有趣的是，我本以為所有的番茄片會被切好并疊放在一起，就像一疊牌一樣。

然而，當我轉身時，他說他需要另一個盤子。原因是他切的所有番茄片，沒有一片是相互接觸的。一旦他把一片番茄從另一片番茄上分離開，它們就不再接觸。

扎克伯格：聽著，如果你希望番茄片相互接觸，你應該早點告訴我。我只是個副廚師長，好嗎？

黃仁勛：這就是為什么他需要一個不會評判的 AI。

扎克伯格：是的，這就像，所以這很酷。

黃仁勛：好的，所以它在識別牛的行蹤，同時也在跟蹤這些牛。

扎克伯格：是的，這非常有趣。利用這項技術可以創造出各種效果，而且因為它將對外開放，所以在工業領域將會有更多重要的應用。我的意思是，科學家們使用這些工具來研究珊瑚礁、自然棲息地，以及景觀的演變等等。

但是，能夠在視頻中實現這一點，并且有 A/B 鏡頭，能夠與之互動并告訴它你想要跟蹤什么，這確實是非常酷的研究。

離全息眼鏡還有一段時間

黃仁勛：假設你有一個倉庫，里面裝滿了攝像頭。倉庫的 AI 正在監控一切活動。如果一堆箱子倒了，或者有人在地上灑了水，或者無論即將發生什么事故，AI 都能識別出來，生成文本描述，然后發送給相關人員。

這樣，一旦發生緊急情況，幫助就會及時到來。所以，這是一種使用 AI 的方式，而不是簡單地記錄一切。

如果發生事故，它不是記錄每納秒的視頻，然后返回并檢索那個時刻，而是只記錄關鍵信息，因為它專注于重要的事件。擁有一個能夠理解視頻的模型，一個視頻語言模型，對于所有這些創新應用來說都是非常強大的工具。

那么，除了雷朋項目，你們接下來還計劃做什么？跟我說說，對，還有那些智能課程，對吧？

扎克伯格：所以，當我們考慮下一個計算平臺時，我們傾向于將其視為混合現實的世界。包括頭戴設備、智能課程以及智能眼鏡。

我認為人們更容易接受這個概念，因為今天幾乎每個人都戴眼鏡，而這些眼鏡最終都會升級為智能眼鏡。世界上有超過十億人，這將會是一個巨大的變革。VRM 是指頭戴設備，有些人可能覺得它對游戲或其他用途很有趣，而有些人則不這么認為。

然而，我認為智能課程和混合現實頭戴設備都將存在于我們的世界中。我認為智能課程將類似于移動手機，是下一個計算平臺的一種始終在線的版本。

而混合現實頭戴設備則將像你的工作站或游戲機，當你需要更深入的沉浸式體驗和更多的計算能力時使用。眼鏡的體積非常小，因此在形態上有許多限制，就像你不能在手機上完成同樣水平的計算一樣。

黃仁勛：它恰好在所有這些重大突破和生成式 AI 技術出現的時候問世了。

扎克伯格：是的，所以對于智能眼鏡，我們基本上是從兩個方向著手解決這個問題。一方面，我們一直在研發我們認為是理想全息 AR 眼鏡所需的技術。

我們正在進行所有定制硅芯片和顯示堆棧的工作，這些都是為了讓這種技術能夠在眼鏡中得以實現，對吧？

這并不是一個頭戴設備，也不像 VR 或 MR 頭戴設備。它們看起來像普通眼鏡，但與你現在戴的眼鏡相比，還有一定的差距。

我的意思是，那些眼鏡雖然非常薄，但即使是雷朋和我們生產的，目前也還不能將實現全息 AR 所需的所有技術都集成進去。

不過，在未來幾年里，我們將越來越接近這個目標。我認為我們會更接近實現它。這個產品仍然會相當昂貴，但我想它將開始成為一個實際的產品。

我們解決這個問題的另一個方法是，從設計精美的眼鏡開始，與世界頂尖的眼鏡制造商合作。他們擁有眾多知名品牌，比如雷朋、Oakley、Oliver Peoples 等。我們與他們合作開發雷朋眼鏡，目前我們已經進入第二代產品。

我們的目標是，首先，將智能眼鏡的設計限制為美觀大方。然后在這樣一款眼鏡中，我們盡可能多地集成技術，盡管我們知道可能無法完全達到理想的技術集成狀態。

但最終，它將是一款看起來非常棒的眼鏡。目前，我們已經集成了相機傳感器，所以你可以拍照和錄視頻。我甚至可以直播 Instagram，你可以在 WhatsApp 上進行視頻通話，并將畫面實時傳輸給對方。它還配備有麥克風和揚聲器。

所以，我的意思是，揚聲器實際上非常出色。它是開放耳式的設計，很多人覺得比耳機更舒適。你可以用它來聽音樂，這就像是一種私人體驗，非常受歡迎。人們也喜歡用它來接聽電話。

但后來我們發現，那個傳感器套件恰好是我們與 AI 交流所需的關鍵。這有點像是意外的收獲。如果你五年前問我，我們會先實現全息 AR 還是 AI？我可能會說，AI 可能會先實現，對吧？

我的意思是，這一切就像是虛擬和混合現實技術的進步，以及顯示技術的進步。我們正在持續朝著這個方向取得進展。

然后，在實現全息 AR 之前，我們取得了 LLDS 技術的突破，這讓我們擁有高品質的 AI，并且其發展速度非常快。這有點出乎我的意料。幸運的是，由于我們一直在開發各種不同的產品，我們現在處于一個非常好的位置。

但我想最終你會看到一系列不同價格點和不同技術水平的潛在眼鏡產品。所以，基于我們現在對雷朋眼鏡的觀察，我猜測在 300 美元價格點上，無顯示 AI 技術將是一個非常成功的產品，最終可能有數千萬甚至數億人使用。

你將擁有一個非常互動的 AI，可以與之交流。

黃仁勛：是的，正如你剛才展示的，你擁有視覺語言理解能力。你還具備實時翻譯功能。因此，你可以使用一種語言與我交流。

扎克伯格：當我聽到另一種語言時，顯示效果當然也會非常好。但這也會給眼鏡增加一些重量，并使其價格更高。

因此，我想對于很多人來說，他們可能更喜歡全息顯示的眼鏡。但同時，也會有許多其他人，他們希望最終能擁有像非常薄的眼鏡一樣的產品，無論是工業應用、工作應用，還是消費者產品。你這么認為嗎？

是的，我的意思是，我在疫情期間一直在思考這個問題，當時每個人都在遠程工作了一段時間。就像你在 Zoom 上花費了所有的時間。

雖然我們現在有了這些技術，但在未來，我們不會離得太遠，就能實現虛擬會議，比如，雖然我不在物理位置上，但我的全息圖可以出現，讓人感覺我們都在同一個地方，就像我們物理上都在場一樣。

黃仁勛：我們可以合作開展某項工作，但我認為這對于 AI 用戶來說將尤為重要，因為可以與一個不必隨時佩戴的設備一起生活。

扎克伯格：是的，但我想我們最終會實現這一點。在眼鏡設計中，有更薄的框架和更厚的框架，還有各種風格。

但我想， 我們離擁有全息眼鏡還有一段時間。不過，我認為在一副時尚的、更厚框架的眼鏡中實現這一點并不遙遠。

黃仁勛：現在的太陽鏡設計確實有些偏大。我注意到了這一點。是的。

扎克伯格：你知道嗎，這是一種非常有用的風格。

黃仁勛：這非常有幫助。

扎克伯格：你知道，我正在努力成為一個風格影響者，這樣我就能在眼鏡上市之前對其產生影響。

黃仁勛：但是，你知道，你現在開始參與影響工作，這還處于初期階段。

扎克伯格：是的，這還處于初期階段，但我感覺，如果業務的未來將包括制造人們佩戴的時尚眼鏡，那么這可能是我需要開始更加關注的事情。

所以，是的，我們將不得不改變我每天穿同樣衣服的形象。我的意思是，這也是關于眼鏡的一個特點。我認為這和手表或手機不同，人們真的不想看起來都一樣。

而且，我認為這將是一個平臺，我認為它將自然地成為一個開放的生態系統。因為我們之前談論的主題是，人們將要求的眼鏡形式和風格的多樣性將是巨大的。

這不像每個人都不想戴上其他人設計的一種特定款式的眼鏡。我不認為這種單一風格的產品會受到歡迎。

黃仁勛：是的，我認為你說得對。Mark，我們正經歷一個令人難以置信的時期，整個計算堆棧正在被重新發明，我們思考軟件的方式也在變化。你知道 Andre（Andre Karpathy）將軟件分為 1.0 和 2.0，

現在我們基本上已經進入了軟件 3.0 時代。從通用計算到生成性神經網絡處理，我們計算的方式發生了根本變化，我們現在能夠開發的應用程序和能力在過去是不可想象的。

這項技術，生成式 AI，是我所見過的影響消費者、企業行業和科學速度最快的技術之一。它能夠跨越從氣候技術到生物技術再到物理科學的各個領域。

生成式 AI 正處于這些領域根本轉變的核心。此外，正如你所談論的，生成式 AI 將在社會中產生深遠的影響，我們正在制造的產品就是證明。

我特別興奮的一件事是，有人之前問過我，是不是會有一個名為「Jensen AI」的產品。這正是你提到的創造性 AI，我們只是構建自己的 AI。

我將自己寫的東西加載進去，并根據我回答問題的方式進行微調。希望隨著時間的推移，這款 AI 能成為許多人提問或交流想法的優秀助手和伴侶。

這將是 Jensen 的一個版本，就像你之前提到的那樣，它不會評判。因此，你不必害怕被評判，可以隨時與它互動。但我認為這些事情真的很驚人。我們經常寫很多東西。

給它三個或四個主題的價值是什么？現在，這些是我想要寫的基本主題，用我的聲音寫，把它作為一個起點。所以現在我們可以做很多事情。

與你一起工作真的很棒，我知道建立一家公司并不容易，你的公司從桌面轉向移動，再到 VR，再到 AI，所有這些設備。這真的很，真的很，真的很了不起。

英偉達也多次轉型，我知道這樣做有多困難。我們都失敗了很多次，但這就是想要成為先鋒和創新的代價。所以看到你的成就真的很棒。

扎克伯格：同樣，我認為這不僅僅是一個轉型。如果你繼續做你以前做的事情，但同時也在增加新的內容。我認為這一切都有更多的篇章。

觀看你們走過的旅程非常有趣。我們經歷了一個時期，當時每個人都認為，不，一切都將轉移到這些設備上，計算將變得非常便宜。但你們一直堅持著，繼續前進。

就像，不，就像實際上一樣，你將進入這些可能癱瘓的大系統。是的，不，而且，我的意思是，是的，我們去了。

黃仁勛：實際上，你正在走向這些大型系統，它們可以提供強大的計算能力。是的，我們確實曾經專注于制造越來越大的設備，而不是更小的。這在當時可能看起來有點過時，但現在看來非常酷。

我們開始建造圖形處理單元（GPU），現在當你部署 GPU 時，仍然稱之為 H100。扎克伯格在他的數據中心使用了大量的 H100，我聽說數量接近 60 萬。

扎克伯格：我們也是他的好客戶，這就是我在 SIGGRAPH獲得 Jensen QA 的原因。

黃仁勛：哇，等一下。我正在得到馬克·扎克伯格的 QA，你是我的客人，我想確保有一天打電話給你，你說：「嘿，你知道，幾個星期后，我們在 SIGGRAPH有一個活動。」。

扎克伯格 ：我說：「是的，那天我想我沒有安排任何活動。我飛往丹佛。」 聽起來很有趣，確實如此。

黃仁勛：我那天下午沒有安排任何活動，只是你突然出現在那里。但這些系統非常令人驚嘆，你們建造的這些系統非常龐大，組織起來非常困難，運行起來也非常困難。

你知道，你說你比大多數人晚進入旅程，但你操作的規模比大多數人都要大。這一切都令人驚嘆。祝賀你取得的一切成就。你現在是一位真正的時尚偶像。現在看看舞臺上的工作，正在努力進行。這是女士們和先生們。

扎克伯格：謝謝。

互換夾克，下一次還要送金鏈

黃仁勛：等等，讓我說完。你知道，你知道，上次我們晚餐后聚在一起時，我和 Mark 進行了「球衣交換」，我們拍了一張照片，結果這照片變得非常受歡迎。

現在，我想他穿我的夾克沒什么問題。我不知道，這是我的風格嗎？我不認為我應該穿成這樣，對嗎？

扎克伯格：是的，實際上，我為你做了一個。

黃仁勛：你做到了。是的，那個是標志性衣服。

扎克伯格：我的意思是，嘿，讓我們看看。我們這里有一個盒子，它是黑色的，用皮革和羊毛皮做的。這不是我做的，我只是在線訂購的。

黃仁勛：等一下，這里有點冷。

扎克伯格：我想這是我的善良。 我的意思是，這是一個氛圍，你只需要這是漂亮的嗎？

黃仁勛：我是說，給這個人一個鏈條。好吧，下次我見到他時，我會給你帶來一個金鏈。公平就是公平，對吧？

所以我想讓你知道，我告訴每個人，Laurie 為我買了一件新夾克來慶祝今年的 SIGGRAPH。

SIGGRAPH是我們公司的一件大事。正如你所想象的，RTX 是在這里發布的，這里發布了很多令人驚嘆的事情。

這是一件全新的夾克。哇，我想我們又進行了一次「球衣交換」。

扎克伯格：好吧，你的這件衣服顯然更值錢，因為它是被穿過的。

黃仁勛：讓我們看看，我不知道。我認為 Mark 很強壯。這個家伙很強壯。

扎克伯格：我的意思是，你也是，伙計。

黃仁勛：好的，好的，謝謝大家，先生們，祝馬克·扎克伯格在 SIGGRAPH上玩得開心。