展會信息港展會大全

OpenAI CEO深度訪談:1人+10000塊GPU,能創(chuàng)收數(shù)十億美元
來源:互聯(lián)網(wǎng)   發(fā)布日期:2024-11-13 11:16:09   瀏覽:0次  

導讀:智東西(公眾號:zhidxcom)編譯|依婷編輯|Panken智東西11月12日消息,近日,美國知名創(chuàng)業(yè)孵化器Y Combinator(YC)總裁兼CEO Garry Tan對OpenAI聯(lián)合創(chuàng)始人兼CEO Sam Altman(薩姆阿爾特曼)進行了訪談。訪談從Sam Altman的博客文章《智能時代(The Intelligence Age)》切入,談到了OpenAI初創(chuàng)團隊的建立、Scaling Law對OpenAI的意義、早年在YC和Loopt的經歷、OpenAI團隊變 ......

智東西(公眾號:zhidxcom)

編譯|依婷

編輯|Panken

智東西11月12日消息,近日,美國知名創(chuàng)業(yè)孵化器Y Combinator(YC)總裁兼CEO Garry Tan對OpenAI聯(lián)合創(chuàng)始人兼CEO Sam Altman(薩姆阿爾特曼)進行了訪談。訪談從Sam Altman的博客文章《智能時代(The Intelligence Age)》切入,談到了OpenAI初創(chuàng)團隊的建立、Scaling Law對OpenAI的意義、早年在YC和Loopt的經歷、OpenAI團隊變動,以及AGI的五級路徑等話題。

訪談中,Altman提到,在可預見的未來,隨著第五級AGIOrganizations的實現(xiàn),或許一個人加一萬個GPU就可以創(chuàng)建一家年營收達數(shù)十億美元的公司。而對于即將到來的2025年,他最期待的是AGI以及自己的孩子。

今年9月下旬,Altman在《智能時代》一文中預測,AI的超級智能(ASI)將在幾千天內到來,而深度學習有效(deep learning worked)將成為OpenAI邁入智能時代的必經之路。Altman說:“深度學習有效,并且可以預見的是,隨著規(guī)模的擴大,深度學習會變得更好,而且我們?yōu)槠渫度肓嗽絹碓蕉嗟馁Y源。”

Altman在訪談中承認這是一個非常瘋狂的陳述。但他可以看到一條路徑OpenAI正在做的工作不斷產生復利,讓其過去三年取得進展的速度得以在接下來的三年、六年、九年甚至更長時間內持續(xù)下去。

OpenAI使用的Scaling Law(縮放定律)常被業(yè)內視作異端。Altman對此回應說:“我們的資源遠遠少于DeepMind和其他公司。我們只需要選擇一個方向并真正集中精力。這就是我們的制勝法寶,也完全是正確的創(chuàng)業(yè)要點。Scaling是我一直感興趣的東西。事實證明,對于深度學習模型,我認為這是一個極度被低估的財富和應該追求的方向。”

關于近一年來的巨大人事變動,Altman也沒有避諱。他說:“任何公司都會以某種速度迎來團隊變動,那些擅長從零到一的人,未必擅長從一到十或者從十到百!倍c此同時,雖然OpenAI距離實現(xiàn)AGI還有一段路程要走,但Altman說:“第一次感覺我們真的知道該做什么”。

作為近年來最受關注AI獨角獸的聯(lián)合創(chuàng)始人,Altman建議創(chuàng)業(yè)者押注AGI技術趨勢,和谷歌等大公司、甚至創(chuàng)立幾年的初創(chuàng)公司相比,“你的優(yōu)勢在于速度、專注、信念以及對技術發(fā)展速度做出反應的能力”。

以下是對Sam Altman本次采訪的節(jié)選編譯,關于Altman早年在YC和Loopt的經歷有所省略:

一、現(xiàn)在是創(chuàng)辦科技公司的最佳時機,OpenAI遠沒有達到極限

Garry Tan:讓我們談談你關于智能時代的最新文章。你認為現(xiàn)在是創(chuàng)辦科技公司的最佳時機嗎?

Sam Altman:至少可以說,現(xiàn)在迄今為止最理想的時機;希望未來會有更好的節(jié)點。我認為,每次重大的技術革新都會極大地拓寬我們的能力邊界,你能做的事會比你之前能做的更多。我期望這些創(chuàng)業(yè)公司能創(chuàng)造更非凡的成就、帶來更深遠的影響。

我認為這就是最佳時機當行業(yè)發(fā)展緩慢且缺乏活力時,大公司具有優(yōu)勢;當像移動技術、互聯(lián)網(wǎng)或半導體等領域的變革興起時,甚至是過去的工業(yè)革命時期,新貴們就有了他們的優(yōu)勢。我們已經很久沒有遇到這樣顛覆性的變革了。這就像文章里說的那樣相當令人興奮。

Garry Tan:實際上,你在文中說了一件非常重要的事情,那就是AI的超級智能(ASI)會在數(shù)千天后到來。(注:We will have super intelligence in a few thousand days.)

Sam Altman:我的意思是說,我們希望……但無論如何,這是一個非常瘋狂的陳述。

我可以看到一條路徑我們正在做的工作不斷產生復利,讓我們過去三年取得進展的速度得以在接下來的三年、六年、九年甚至更長時間內持續(xù)下去。你知道的,九年大概是3500天。如果我們能夠保持這樣的迭代速度甚至更快,那系統(tǒng)能做很多事情。我認為即使是像o1這樣的系統(tǒng),在特定領域內的限定任務上,也已經展現(xiàn)出了極高的基礎認知能力。o1就是個非常聰明的存在,而我認為我們遠遠沒有達到進步的極限。

我們可能會撞到一些意想不到的墻,也可能會錯過一些東西,但在我們看來,未來還有很多復合增長會發(fā)生。

Garry Tan:這篇文章可能是我見過的幾乎所有文章中對技術最為樂觀的。里面寫到很多我們可以期待的事情,比如說修復氣候、建立太空殖民地、揭示所有物理學原理、實現(xiàn)近乎無限的智能以及獲取豐富的能源。

Sam Altman:我確實認為所有這些事情可能還有更多我們無法想象的事情可能并不那么遙遠。我們現(xiàn)在可以半認真地談論這些問題,這本身就很讓人振奮。

一直以來,我最喜歡YC的一件事是,它鼓勵可能讓人難以置信的技術樂觀主義,以及一種堅定的信念,即你可以解決這些問題。這像是早期的“PG精神(YC聯(lián)合創(chuàng)始人Paul Graham的創(chuàng)業(yè)理念)”,在一個不斷告訴人們“這行不通、那行不通”的世界里,鼓勵創(chuàng)始人大膽暢想。這是一件特別的事。

Garry Tan:豐富的能源似乎是一個宏大的議題。我們知道有A路徑和B路徑兩種解決方案。如果我們真的能夠實現(xiàn)能源充足,這似乎能夠解鎖幾乎所有的工作,不僅僅是知識密集型工作。這可以通過機器人技術、自然語言處理以及無處不在的智能來實現(xiàn)。我們好像正步入一個真正的富足時代。

Sam Altman:無限的智能和豐富的能源,我認為這是我們想要達成一切的兩個關鍵。還有很多其他重要的東西,但如果我們能真正擁有這兩者,我們就能使我們想發(fā)生的事情發(fā)生。比如,我們能更快地想出更好的創(chuàng)意,然后讓它們在物理世界中實現(xiàn)。更不用說運行大量的AI也需要能源。

我認為這將是一個巨大的突破。我不確定是否要對這一切同時發(fā)生感到驚訝,因為或許這只是技術進步速度不斷加快的自然結果。但這肯定是一個非常令人興奮的時刻,也是創(chuàng)業(yè)的好時機。

二、創(chuàng)建時的三個目標:無監(jiān)督學習、強化學習、團隊不超過120人

Garry Tan:你當時是如何確定OpenAI的初創(chuàng)團隊成員的?

Sam Altman:Greg(OpenAI聯(lián)合創(chuàng)始人、總裁Greg Brockman)是很早就決定加入我們的核心成員;叵肫饋砀杏X就像一部電影,像是所有銀行搶劫電影的開頭,當你開車去找人什么的時候。

就像Ilya(OpenAI前首席科學家Ilya Sutskever),我聽說他真的很聰明。然后我在YouTube和其他網(wǎng)站上看了他的一些視頻資料,我發(fā)現(xiàn)他極度聰明,像真正的天才,有著遠見卓識。我當時想,我遇到了那個家伙!我給他發(fā)了電子郵件,他沒有回復;我就去參加他演講的某個會議,我們見面了。在那之后我們開始談論了很多想法。

Garry Tan:談話聊了些什么?比如我真的很喜歡你對AI的想法?或者說我想要建立一個實驗室?

Sam Altman:是的;叵肫饋恚渲幸患浅S行У氖虑槭,我們從一開始就說,我們將在實地工作中去追求AGI當時你不被允許這么說,因為這似乎是不可能的、是瘋狂的,而且?guī)缀跏遣回撠熑蔚倪@話引起了幾乎所有優(yōu)秀年輕人的關注,以及平庸年長者的嘲笑。

這是一個非常好的跡象,而且非常有力量。我們就像“愣頭青”。我那時30歲了,可能是團隊中最年長的,但也有和這些不負責任、什么都不想做的年輕人一樣的地方。年輕人喜歡說這些荒謬的話。當時真正吸引的人,我想是那些會說“我是大二學生,讓我們做這件事”的人。隨后我們四處奔走,一個接一個地結識盟友。這個過程斷斷續(xù)續(xù)花了九個月左右的時間。

在OpenAI的創(chuàng)立過程中,我印象最深刻的是,因為Ilya與谷歌存在合作關系的問題,我們在2015年12月宣布OpenAI成立,直到2016年1月才正式落地。然后大概是2016年1月3日,大家結束假期,去到Greg的公寓,有10個人。我們坐在一起,感覺就像我們做了一件劃時代的大事。每個人都說“那么我們現(xiàn)在該做什么?”這是一個多么有趣的時刻,它讓我想起了初創(chuàng)公司創(chuàng)始人非常努力地籌集資金的時候他們會想,“哦,我做到了,我們做到了”,但其實真正的考驗才剛剛開始。

Garry Tan:那不是開香檳的時候。實際上是發(fā)令槍,說明現(xiàn)在我們得跑了。

Sam Altman:你不知道比賽會有多難。我們花了很長時間才弄清楚我們要做什么。但整個初創(chuàng)團隊,尤其是Ilya給我留下了非常深刻的印象。盡管這個過程充滿了曲折和變化,但我們最初的那些想法是如此正確。

我們就在Greg的公寓里,用白板列出了我們的想法和計劃;我們做了一些有用或無用功,最終才有了我們現(xiàn)在的這個系統(tǒng);仡欉^去,我們從那里走到這里,一路上走了很多彎路,但最終到達了我們當初想做的目標深度學習。

當時有三個努力的方向弄清楚如何進行無監(jiān)督學習、解決RL(Reinforcement Learning,強化學習)問題,以及將團隊人數(shù)控制在120人以內。第三個失敗了,前兩個預測方向非常好。

三、“多即是多”,專注Scaling Law是OpenAI制勝法寶

Garry Tan:第二個目標聽起來像Scaling(縮放定律)。這在一些人看來是有些冒犯意味的異端觀念。

Sam Altman:最開始我們的核心信念就是深度學習有效,且隨著規(guī)模的擴大而變得更好。這在當時都是有點異端信仰的。我們無法確切預知隨著規(guī)模的擴大它會有多好幾年后才出現(xiàn)這種情況但直覺告訴我們這是可行的。

當時的人們存在固有成見,認為這些神經網(wǎng)絡并未真正“學習”或“推理”,而只是在“玩把戲”。有一些領域內的領軍人物也這樣說。他們認為這是錯的,可能導致AI再次陷入寒冬。然而,我們目睹了模型性能的不斷提升,甚至比我們得到的Scaling結果更好,這有些打破我的直覺。我們當時就決定要繼續(xù)推進這一方向。

我們的資源遠遠少于DeepMind和其他公司。我們只需要選擇一個方向并真正集中精力。這就是我們的制勝法寶,也完全是正確的創(chuàng)業(yè)要點。Scaling是我一直感興趣的東西。事實證明,對于深度學習模型,我認為這是一個極度被低估的財富和應該追求的方向。我認為,當你有疑問時,如果你有一些看起來隨著規(guī)模的擴大而變得更好的東西,你應該擴大規(guī)模。

Garry Tan:可能很多人會期待“少即是多”,但實際上對于OpenAI來說“多即是多”。

Sam Altman:我認為關于OpenAI有一件事可能沒有得到很好的理解,那就是即使我們還很陌生,但我們有一支瘋狂而才華橫溢的研究團隊。如果你有世界上最聰明的人,你可以推動一些非常困難的事情。

Garry Tan:我聽到過一個故事,關于計算資源的訪問權限。當時業(yè)內的一些老前輩會批評你們說,你會浪費大量資源,會導致AI寒冬。

Sam Altman:有趣的是,人們不確定我們是否浪費了資源,也不確定我們是否投入太多資源做了一些觸及道德邊界的事情。他們認為你應該分散賭注而不是篤定一個方向。世界上大多數(shù)人都不理解對一次賭注抱有相當極端的信念的價值。于是我們說,好吧,我們有了這些證據(jù),我們相信這件事在當時,通常的做法是會分散投資到多個賭注上,而我們選擇堅定地押注于這個單一目標,因為我們是明確的樂觀主義者。

有一段很長的時間,你必須甘愿在沒有數(shù)據(jù)的情況下進行操作。在那一點上,你確實必須以信念為基礎。

Garry Tan:這也涉及到聚焦的問題。就像你必須做出選擇,而這個選擇更好。你沒有無限的選擇機會。所以,優(yōu)先排序本身就是一項練習,它使你更有可能成功。

Sam Altman:我希望我可以告訴你,“哦,我們確切地知道會發(fā)生什么”。但顯然,故事的開篇是我們做了很多事情來幫助我們積累一些學科理解。我們并沒有走在捷徑上。如果我們當時知道我們現(xiàn)在所知道的,我們可以讓整個事情達到令人難以置信的程度。事實并非如此,你不可能每個猜測都是對的。

我們一開始做了很多假設,既有關于技術方向的假設,也有關于我們將成為什么樣的公司、我們將如何構建AGI等方面的假設。我們總是一次又一次地失敗。但我們的優(yōu)勢之一是在被打倒后能夠站起來繼續(xù)前進。

至少我不知道語言模型會成為主流。我們開始研究機器人和Agent、視頻游戲等等。幾年后,GPT-3出現(xiàn)了,這在當時并沒有太多跡象。

四、第一次真的知道該做什么,路徑越來越清晰

Garry Tan:你從去年下臺中學到了什么?對一些人的離開有什么感覺?團隊在進化,你又做得如何?

Sam Altman:累,但是很好。我們的進展很快,仿佛在極短的時間內跨越了中型乃至大型科技公司通常需要十年才能達成的成長階段。ChatGPT還不到兩年,這一路上,我們歷經諸多磨難。任何公司都會以某種速度迎來團隊變動,那些擅長從零到一的人,未必擅長從一到十或者從十到百。

在這個過程中,我們犯了很多錯誤,但也做了一些非常正確的事情。我認為公司的目標不論是構建AGI還是其他任何東西,都要在每個階段盡可能地做出最好的決策。這將帶來很多變化。我希望我們現(xiàn)在正走向一個更加平穩(wěn)的時期,但我深知未來還會有其他動蕩。

Garry Tan:現(xiàn)在OpenAI是如何運作的?

Sam Altman:這是我第一次感覺我們真的知道該做什么。實現(xiàn)AGI還需要大量的工作,存在一些已知或未知的因素,但我們基本上知道該做什么。這需要花時間,也很困難,但非常令人興奮。

我認為在產品方面還有更多需要解決的問題。但大體上我們知道要目標是什么以及要優(yōu)化什么,這是一個非常激動人心的時刻。當你擁有這樣清晰的認知時,我認為你可以走得相當快。我們的研究路徑、基礎設施路徑已經很清晰,產品路徑也越來越清晰。我們曾經是一個真正的研究實驗室,很長一段時間都沒有這樣的認知。即便你知曉了這些方向,實際操作中也很難下定決心,因為總有太多你渴望嘗試的事情。但你能讓每個人都目標一致并攜手共進的程度,是公司發(fā)展速度的重要決定因素。

五、AGI嚴重過載,一個人加一萬個GPU創(chuàng)造十億美元年營收

Garry Tan:在剛結束的o1黑客馬拉松上,獲勝者之一Camphor構建了能夠不斷迭代優(yōu)化翼型的系統(tǒng),這聽起來有點像AGI第四級,也就是創(chuàng)新者階段。

Sam Altman:這很有趣。我以前認為,從二級躍升到三級很快就會發(fā)生,但三級到四級的跳躍會更加困難,需要一些中型或更大模型的想法。但他們和一些其他的演示讓我相信,只要以非常有創(chuàng)意的方式使用現(xiàn)有模型,就可以獲得大量的創(chuàng)新。

Garry Tan:你想簡單談談第三級、第四級和第五級嗎?

Sam Altman:我們意識到AGI已經變成了一個嚴重過載的詞,人們對它的理解各不相同。我們試圖簡單地列出一個框架,這大概是我們對事物發(fā)展順序的最佳推測。你有一級系統(tǒng),也就是聊天機器人,就會有二級系統(tǒng),也就是推理者。我們認為今年早些時候發(fā)布的o1已經達到了第二級。

第三級是指的AI Agent,它擁有能夠完成長期任務的能力,比如與環(huán)境多次互動,并與人類協(xié)同工作。我認為我們會比人們預期的更快到達第三級。至于第四級創(chuàng)新者,它就像科學家一樣,能夠探索長期以來不太被知曉的現(xiàn)象并理解其本質。然后是第五級,這還沒有成型的定義,但它將為整個公司的規(guī)模、組織架構或其它任何方面帶來巨變。

Garry Tan:第五級AGI聽起來像是一個組織(Organizations)。比如說,會有一些公司每年賺取數(shù)十億美元,但員工不到100人,可能是50人,可能是20人,可能是1人。

Sam Altman:我不知道怎么樣去說,但我確實感覺到了這個趨勢,F(xiàn)在是創(chuàng)業(yè)公司創(chuàng)始人的好時機。這就像一個人加一萬個GPU,然后它就發(fā)生了。

六、新技術平臺被夸贊很容易,但不要為此沉淪

Garry Tan:對于即將開始或剛剛開始創(chuàng)業(yè)的人,你有什么建議?

Sam Altman:押注這種技術趨勢。我們還沒有接近飽和點。這些AI模型很快會變得更好。作為創(chuàng)業(yè)公司創(chuàng)始人,你能做什么,以及沒有它你又能做什么,截然不同。而大公司,即使是中等規(guī)模的公司,甚至是成立幾年的初創(chuàng)企業(yè),它們已經不再進入季度規(guī)劃周期,而谷歌經處于十年規(guī)劃階段。

但是你的優(yōu)勢在于速度、專注、信念以及對技術發(fā)展速度做出反應的能力。這是初創(chuàng)公司有史以來的首要優(yōu)勢,尤其是現(xiàn)在。所以我建議你們用AI構建一些東西,利用看到新事物并構建一些東西的能力,而不是將其放入季度計劃中。

我要說的另一件事是,一個新技術平臺被夸贊是很容易的事。有一些創(chuàng)業(yè)者可能認為:“我正在做一些商業(yè)法則不適用于我的AI。我有這種神奇的技術,所以我不必建造護城河或競爭優(yōu)勢或更好的產品。”這顯然不是真的。

通過比別人更快地擁抱新技術,你可以在短期內得到爆炸性的成長,但記住不要為此沉淪,你仍然需要建立一些具有持久價值的東西。我認為這也是一件值得銘記在心的事。

Garry Tan:現(xiàn)在每個人都可以制作一個令人難以置信的演示,但是建立一家企業(yè)仍然艱難。

Sam Altman:規(guī)則同樣適用。你可以比以往更快、更好地做到這一點。但你仍然需要建立良好的業(yè)務。

Garry Tan:對2025年有什么期待?

Sam Altman:肯定是AGI。但還有另一件更讓我興奮的事,那就是我的孩子。

來源:Y Combinator

贊助本站

相關內容
AiLab云推薦
推薦內容
展開

熱門欄目HotCates

Copyright © 2010-2024 AiLab Team. 人工智能實驗室 版權所有    關于我們 | 聯(lián)系我們 | 廣告服務 | 公司動態(tài) | 免責聲明 | 隱私條款 | 工作機會 | 展會港