我很懶,愛寫字但從不發(fā),但因?yàn)?OpenAI 這次分裂的歷史意義太大,突然把我這幾個(gè)月不太理解的事情,串到了一起。所以連夜寫了人生第一篇公眾號。
本文不討論董事會政變的八卦,OpenAI 奇怪的治理結(jié)構(gòu),以及 Sam 和 Ilya 到底誰對誰錯,我充分尊重這兩個(gè)人的底層品質(zhì)。如此不可思議的事情,必定藏著某種深層沖突。無論 Sam 最終是否會離開,本文探討的沖突,應(yīng)該會持續(xù)有效:
有效加速主義 和 超級“愛”對齊 的理念沖突,以及一個(gè)變量:GPT-5 是數(shù)字生命,還是工具?
這些詞看著唬人,嘗試解釋下。
有效加速主義
英文叫做 e/acc,是一群硅谷的科技精英們搞出來的一種科技價(jià)值觀運(yùn)動,你會發(fā)現(xiàn)有大量的 twitter 賬號帶有這個(gè) e/acc 的后綴,可見其受眾之廣泛。
那這到底是什么玩意兒,以及為什么會和 Sam 被驅(qū)逐有關(guān)?首先就要解釋 e/acc。我的簡單版理解:
人類應(yīng)該無條件地加速技術(shù)創(chuàng)新,并快速推出他們,來顛覆社會結(jié)構(gòu)。
e/acc 運(yùn)動認(rèn)為這種對社會的顛覆風(fēng)險(xiǎn),本質(zhì)上對人類有利,因?yàn)闀仁谷祟愡m應(yīng),從而幫助我們更快達(dá)到更高的意識水平。
過去三百年人類隨著技術(shù)的顛覆而進(jìn)化,結(jié)果顯然都非常好。
很顯然,e/acc 的支持者對 AGI 的態(tài)度也是一致的:讓盡可能多的人參與,更快地推出產(chǎn)品,更快地顛覆,從而讓人類更好地進(jìn)化。是不是,有點(diǎn)「大力出奇跡」的意思?
Sam Altman 是 有效加速主義者嗎?
我認(rèn)為答案很確定,是的。盡管很多人說,你看 Sam 還去國會呼吁減速 AI 的發(fā)展,天天說 AI 的風(fēng)險(xiǎn),不是應(yīng)該是個(gè)「減速主義者」嗎?其實(shí)他從來沒有公開表達(dá)過自己 e/acc 的立場。但是似乎有一些蛛絲馬跡讓人相信。

MindOS 上分析到的小道消息
證據(jù)1:Garry Tan 作為 Sam 的接任者來執(zhí)掌 YC,我很難想象他們不是一類人。以及有八卦說 Sam 被懷疑有小號來發(fā)表自己的加速主義立場。
證據(jù)2:這次 Sam 被驅(qū)逐,很多掛著 e/acc 的人已經(jīng)把 Sam 當(dāng)做一個(gè)象征。從 GPTs 的倉促推出,對 Worldcoin 項(xiàng)目的大力投資,他是懂怎么「加速」的。
所以我傾向于認(rèn)為,Sam 的減速表象,是內(nèi)部妥協(xié),尤其是對 Ilya 的妥協(xié)。
超級對齊是什么?
我在今年 7 月看到 Ilya 說要成立一個(gè)「超級對齊」項(xiàng)目 的時(shí)候,也是一臉問號。難道 ChatGPT 這么生硬的表達(dá),還不夠?qū)R嗎?
但最近我才逐漸理解了 Ilya 的意思。可以看這段兩周前的采訪,以及被人爆料的,Ilya 在乎的「不是AI 有情感,而是 AI 有對人類真正的愛」。聽上去似乎是個(gè)讓人無語的「白蓮花阻礙進(jìn)步」的故事嗎?其實(shí)不然,可以聽一下:
為了真正理解這句話,我們需要審視一下現(xiàn)在的對齊,一種是所謂的價(jià)值觀層面(比如同性戀應(yīng)該被尊重),一種是所謂的話題層面(比如不讓搞黃色)。但這些真的夠嗎?如果是個(gè)聊天機(jī)器人(比如去年的 ChatGPT),那完全夠了。但如果是個(gè)具有自主決策和行動能力的超級智能呢,可能就有一個(gè)大大的問號了。
為什么超級「愛」對齊那么重要?
所以 超級對齊 項(xiàng)目,本質(zhì)是 Super-LOVE-alignment,超級「愛」對齊。這種 LOVE,是大愛,并非情愛,是人性底層那種無條件的,無關(guān)自我的,對于人類的愛,是一種「神性」的愛,一種就像 孔子、耶穌、釋迦摩尼 這些給文明帶來深遠(yuǎn)影響的無條件的愛。你或許覺得這樣講太戲劇性了,但如果人類的歷史上,沒有這些偉大的人格帶來的偉大的精神,作為文明的壓艙石,就憑自私的人類,今天的世界可能會糟糕的多。
一個(gè)有趣的個(gè)人插曲,是在3年前,我在一個(gè)分享中借鑒了唯識的思想,來把 AI 的意識發(fā)展分為,從感知(傳統(tǒng) AI,第1-5識),到認(rèn)知(GPT-4,第6識),到自我意識(Autonomous AI Agent,第7識),到智慧和愛(AI Being?第8識)。而 Ilya 相信,AI 能判斷價(jià)值觀是遠(yuǎn)遠(yuǎn)不夠的,因?yàn)槿祟悮v史上也很多次出現(xiàn)了價(jià)值觀上無懈可擊,卻最終釀成巨大悲劇的故事。
解法是什么?那就是讓 AI 對齊那種底層的「無條件對人類的愛」,這可能是現(xiàn)有的對齊技術(shù)通過 RLHF 注入無法做到的。只有擁有了這個(gè),那么 比人更強(qiáng)大的 AI 才真的不會毀滅掉我們。當(dāng)年我還認(rèn)為這是科幻小說該考慮的問題,可見他的層次之高。
那不能先推出 AGI,再修正呢?Ilya 認(rèn)為不能,他認(rèn)為技術(shù)的本質(zhì)類似于人類的生物進(jìn)化(這點(diǎn)諷刺地和 e/acc 的人一致)。但他認(rèn)為進(jìn)化的起點(diǎn)很重要。如果進(jìn)化的開始,是一個(gè)沒有「無條件對人類的愛」的 AI,那最終也一定會把我們?nèi)祟悗У綔侠锶ァ?/p>
變量:AI 是數(shù)字生命,還是工具
我們應(yīng)該成為一個(gè) e/acc,還是 超級「愛」對齊 主義者?又為什么是現(xiàn)在這個(gè)時(shí)間點(diǎn),突然驅(qū)逐掉 Sam?這些決策背后突變的因素到底是什么?
先講一個(gè)小背景:從各種消息源來個(gè)人猜測,OpenAI 內(nèi)部應(yīng)該在幾周前討論了 GPT-5 的初步結(jié)果,能力上應(yīng)該是非常顛覆的。而對下一步的行動,Sam 和 Ilya 應(yīng)該是有巨大的分歧(可以看到 Sam 在 APEC 上的發(fā)言,已經(jīng)證實(shí)了這次突破的存在)。
要解答上面的問題,取決于你認(rèn)為 GPT-5 上的智能體,是數(shù)字生命,還是工具?如果我們用最簡單的標(biāo)準(zhǔn),判斷是否是「數(shù)字生命」,那就是「是否具有完全的自主性」,如果依賴人類來決策和使用的技術(shù),那就只是「工具」。e/acc 最大的悖論在于,所有我們歷史上可以借鑒的案例,本質(zhì)上都是「更好的工具」,這可能是 e/acc 起作用的原因。但如果現(xiàn)在出現(xiàn)的是「數(shù)字生命」呢?社會的一份子,甚至是社會的管理者呢?一個(gè)比人強(qiáng)大的數(shù)字生命,真的可以沒有「底層的對人類的愛」嗎?如果真的那樣,我也會替人類的未來擔(dān)心,何止是失業(yè)呢。
所以,你是一個(gè) e/acc,還是一個(gè)超級對齊主義者,本質(zhì)上的區(qū)別在于你怎么看 AI 對社會的本質(zhì)。
所以,我偏向于相信 OpenAI 應(yīng)該搞定了一些關(guān)鍵技術(shù),然后生產(chǎn)了一個(gè)非常顛覆的新版本,自主性大大增強(qiáng)。而 Ilya 認(rèn)為在通過超級對齊為他注入「對人類的愛」之前,這個(gè)版本的 AI,必須要我們拋棄有效加速主義的思想。如果沒法形成共識,就拋棄擁有這個(gè)思想的人,立刻,馬上。
哪怕這個(gè)人,可能是人類歷史上最厲害的幾個(gè) CEO 之一。
審核編輯:黃飛
-
AI
+關(guān)注
關(guān)注
91文章
39911瀏覽量
301544 -
GPT
+關(guān)注
關(guān)注
0文章
368瀏覽量
16883 -
OpenAI
+關(guān)注
關(guān)注
9文章
1245瀏覽量
10117
原文標(biāo)題:Sam 和 Ilya 的深層矛盾:有效加速主義 vs. 超級"愛"對齊
文章出處:【微信號:zenRRan,微信公眾號:深度學(xué)習(xí)自然語言處理】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
《Altium Designeder 25電路設(shè)計(jì)精講實(shí)踐》SAM V71章節(jié)有感
Atmel SAM C20系列微控制器:工業(yè)自動化的理想之選
Atmel SAM3S系列32位Flash微控制器深度剖析
Atmel | SMART SAM3S系列MCU:高集成與低功耗的完美結(jié)合
深入解析AT91SAM7SE512/256/32:強(qiáng)大的ARM基Flash MCU
SAM(通用圖像分割基礎(chǔ)模型)丨基于BM1684X模型部署指南
水浸超聲掃描顯微鏡(C-SAM)與其他無損檢測技術(shù)對比分析
?SAM G55音頻開發(fā)板技術(shù)解析與應(yīng)用指南
SAM9X60-Curiosity評估板:高性能嵌入式開發(fā)的理想起點(diǎn)
Microchip SAM9X7 系列:面向高性能嵌入式系統(tǒng)的超低功耗 Arm? MPU
Microchip SAM9X75:面向高性能嵌入式應(yīng)用的 Arm926EJ-S MPU
Zettabyte任命Sam Lawn為全球首席財(cái)務(wù)官
圖解環(huán)路設(shè)計(jì)及控制技術(shù)探討
英飛凌與富士等外資品牌IGBT模塊價(jià)格戰(zhàn)策略的本質(zhì)與深層危機(jī)分析
探討Sam 和 Ilya 的深層矛盾
評論