一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

探討Sam 和 Ilya 的深層矛盾

深度學(xué)習(xí)自然語言處理 ? 來源:深度學(xué)習(xí)自然語言處理 ? 2023-11-24 11:28 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

我很懶,愛寫字但從不發(fā),但因?yàn)?OpenAI 這次分裂的歷史意義太大,突然把我這幾個(gè)月不太理解的事情,串到了一起。所以連夜寫了人生第一篇公眾號(hào)。

本文不討論董事會(huì)政變的八卦,OpenAI 奇怪的治理結(jié)構(gòu),以及 Sam 和 Ilya 到底誰對(duì)誰錯(cuò),我充分尊重這兩個(gè)人的底層品質(zhì)。如此不可思議的事情,必定藏著某種深層沖突。無論 Sam 最終是否會(huì)離開,本文探討的沖突,應(yīng)該會(huì)持續(xù)有效:

有效加速主義 和 超級(jí)“愛”對(duì)齊 的理念沖突,以及一個(gè)變量:GPT-5 是數(shù)字生命,還是工具?

這些詞看著唬人,嘗試解釋下。

有效加速主義

英文叫做 e/acc,是一群硅谷的科技精英們搞出來的一種科技價(jià)值觀運(yùn)動(dòng),你會(huì)發(fā)現(xiàn)有大量的 twitter 賬號(hào)帶有這個(gè) e/acc 的后綴,可見其受眾之廣泛。

那這到底是什么玩意兒,以及為什么會(huì)和 Sam 被驅(qū)逐有關(guān)?首先就要解釋 e/acc。我的簡單版理解:

人類應(yīng)該無條件地加速技術(shù)創(chuàng)新,并快速推出他們,來顛覆社會(huì)結(jié)構(gòu)。

e/acc 運(yùn)動(dòng)認(rèn)為這種對(duì)社會(huì)的顛覆風(fēng)險(xiǎn),本質(zhì)上對(duì)人類有利,因?yàn)闀?huì)迫使人類適應(yīng),從而幫助我們更快達(dá)到更高的意識(shí)水平。

過去三百年人類隨著技術(shù)的顛覆而進(jìn)化,結(jié)果顯然都非常好。

很顯然,e/acc 的支持者對(duì) AGI 的態(tài)度也是一致的:讓盡可能多的人參與,更快地推出產(chǎn)品,更快地顛覆,從而讓人類更好地進(jìn)化。是不是,有點(diǎn)「大力出奇跡」的意思?

Sam Altman 是 有效加速主義者嗎?

我認(rèn)為答案很確定,是的。盡管很多人說,你看 Sam 還去國會(huì)呼吁減速 AI 的發(fā)展,天天說 AI 的風(fēng)險(xiǎn),不是應(yīng)該是個(gè)「減速主義者」嗎?其實(shí)他從來沒有公開表達(dá)過自己 e/acc 的立場。但是似乎有一些蛛絲馬跡讓人相信。

wKgZomVgGP2AL1b3AAJeGwwWfJ8378.png

MindOS 上分析到的小道消息

證據(jù)1:Garry Tan 作為 Sam 的接任者來執(zhí)掌 YC,我很難想象他們不是一類人。以及有八卦說 Sam 被懷疑有小號(hào)來發(fā)表自己的加速主義立場。

證據(jù)2:這次 Sam 被驅(qū)逐,很多掛著 e/acc 的人已經(jīng)把 Sam 當(dāng)做一個(gè)象征。從 GPTs 的倉促推出,對(duì) Worldcoin 項(xiàng)目的大力投資,他是懂怎么「加速」的。

所以我傾向于認(rèn)為,Sam 的減速表象,是內(nèi)部妥協(xié),尤其是對(duì) Ilya 的妥協(xié)。

超級(jí)對(duì)齊是什么?

我在今年 7 月看到 Ilya 說要成立一個(gè)「超級(jí)對(duì)齊」項(xiàng)目 的時(shí)候,也是一臉問號(hào)。難道 ChatGPT 這么生硬的表達(dá),還不夠?qū)R嗎?

但最近我才逐漸理解了 Ilya 的意思??梢钥催@段兩周前的采訪,以及被人爆料的,Ilya 在乎的「不是AI 有情感,而是 AI 有對(duì)人類真正的愛」。聽上去似乎是個(gè)讓人無語的「白蓮花阻礙進(jìn)步」的故事嗎?其實(shí)不然,可以聽一下:

為了真正理解這句話,我們需要審視一下現(xiàn)在的對(duì)齊,一種是所謂的價(jià)值觀層面(比如同性戀應(yīng)該被尊重),一種是所謂的話題層面(比如不讓搞黃色)。但這些真的夠嗎?如果是個(gè)聊天機(jī)器人(比如去年的 ChatGPT),那完全夠了。但如果是個(gè)具有自主決策和行動(dòng)能力的超級(jí)智能呢,可能就有一個(gè)大大的問號(hào)了。

為什么超級(jí)「愛」對(duì)齊那么重要?

所以 超級(jí)對(duì)齊 項(xiàng)目,本質(zhì)是 Super-LOVE-alignment,超級(jí)「愛」對(duì)齊。這種 LOVE,是大愛,并非情愛,是人性底層那種無條件的,無關(guān)自我的,對(duì)于人類的愛,是一種「神性」的愛,一種就像 孔子、耶穌、釋迦摩尼 這些給文明帶來深遠(yuǎn)影響的無條件的愛。你或許覺得這樣講太戲劇性了,但如果人類的歷史上,沒有這些偉大的人格帶來的偉大的精神,作為文明的壓艙石,就憑自私的人類,今天的世界可能會(huì)糟糕的多。

一個(gè)有趣的個(gè)人插曲,是在3年前,我在一個(gè)分享中借鑒了唯識(shí)的思想,來把 AI 的意識(shí)發(fā)展分為,從感知(傳統(tǒng) AI,第1-5識(shí)),到認(rèn)知(GPT-4,第6識(shí)),到自我意識(shí)(Autonomous AI Agent,第7識(shí)),到智慧和愛(AI Being?第8識(shí))。而 Ilya 相信,AI 能判斷價(jià)值觀是遠(yuǎn)遠(yuǎn)不夠的,因?yàn)槿祟悮v史上也很多次出現(xiàn)了價(jià)值觀上無懈可擊,卻最終釀成巨大悲劇的故事。


解法是什么?那就是讓 AI 對(duì)齊那種底層的「無條件對(duì)人類的愛」,這可能是現(xiàn)有的對(duì)齊技術(shù)通過 RLHF 注入無法做到的。只有擁有了這個(gè),那么 比人更強(qiáng)大的 AI 才真的不會(huì)毀滅掉我們。當(dāng)年我還認(rèn)為這是科幻小說該考慮的問題,可見他的層次之高。

那不能先推出 AGI,再修正呢?Ilya 認(rèn)為不能,他認(rèn)為技術(shù)的本質(zhì)類似于人類的生物進(jìn)化(這點(diǎn)諷刺地和 e/acc 的人一致)。但他認(rèn)為進(jìn)化的起點(diǎn)很重要。如果進(jìn)化的開始,是一個(gè)沒有「無條件對(duì)人類的愛」的 AI,那最終也一定會(huì)把我們?nèi)祟悗У綔侠锶ァ?/p>

變量:AI 是數(shù)字生命,還是工具

我們應(yīng)該成為一個(gè) e/acc,還是 超級(jí)「愛」對(duì)齊 主義者?又為什么是現(xiàn)在這個(gè)時(shí)間點(diǎn),突然驅(qū)逐掉 Sam?這些決策背后突變的因素到底是什么?

先講一個(gè)小背景:從各種消息源來個(gè)人猜測,OpenAI 內(nèi)部應(yīng)該在幾周前討論了 GPT-5 的初步結(jié)果,能力上應(yīng)該是非常顛覆的。而對(duì)下一步的行動(dòng),Sam 和 Ilya 應(yīng)該是有巨大的分歧(可以看到 Sam 在 APEC 上的發(fā)言,已經(jīng)證實(shí)了這次突破的存在)。

要解答上面的問題,取決于你認(rèn)為 GPT-5 上的智能體,是數(shù)字生命,還是工具?如果我們用最簡單的標(biāo)準(zhǔn),判斷是否是「數(shù)字生命」,那就是「是否具有完全的自主性」,如果依賴人類來決策和使用的技術(shù),那就只是「工具」。e/acc 最大的悖論在于,所有我們歷史上可以借鑒的案例,本質(zhì)上都是「更好的工具」,這可能是 e/acc 起作用的原因。但如果現(xiàn)在出現(xiàn)的是「數(shù)字生命」呢?社會(huì)的一份子,甚至是社會(huì)的管理者呢?一個(gè)比人強(qiáng)大的數(shù)字生命,真的可以沒有「底層的對(duì)人類的愛」嗎?如果真的那樣,我也會(huì)替人類的未來擔(dān)心,何止是失業(yè)呢。

所以,你是一個(gè) e/acc,還是一個(gè)超級(jí)對(duì)齊主義者,本質(zhì)上的區(qū)別在于你怎么看 AI 對(duì)社會(huì)的本質(zhì)。

所以,我偏向于相信 OpenAI 應(yīng)該搞定了一些關(guān)鍵技術(shù),然后生產(chǎn)了一個(gè)非常顛覆的新版本,自主性大大增強(qiáng)。而 Ilya 認(rèn)為在通過超級(jí)對(duì)齊為他注入「對(duì)人類的愛」之前,這個(gè)版本的 AI,必須要我們拋棄有效加速主義的思想。如果沒法形成共識(shí),就拋棄擁有這個(gè)思想的人,立刻,馬上。

哪怕這個(gè)人,可能是人類歷史上最厲害的幾個(gè) CEO 之一。

審核編輯:黃飛

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • AI
    AI
    +關(guān)注

    關(guān)注

    88

    文章

    35109

    瀏覽量

    279602
  • GPT
    GPT
    +關(guān)注

    關(guān)注

    0

    文章

    368

    瀏覽量

    16084
  • OpenAI
    +關(guān)注

    關(guān)注

    9

    文章

    1207

    瀏覽量

    8908

原文標(biāo)題:Sam 和 Ilya 的深層矛盾:有效加速主義 vs. 超級(jí)"愛"對(duì)齊

文章出處:【微信號(hào):zenRRan,微信公眾號(hào):深度學(xué)習(xí)自然語言處理】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    微電機(jī)軸球面成型加工方法的探討

    摘要:微電機(jī)軸端設(shè)計(jì)成R球面是減小電機(jī)振動(dòng)和噪聲的一種重要方法。為了提高微電機(jī)軸端R球面的加工效率,從微電機(jī)軸端R球面加工的相對(duì)運(yùn)動(dòng)關(guān)系人手,對(duì)微電機(jī)軸球面的磨削成型方法進(jìn)行探討,分析嵌件輪、工件
    發(fā)表于 06-24 14:07

    同步電機(jī)拖不動(dòng)負(fù)載的故障探討

    純分享帖,需要者可點(diǎn)擊附件免費(fèi)獲取完整資料~~~*附件:同步電機(jī)拖不動(dòng)負(fù)載的故障探討.pdf【免責(zé)聲明】本文系網(wǎng)絡(luò)轉(zhuǎn)載,版權(quán)歸原作者所有。本文所用視頻、圖片、文字如涉及作品版權(quán)問題,請(qǐng)第一時(shí)間告知,刪除內(nèi)容!
    發(fā)表于 06-20 17:47

    惡劣海況下,CSD船用隔離變壓器如何破解電力孤島危機(jī)?

    船舶電力系統(tǒng)設(shè)計(jì)的深層矛盾:如何在復(fù)雜環(huán)境下實(shí)現(xiàn)電力的可靠傳輸與安全隔離?一、船舶電力孤島的形成機(jī)制船舶電力系統(tǒng)的脆弱性源于三大矛盾:1.負(fù)載動(dòng)態(tài)變化:集裝箱船在
    的頭像 發(fā)表于 05-23 08:59 ?198次閱讀
    惡劣海況下,CSD船用隔離變壓器如何破解電力孤島危機(jī)?

    超聲波T-SAM與C-SAM模式的區(qū)別

    本文介紹了超聲波的T-SAM與C-SAM兩種模式的區(qū)別。
    的頭像 發(fā)表于 05-21 15:26 ?306次閱讀
    超聲波T-<b class='flag-5'>SAM</b>與C-<b class='flag-5'>SAM</b>模式的區(qū)別

    模擬地和數(shù)字地混合PCB布局探討

    這是我的產(chǎn)品目前的電路拓?fù)洌幸恍┮蓡栂敫罄袀児餐?b class='flag-5'>探討一下。 圖1,模擬地和數(shù)字地分開,在電源入口處相連,紅色是模擬地的連接示意,綠色為數(shù)字電流的返回路徑。此方案感覺不妥當(dāng)?shù)氖菙?shù)字電流的返回
    發(fā)表于 04-29 22:35

    電機(jī)繞組滾動(dòng)烘干爐防爆安全技術(shù)探討

    電機(jī)繞組滾動(dòng)烘干工藝在電機(jī)行業(yè)中逐步推廣應(yīng)用,但該防爆滾動(dòng)烘干設(shè)備的制造卻仍沒有統(tǒng)一的標(biāo)準(zhǔn),這就為設(shè)備的制造、使用、維修、保養(yǎng)埋下了隱患。文章主要探討了防爆滾動(dòng)烘干爐的防爆技術(shù),以期引起同行對(duì)防爆
    發(fā)表于 04-27 19:28

    英飛凌與富士等外資品牌IGBT模塊價(jià)格戰(zhàn)策略的本質(zhì)與深層危機(jī)分析

    英飛凌與富士等外資品牌IGBT模塊大幅度降價(jià)策略的本質(zhì)與深層危機(jī)分析 英飛凌、富士等外資品牌IGBT模塊在中國市場掀起了降價(jià)超過30%的IGBT模塊價(jià)格戰(zhàn),其背后的邏輯不僅是市場份額爭奪的“回光返照
    的頭像 發(fā)表于 03-21 13:18 ?554次閱讀
    英飛凌與富士等外資品牌IGBT模塊價(jià)格戰(zhàn)策略的本質(zhì)與<b class='flag-5'>深層</b>危機(jī)分析

    解決導(dǎo)線之間的矛盾:導(dǎo)線智能間隔棒監(jiān)測裝置的專業(yè)解析

    解決導(dǎo)線之間的矛盾:導(dǎo)線智能間隔棒監(jiān)測裝置的專業(yè)解析 在高壓輸電線路中,導(dǎo)線智能間隔棒監(jiān)測裝置作為一種集先進(jìn)技術(shù)與創(chuàng)新設(shè)計(jì)于一體的設(shè)備,正逐漸成為保障電網(wǎng)安全穩(wěn)定運(yùn)行的重要工具。以下是對(duì)該裝置的專業(yè)
    的頭像 發(fā)表于 02-21 09:32 ?545次閱讀

    R&amp;S?SAM100 系統(tǒng)放大器

    RS?SAM100 系統(tǒng)放大器是一種超寬帶固態(tài)微波放大器,頻率范圍為 2 GHz 至 20 GHz。RS?SAM100 還適用于替代電子管放大器和由窄帶單級(jí)放大器組成的多頻段組件。 主要特點(diǎn) 超寬
    的頭像 發(fā)表于 02-06 14:50 ?305次閱讀
    R&amp;S?<b class='flag-5'>SAM</b>100 系統(tǒng)放大器

    揭秘深層的華美:用于藝術(shù)品與考古檢測的高光譜技術(shù)

    歷經(jīng)歲月的文物與藝術(shù)品的避免不了失真的遺憾,而高光譜技術(shù)恰巧能夠揭示表象下的深層信息。友思特新品 MUSES 9系列光譜相機(jī),其高空間分辨率與超寬光譜范圍的優(yōu)勢特征,幫助解密古文物與藝術(shù)品隱藏的歷史真相。
    的頭像 發(fā)表于 02-06 14:22 ?460次閱讀
    揭秘<b class='flag-5'>深層</b>的華美:用于藝術(shù)品與考古檢測的高光譜技術(shù)

    SAM IoT Wx v2硬件用戶指南

    電子發(fā)燒友網(wǎng)站提供《SAM IoT Wx v2硬件用戶指南.pdf》資料免費(fèi)下載
    發(fā)表于 01-21 14:02 ?0次下載
    <b class='flag-5'>SAM</b> IoT Wx v2硬件用戶指南

    ADS1256對(duì)24bit ADC采集的數(shù)據(jù)進(jìn)行在模擬工程計(jì)算器上進(jìn)行FFT轉(zhuǎn)換,為什么ENOB和SNR的值這么矛盾呢?

    對(duì)24bit ADC采集的數(shù)據(jù)進(jìn)行在模擬工程計(jì)算器上進(jìn)行FFT轉(zhuǎn)換,為何ENOB和SNR的值這么矛盾呢,難道SNR不應(yīng)該是大于130dB嗎?
    發(fā)表于 11-26 07:53

    R&amp;S?SAM100 系統(tǒng)放大器

    RS?SAM100 系統(tǒng)放大器是一種超寬帶固態(tài)微波放大器,頻率范圍為 2 GHz 至 20 GHz。RS?SAM100 還適用于替代電子管放大器和由窄帶單級(jí)放大器組成的多頻段組件。 綜述 1
    的頭像 發(fā)表于 11-22 17:30 ?450次閱讀
    R&amp;S?<b class='flag-5'>SAM</b>100 系統(tǒng)放大器

    Sam Altman親自推銷Rain AI尋求新融資

    近日,據(jù)知情人士透露,OpenAI的聯(lián)合創(chuàng)始人Sam Altman正親自出馬,向其現(xiàn)有的投資者推銷一家名為Rain AI的新興企業(yè),期望能夠獲得他們的資金支持。Altman目前正積極推動(dòng)Rain
    的頭像 發(fā)表于 11-20 10:53 ?767次閱讀

    Sam Altman的全球AI基礎(chǔ)設(shè)施建設(shè)計(jì)劃加速推進(jìn)

    在科技日新月異的今天,人工智能(AI)作為最具顛覆性的技術(shù)之一,正以前所未有的速度改變著我們的世界。9月4日,一則來自業(yè)界的重磅消息再次將全球的目光聚焦于AI領(lǐng)域——OpenAI的首席執(zhí)行官Sam
    的頭像 發(fā)表于 09-04 16:13 ?889次閱讀