国产精品久久久aaaa,日日干夜夜操天天插,亚洲乱熟女香蕉一区二区三区少妇,99精品国产高清一区二区三区,国产成人精品一区二区色戒,久久久国产精品成人免费,亚洲精品毛片久久久久,99久久婷婷国产综合精品电影,国产一区二区三区任你鲁

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

探討Sam 和 Ilya 的深層矛盾

深度學習自然語言處理 ? 來源:深度學習自然語言處理 ? 2023-11-24 11:28 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

我很懶,愛寫字但從不發,但因為 OpenAI 這次分裂的歷史意義太大,突然把我這幾個月不太理解的事情,串到了一起。所以連夜寫了人生第一篇公眾號。

本文不討論董事會政變的八卦,OpenAI 奇怪的治理結構,以及 Sam 和 Ilya 到底誰對誰錯,我充分尊重這兩個人的底層品質。如此不可思議的事情,必定藏著某種深層沖突。無論 Sam 最終是否會離開,本文探討的沖突,應該會持續有效:

有效加速主義 和 超級“愛”對齊 的理念沖突,以及一個變量:GPT-5 是數字生命,還是工具?

這些詞看著唬人,嘗試解釋下。

有效加速主義

英文叫做 e/acc,是一群硅谷的科技精英們搞出來的一種科技價值觀運動,你會發現有大量的 twitter 賬號帶有這個 e/acc 的后綴,可見其受眾之廣泛。

那這到底是什么玩意兒,以及為什么會和 Sam 被驅逐有關?首先就要解釋 e/acc。我的簡單版理解:

人類應該無條件地加速技術創新,并快速推出他們,來顛覆社會結構。

e/acc 運動認為這種對社會的顛覆風險,本質上對人類有利,因為會迫使人類適應,從而幫助我們更快達到更高的意識水平。

過去三百年人類隨著技術的顛覆而進化,結果顯然都非常好。

很顯然,e/acc 的支持者對 AGI 的態度也是一致的:讓盡可能多的人參與,更快地推出產品,更快地顛覆,從而讓人類更好地進化。是不是,有點「大力出奇跡」的意思?

Sam Altman 是 有效加速主義者嗎?

我認為答案很確定,是的。盡管很多人說,你看 Sam 還去國會呼吁減速 AI 的發展,天天說 AI 的風險,不是應該是個「減速主義者」嗎?其實他從來沒有公開表達過自己 e/acc 的立場。但是似乎有一些蛛絲馬跡讓人相信。

wKgZomVgGP2AL1b3AAJeGwwWfJ8378.png

MindOS 上分析到的小道消息

證據1:Garry Tan 作為 Sam 的接任者來執掌 YC,我很難想象他們不是一類人。以及有八卦說 Sam 被懷疑有小號來發表自己的加速主義立場。

證據2:這次 Sam 被驅逐,很多掛著 e/acc 的人已經把 Sam 當做一個象征。從 GPTs 的倉促推出,對 Worldcoin 項目的大力投資,他是懂怎么「加速」的。

所以我傾向于認為,Sam 的減速表象,是內部妥協,尤其是對 Ilya 的妥協

超級對齊是什么?

我在今年 7 月看到 Ilya 說要成立一個「超級對齊」項目 的時候,也是一臉問號。難道 ChatGPT 這么生硬的表達,還不夠對齊嗎?

但最近我才逐漸理解了 Ilya 的意思。可以看這段兩周前的采訪,以及被人爆料的,Ilya 在乎的「不是AI 有情感,而是 AI 有對人類真正的愛」。聽上去似乎是個讓人無語的「白蓮花阻礙進步」的故事嗎?其實不然,可以聽一下:

為了真正理解這句話,我們需要審視一下現在的對齊,一種是所謂的價值觀層面(比如同性戀應該被尊重),一種是所謂的話題層面(比如不讓搞黃色)。但這些真的夠嗎?如果是個聊天機器人(比如去年的 ChatGPT),那完全夠了。但如果是個具有自主決策和行動能力的超級智能呢,可能就有一個大大的問號了。

為什么超級「愛」對齊那么重要?

所以 超級對齊 項目,本質是 Super-LOVE-alignment,超級「愛」對齊。這種 LOVE,是大愛,并非情愛,是人性底層那種無條件的,無關自我的,對于人類的愛,是一種「神性」的愛,一種就像 孔子、耶穌、釋迦摩尼 這些給文明帶來深遠影響的無條件的愛。你或許覺得這樣講太戲劇性了,但如果人類的歷史上,沒有這些偉大的人格帶來的偉大的精神,作為文明的壓艙石,就憑自私的人類,今天的世界可能會糟糕的多。

一個有趣的個人插曲,是在3年前,我在一個分享中借鑒了唯識的思想,來把 AI 的意識發展分為,從感知(傳統 AI,第1-5識),到認知(GPT-4,第6識),到自我意識(Autonomous AI Agent,第7識),到智慧和愛(AI Being?第8識)。而 Ilya 相信,AI 能判斷價值觀是遠遠不夠的,因為人類歷史上也很多次出現了價值觀上無懈可擊,卻最終釀成巨大悲劇的故事。


解法是什么?那就是讓 AI 對齊那種底層的「無條件對人類的愛」,這可能是現有的對齊技術通過 RLHF 注入無法做到的。只有擁有了這個,那么 比人更強大的 AI 才真的不會毀滅掉我們。當年我還認為這是科幻小說該考慮的問題,可見他的層次之高。

那不能先推出 AGI,再修正呢?Ilya 認為不能,他認為技術的本質類似于人類的生物進化(這點諷刺地和 e/acc 的人一致)。但他認為進化的起點很重要。如果進化的開始,是一個沒有「無條件對人類的愛」的 AI,那最終也一定會把我們人類帶到溝里去。

變量:AI 是數字生命,還是工具

我們應該成為一個 e/acc,還是 超級「愛」對齊 主義者?又為什么是現在這個時間點,突然驅逐掉 Sam?這些決策背后突變的因素到底是什么?

先講一個小背景:從各種消息源來個人猜測,OpenAI 內部應該在幾周前討論了 GPT-5 的初步結果,能力上應該是非常顛覆的。而對下一步的行動,Sam 和 Ilya 應該是有巨大的分歧(可以看到 Sam 在 APEC 上的發言,已經證實了這次突破的存在)。

要解答上面的問題,取決于你認為 GPT-5 上的智能體,是數字生命,還是工具?如果我們用最簡單的標準,判斷是否是「數字生命」,那就是「是否具有完全的自主性」,如果依賴人類來決策和使用的技術,那就只是「工具」。e/acc 最大的悖論在于,所有我們歷史上可以借鑒的案例,本質上都是「更好的工具」,這可能是 e/acc 起作用的原因。但如果現在出現的是「數字生命」呢?社會的一份子,甚至是社會的管理者呢?一個比人強大的數字生命,真的可以沒有「底層的對人類的愛」嗎?如果真的那樣,我也會替人類的未來擔心,何止是失業呢。

所以,你是一個 e/acc,還是一個超級對齊主義者,本質上的區別在于你怎么看 AI 對社會的本質。

所以,我偏向于相信 OpenAI 應該搞定了一些關鍵技術,然后生產了一個非常顛覆的新版本,自主性大大增強。而 Ilya 認為在通過超級對齊為他注入「對人類的愛」之前,這個版本的 AI,必須要我們拋棄有效加速主義的思想。如果沒法形成共識,就拋棄擁有這個思想的人,立刻,馬上。

哪怕這個人,可能是人類歷史上最厲害的幾個 CEO 之一。

審核編輯:黃飛

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • AI
    AI
    +關注

    關注

    91

    文章

    39793

    瀏覽量

    301389
  • GPT
    GPT
    +關注

    關注

    0

    文章

    368

    瀏覽量

    16871
  • OpenAI
    +關注

    關注

    9

    文章

    1245

    瀏覽量

    10067

原文標題:Sam 和 Ilya 的深層矛盾:有效加速主義 vs. 超級"愛"對齊

文章出處:【微信號:zenRRan,微信公眾號:深度學習自然語言處理】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    《Altium Designeder 25電路設計精講實踐》SAM V71章節有感

    全篇讀完,作為軟件的配套教程十分的得心應手,每級菜單都配有圖文并茂,實操方便,理解也能到位。其中 閱讀《AD25電路設計精進實踐》中SAM V71仿真開發板章節,對照書本實際操作一番,對AD25從
    發表于 02-27 15:52

    Atmel SAM C20系列微控制器:工業自動化的理想之選

    Atmel SAM C20系列微控制器:工業自動化的理想之選 在工業自動化、家電及其他5V應用領域,微控制器的性能和功能至關重要。Atmel推出的SAM C20系列微控制器,憑借其強大的性能、豐富
    的頭像 發表于 02-26 15:50 ?94次閱讀

    Atmel SAM3S系列32位Flash微控制器深度剖析

    Atmel SAM3S系列32位Flash微控制器深度剖析 在當今的電子世界中,高性能、低功耗的微控制器是眾多電子設備的核心。Atmel的SAM3S系列32位Flash微控制器,憑借其卓越的性能和豐
    的頭像 發表于 02-25 11:40 ?183次閱讀

    Atmel | SMART SAM3S系列MCU:高集成與低功耗的完美結合

    Atmel | SMART SAM3S系列MCU:高集成與低功耗的完美結合 在電子設計領域,一款性能卓越、功能豐富且功耗低的微控制器(MCU)往往是工程師們的理想之選。Atmel | SMART
    的頭像 發表于 02-11 16:30 ?374次閱讀

    深入解析AT91SAM7SE512/256/32:強大的ARM基Flash MCU

    深入解析AT91SAM7SE512/256/32:強大的ARM基Flash MCU 在嵌入式系統設計領域,選擇一款性能卓越、功能豐富且穩定可靠的微控制器(MCU)至關重要。AT91SAM
    的頭像 發表于 02-09 17:30 ?341次閱讀

    SAM(通用圖像分割基礎模型)丨基于BM1684X模型部署指南

    前言SAM是Meta提出的一個分割一切的提示型模型,其在1100萬張圖像上訓練了超過10億個掩碼,實現了強大的零樣本泛化,突破了分割界限。本例程對SAM官方開源倉庫的模型和算法進行移植,使之能
    的頭像 發表于 01-12 16:17 ?305次閱讀
    <b class='flag-5'>SAM</b>(通用圖像分割基礎模型)丨基于BM1684X模型部署指南

    水浸超聲掃描顯微鏡(C-SAM)與其他無損檢測技術對比分析

    (C-SAM)以其高分辨率與成像清晰度著稱,尤其適合對微小缺陷的精確檢測。水浸超聲掃描顯微鏡(C-SAM)水浸超聲掃描顯微鏡基于高頻超聲波在介質中的傳播特性進行檢測。其
    的頭像 發表于 12-04 14:08 ?301次閱讀
    水浸超聲掃描顯微鏡(C-<b class='flag-5'>SAM</b>)與其他無損檢測技術對比分析

    ?SAM G55音頻開發板技術解析與應用指南

    Microchip Technology SAM G55音頻Curiosity開發板(EV78Y10A)是一款用于基于SAM G55微控制器的音頻應用的演示和開發平臺。SAM G55 MCU是高性能
    的頭像 發表于 10-13 15:11 ?621次閱讀
    ?<b class='flag-5'>SAM</b> G55音頻開發板技術解析與應用指南

    SAM9X60-Curiosity評估板:高性能嵌入式開發的理想起點

    Microchip Technology EV40E67A Curiosity板基于SAM9X60D1G SiP高性能、低功耗ARM926EJ-S CPU嵌入式微處理器而打造。 MPU的運行頻率為
    的頭像 發表于 10-13 14:04 ?735次閱讀
    <b class='flag-5'>SAM</b>9X60-Curiosity評估板:高性能嵌入式開發的理想起點

    Microchip SAM9X7 系列:面向高性能嵌入式系統的超低功耗 Arm? MPU

    Microchip Technology SAM9X70超低功耗嵌入式微處理器(MPU)是基于ARM926EJ-S CPU的MPU,運行頻率高達800MHz。SAM9X70支持各種NVM接口,包括
    的頭像 發表于 10-11 10:44 ?694次閱讀
    Microchip <b class='flag-5'>SAM</b>9X7 系列:面向高性能嵌入式系統的超低功耗 Arm? MPU

    Microchip SAM9X75:面向高性能嵌入式應用的 Arm926EJ-S MPU

    Microchip Technology SAM9X75 800MHz ARM926 MPU是一款基于CPU的高性能嵌入式處理器。 Microchip Technology SAM9X75 MPU
    的頭像 發表于 09-30 15:42 ?1060次閱讀
    Microchip <b class='flag-5'>SAM</b>9X75:面向高性能嵌入式應用的 Arm926EJ-S MPU

    Zettabyte任命Sam Lawn為全球首席財務官

    專注于GPU基礎設施、AIDC優化軟件與Neo-Cloud計算的全棧AI解決方案提供商Zettabyte已任命Sam Lawn為全球首席財務官,該任命即刻生效。
    的頭像 發表于 08-30 15:12 ?1172次閱讀

    圖解環路設計及控制技術探討

    由于之前缺乏控制理論方面的知識在剛接觸反饋環路的時候對其中的很多名詞不是很明白,這次準備采用圖解的方法逐一的搞清楚這些名詞并且試圖找出一種便捷的設置零、極點的方法。最后準備再探討一下關于控制技術
    發表于 08-22 17:39

    超聲波T-SAM與C-SAM模式的區別

    本文介紹了超聲波的T-SAM與C-SAM兩種模式的區別。
    的頭像 發表于 05-21 15:26 ?1594次閱讀
    超聲波T-<b class='flag-5'>SAM</b>與C-<b class='flag-5'>SAM</b>模式的區別

    英飛凌與富士等外資品牌IGBT模塊價格戰策略的本質與深層危機分析

    英飛凌與富士等外資品牌IGBT模塊大幅度降價策略的本質與深層危機分析 英飛凌、富士等外資品牌IGBT模塊在中國市場掀起了降價超過30%的IGBT模塊價格戰,其背后的邏輯不僅是市場份額爭奪的“回光返照
    的頭像 發表于 03-21 13:18 ?1274次閱讀
    英飛凌與富士等外資品牌IGBT模塊價格戰策略的本質與<b class='flag-5'>深層</b>危機分析