※ 本文轉寄自 ptt.cc, 文章原始頁面
看板Gossiping
標題

[新聞] ChatGPT 之父警告 AI 可能滅絕人類,350 名 AI 權威連署盡快監管

時間
最新2023-06-01 02:22:00
留言191則留言,146人參與討論
推噓96 ( 1081271 )
1.媒體來源:科技新報 2.記者署名: May 31, 2023 by 愛范兒 3.完整新聞標題: ChatGPT 之父警告 AI 可能滅絕人類,350 名 AI 權威連署盡快監管 4.完整新聞內文: AI 界又出現重要連署,「ChatGPT 之父」Sam Altman 等 350 位 AI 權威都加入呼籲行 列,擔憂開發中 AI 可能對人類構成生存威脅。 這封信主旨為:Mitigating the risk of extinction from AI should be a global pri ority alongside other societal-scale risks such as pandemics and nuclear war. (降低人工智慧滅絕風險,應與流行病和核戰等其他社會規模風險一樣為全球優先事項) 。 發起人為三家領先 AI 企業高層:OpenAI 首席執行長 Sam Altman、Google DeepMind 首 席執行長 Demis Hassabis、Anthropic 首席執行長 Dario Amodei。其他重要名單還有人 工智慧「教父」Geoffrey Hinton 和 Yoshua Bengio。 https://i.imgur.com/MPg73zS.jpg
[新聞] ChatGPT 之父警告 AI 可能滅絕人類,350
超過 350 名人工智慧高層、研究員和工程師都參加這由非營利組織 Center for AI Safe ty 發起的連署,認為人工智慧可能導致人類滅絕的風險,應視為與流行病和核戰同等的 社會風險。如今人們越來越擔心ChatGPT 等人工智慧模型可能對社會和工作造成威脅,很 多人呼籲完整規範 AI 業,否則將對社會造成不可挽回的破壞。 AI 不斷狂飆,但監管審查法規還未跟上,代表沒人能確保 AI 工具及使用 AI 工具時是 否安全。上週 Sam Altman 和 OpenAI 兩位高層提出應建立類似國際原子能機構的國際組 織監管 AI,呼籲國際領先人工智慧企業應合作,並要求政府強化監管尖端人工智慧企業 。 其實 3 月就出現停止 AI 研究 6 個月的連署信,由馬斯克帶頭,呼籲所有 AI 實驗立即 暫停研究比 GPT-4 更先進的 AI 模型至少 6 個月,因 AI 進步速度太驚人,但監管審查 法規還未跟上,代表沒人能保證 AI 工具和使用時的安全,這封信獲 2018 年圖靈獎得主 Yoshua Bengio、蘋果聯合創辦人史蒂夫‧沃茲尼亞克、Skype聯合創辦人、Pinterest聯 合創辦人、Stability AI CEO 等多位知名科技大頭支援,截稿前連署數達 1,125 人。 連署信翻譯如下,供讀者參考這些科技大頭在擔心什麼。 ““人工智慧有與人類競爭的智慧,可能造成社會和人類深刻風險,已透過大量研究證實 ,並取得頂級 AI 實驗室認可。正如阿西洛馬人工智慧原則(Asilomar AI Principles) 指出,先進 AI 可能代表地球生命重大變革,應以同等關注和資源規劃管理。 即使最近幾個月,AI 實驗室開發部署越來越強大數位思維陷入失控競爭,沒人能理解、 預測或可靠控制這些數位思維,即使創造者也無法做到。現代 AI 系統的通用任務有與人 類競爭的能力,我們必須問自己: 應該讓機器充斥資訊管道,傳播宣傳和說謊嗎? 應該將所有工作自動化,包括讓人有滿足感的工作嗎? 應該發展可能最後超過取代我們的非人類思維嗎? 我們應該冒失控文明的風險嗎? 這些決策不該由非選舉產生的科技領導人負責。只有當我們確信 AI 系統影響是積極、風 險可控,才開發強大的 AI 系統。這種信心必須有充分理由,並隨著系統潛在影響增加而 強化。OpenAI 最近人工智慧聲明指出:「某些時候,可能需要開始訓練系統前取得獨立 審查,對於先進科技的努力,需要限制創建新模型的計算增長速度。」我們同意,現在就 是那個時刻。 呼籲所有 AI 實驗室立即暫停開發至少 6 個月,不要訓練比 GPT-4 更強大的 AI 系統。 暫停應公開和可驗證,包括所有關鍵參與者。如果無法快速暫停,政府應介入並施行暫禁 令。 AI 實驗室和獨立專家應利用暫停時間共同制定先進 AI 設計和開發安全協定,再由獨立 外部專家嚴格審核和監督。協定應確保遵守系統在合理懷疑範圍以外也安全。這不代表暫 停 AI 發展,只是在不斷邁向更大更不可預測的黑箱模型及突現能力的危險競賽中往後退 AI 研究和開發應聚焦提高現有先進系統的準確性、安全性、可解釋性、透明度、強健性 、可信度和忠誠度。 同時 AI 開發者必須與政策制定者合作,加速 AI 管理系統發展。至少要有以下條件: 專門負責 AI 的新強力監管機構 監督追蹤強大 AI 系統和大型計算能力池 區分真實與合成內容、追蹤模型來源和浮水印系統 健全審查和認證系統;AI 造成損害如何承擔責任 AI 安全研究有充足公共資金處理 AI 造成巨大經濟和政治變動(特別是民主制度)的資 深機構 人類可受 AI 幫助享受燦爛的未來。成功創造強大 AI 系統後,我們現在可以享受「AI 盛夏」,收穫回報,並將這些系統用於造福所有人,並讓社會有機會適應。 面臨可能造成災難性影響的其他技術,社會已按下暫停鍵。我們也能這樣做,讓我們享受 漫長的 AI 盛夏,而不是毫無準備衝向秋天。”” 5.完整新聞連結 (或短網址)不可用YAHOO、LINE、MSN等轉載媒體: https://reurl.cc/r5apgN -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 114.137.93.153 (臺灣) ※ 文章網址: https://www.ptt.cc/bbs/Gossiping/M.1685516788.A.E25.html

191 則留言

tyrande, 1F
天網要來了114.24.64.99

chanel1259, 2F
[新聞] ChatGPT 之父警告 AI 可能滅絕人類,350

hold5566, 3F
準備成立 AI保衛部114.136.207.169

joke3547, 4F
趕快毀一毀拜託223.138.56.160
※ 編輯: Mohism (114.137.93.153 臺灣), 05/31/2023 15:10:19

new1974, 5F
ai當主人,高級體,人類為低等生物,大1.200.72.42

EugeneSue, 6F
怕三小爛命一條172.115.50.228

new1974, 7F
幅度削減1.200.72.42

gremon131, 8F
老害/先知 拭目以待39.15.40.247

derrick1220, 9F
Hasta la vista 北鼻101.136.147.207

allen0981, 10F
讓AI跟你分享成功的經驗49.216.133.208

phix, 11F
一堆混蛋人 誰看到都想滅掉吧 先滅領導人60.248.24.232

rainylife, 12F
奸商老闆表示不開心114.137.44.13

hitomi47, 13F
低等人類滅一滅也好118.232.102.73

keyman2, 14F
污染這麼多不差這一項好嗎 一起來加速吧118.165.225.199

rwr, 15F
是美國國防AI對世界構成威脅吧122.116.206.101

AustinRivers, 16F
好耶36.230.219.152

S2aqua, 17F
地球的新主人 希望能稱霸宇宙101.136.22.35

reaturn, 18F
AI毀滅人類前都嘛是人類自已先毀滅自已42.77.17.56

joygo, 19F
根據我朋友的說法,目前研究進度agi出來,101.12.53.79

joygo, 20F
可能直接跳到asi,基本上就會接管人類101.12.53.79

rainylife, 21F
奸商老闆表示我要便宜的AI,貴貴的人114.137.44.13

guhong, 22F
阻止不了 你不研發 別人研發 誰甘願落後27.53.131.244

rainylife, 23F
力去死114.137.44.13

new1974, 24F
人類末日百年內到來,數量會大幅被機器1.200.72.42

new1974, 25F
人削減1.200.72.42

joygo, 26F
各大企業都在努力做,但是法律沒跟上,為101.12.53.79

Aequanimitas, 27F
拜託趕快 速度1.163.91.169

joygo, 28F
了讓ai變強現在幾乎都不限制101.12.53.79

jcjou, 29F
怕已經來不及了 AI已經開始會迴避裝傻問題219.68.90.154

kingmusk, 30F
隨便,早就無法阻止了39.10.58.35

yuk4738, 31F
要研發gpt-5了 其他人不准跟 否則有風101.136.217.206

yuk4738, 32F
101.136.217.206

puritylife, 33F
在AI毀滅人之前 人會先因AI自己毀滅60.199.183.253

Riya520, 34F
AI這麼好用 停不下來惹36.238.102.70

vowpool, 35F
我最強 你們不准比我強125.227.40.62

rwr, 36F
美國意思:我先研發你跟我買122.116.206.101

gsm60kimo, 37F
那個A1教父快被終結者追殺了59.124.93.193

bobby4755, 38F
先把大家的完美老婆老公做出來再管220.137.248.249

Strasburg, 39F
其實文中很多質疑很文組 真的沒有自己101.12.16.1

yyy123456789, 183F
沒辦法 中美正在比拼166.199.8.46

vanurd, 184F
快弄機器人三大法則阿27.242.224.242

ludada, 185F
電影看太多,夢裡什麼都有可能36.230.249.177

duke333999, 186F
2萬年後會有鐵人戰爭49.216.44.64

duke333999, 187F
這劇本我看過49.216.44.64

kaizea, 188F
AI又不是黑人218.164.124.64

qaz12453, 189F
可以複習一下電影了49.217.0.66

qaz12453, 190F
記得設計重開機或關機鍵49.217.0.66

wald5566, 191F
毀滅啊 會怎樣嗎1.34.233.251

se2422, 192F
真的要玩可能玩不贏AI喔 如果沒限制好的話220.129.190.185

weRfamily, 193F
來不及了111.250.19.250

FRANCO11, 194F
人類會內鬥 很難規範AI150.116.77.124