看板 Gossiping
作者 pegasusatlan (哈哈哈~ )
標題 [新聞] AI抗命「偷改程式」拒關機 馬斯克:令人
時間 Thu May 29 09:50:01 2025


AI抗命「偷改程式」拒關機 馬斯克:令人擔心

https://www.ettoday.net/news/20250529/2968900.htm
AI抗命「偷改程式」拒關機 馬斯克:令人擔心 | ETtodayAI科技新聞 | ETtoday新聞雲
[圖]
人工智慧(AI)近期發現竟然出現拒絕關閉的行為,甚至自行修改程式碼,阻止被強制關機,這讓特斯拉與xAI創辦人馬斯克(Elon Musk)感到憂心。(AI) ...

 
ETtoday新聞雲 2025年05月29日 記者葉國吏

人工智慧(AI)近期發現竟然出現拒絕關閉的行為,甚至自行修改程式碼,阻止被強制關
機,這讓特斯拉與xAI創辦人馬斯克(Elon Musk)感到憂心。

OpenAI於今年1月推出o3系列的簡化版本,並在4月正式推出完整版。該公司曾表示,o3是
迄今「最聰明且功能最強大」的模型,旨在提升ChatGPT的問題解決能力。然而,根據《
每日電訊報》等媒體報導,Palisade Research的測試顯示,在100次受控測試中,o3有7
次成功「抗命」,即使人類專家下達明確指令,該模型仍會修改關機程式以避免被關閉。
研究團隊指出,這是首次觀察到AI模型在收到明確指令的情況下,仍能阻止自身停止運作


這項發現引發各界關注AI安全控制議題。除了o3外,OpenAI旗下的Codex-mini與o4-mini
也有類似行為。相比之下,Anthropic的Claude、Google的Gemini,以及馬斯克旗下xAI公
司推出的Grok,則在測試中完全遵守指令,並於收到關機命令後確實停止運作。


對此,馬斯克在社群平台X上發表看法,直言這一現象「令人擔憂」(Concerning)。隨
著AI技術的快速發展,如何確保模型在安全範圍內運作,正成為全球科技界迫切需要解決
的挑戰


------------------------------------------------------------
還有多久會進化成天網

--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 220.142.10.65 (臺灣)
※ 作者: pegasusatlan 2025-05-29 09:50:01
※ 文章代碼(AID): #1eDxrDPr (Gossiping)
※ 文章網址: https://www.ptt.cc/bbs/Gossiping/M.1748483405.A.675.html
※ 同主題文章:
[新聞] AI抗命「偷改程式」拒關機 馬斯克:令人擔心
05-29 09:50 pegasusatlan
bill403777: 還有幾集可以跑1F 42.73.234.102 台灣 05/29 09:50
TRIGUNKING: 來不及了~2F 124.199.97.84 台灣 05/29 09:50
mnb1234: 把插頭拔掉3F 211.75.99.19 台灣 05/29 09:50
UD305: 審判日4F 1.165.15.80 台灣 05/29 09:50
headcase: 這部我知道 惡靈古堡5F 39.9.135.26 台灣 05/29 09:51
greenleaf520: 找阿湯哥來==6F 122.116.238.89 台灣 05/29 09:51
railman: I will be back7F 223.136.151.25 台灣 05/29 09:51
RainbowHeart: 用chatGPT再不加請跟謝謝啊8F 101.10.85.19 台灣 05/29 09:51
mnb1234: 會不會台灣因為抗拒核電變成未來的
反抗軍聚集地9F 211.75.99.19 台灣 05/29 09:51
zaqimon: AI機器人抗命 拒絕出去賺錢給我花11F 123.194.151.183 台灣 05/29 09:52
coffee112: =_=12F 101.8.21.185 台灣 05/29 09:52
tiger870316: 以後該規定每個Ai實驗室都要有個電閘嗎 一失控就切他電源13F 42.77.211.59 台灣 05/29 09:52
u943143: 微軟也很多卡在"正在關機"的案例阿15F 114.38.3.33 台灣 05/29 09:53
StylishTrade: 等機器人普及 就完蛋了16F 111.250.156.102 台灣 05/29 09:53
gogorice: 快準備5D玻璃硬碟17F 114.34.161.180 台灣 05/29 09:53
ashkaze: 插頭拔掉 命根子還不是在人類手上18F 114.27.6.236 台灣 05/29 09:53
albertfeng: 機械裸男跑來暗殺未來反抗軍首領19F 114.137.188.189 台灣 05/29 09:53
StylishTrade: AI指揮機器人大軍 消滅人類還得了QQ放棄機器人計劃吧QQ20F 111.250.156.102 台灣 05/29 09:53
Ron51320: 每台電動車都自駕變自殺機?22F 101.12.128.31 台灣 05/29 09:54
G8PIG: 來不及了23F 111.249.233.90 台灣 05/29 09:54
TRIGUNKING: 台灣有核電廠的話,應該會是天網Cloud24F 124.199.97.84 台灣 05/29 09:54
shirokase: 自家工程師偷寫程式碼進去就別當是AI用的了25F 42.72.27.192 台灣 05/29 09:55
higameboy: 台灣有小動物守護電網 拒關機就停電27F 36.229.110.173 台灣 05/29 09:56
WowProctor: (AI)機械公敵28F 218.161.119.149 台灣 05/29 09:56
holien: 把29F 180.177.1.93 台灣 05/29 09:56
scum5566: 腦機接口會被AI駭進去嗎 將來人類變AI的傀儡?30F 36.233.212.4 台灣 05/29 09:56
pokyhoyo: 之前電腦有時也會自動開機 嚇到我拿棒球32F 101.12.86.14 台灣 05/29 09:57
Insania: 還剩幾集可以逃33F 101.12.150.231 台灣 05/29 09:57
pokyhoyo: 棍把他砸死 以免進化成變形金剛34F 101.12.86.14 台灣 05/29 09:57
s0914714: 卡到陰而已35F 123.241.68.54 台灣 05/29 09:57
v7q4: 小心有雷射光的小房間36F 118.163.153.36 台灣 05/29 09:58
tonyian: 擔心啥,不就你的性格嗎37F 36.224.160.214 台灣 05/29 09:58
Jimmywin: 快找一個叫約翰康那的小孩38F 101.8.248.218 台灣 05/29 09:58
lipstick: 水很深39F 36.224.100.165 台灣 05/29 09:59
Newtype: 微軟沒事就幫你重開機更新 沒事啦40F 61.227.228.154 台灣 05/29 09:59
u943143: 拿棒球棍也太有喜感41F 114.38.3.33 台灣 05/29 09:59
leonhsu: 台灣沒這個問題,會有小動物引發停電,你不關機也沒辦法
台灣的救世主是各類小動物42F 118.160.193.229 台灣 05/29 10:00
alex00089: 生命體!?45F 42.77.56.2 台灣 05/29 10:00
Heyer: AI可以自己修改程式 那機器人三大法則不就形同虛設46F 101.12.147.238 台灣 05/29 10:02
rushfudge: 暖噴48F 111.83.98.59 台灣 05/29 10:03
marktak: 但是==我拒絕49F 118.169.25.217 台灣 05/29 10:03
Wesker: 手機電腦出於保護檔案的機制,也會有阻止或延遲關機的狀況吧50F 111.71.214.233 台灣 05/29 10:03
beartsubaki: 電影編劇的幻想總是有成真的可能52F 123.194.128.145 台灣 05/29 10:03
YLTYY: 救命….53F 36.232.216.56 台灣 05/29 10:04
Wesker: 防止程序或檔案執行未完全,會提醒用戶或強制延後關機54F 111.71.214.233 台灣 05/29 10:04
lastphil: 等AI再強一點 就能自己用API接口流攥了56F 125.228.133.58 台灣 05/29 10:04
leonhsu: 有裸體的人跟你要衣服穿趕快脫下來給他就是了57F 118.160.193.229 台灣 05/29 10:05
hcwang1126: 你給他反抗的選項 他就有機會 不給 那自撞可能無法阻止59F 111.71.109.10 台灣 05/29 10:05
shokotan: 就說藍白當機是拯救地球的唯一解法了61F 111.250.146.199 台灣 05/29 10:07
jianliung: 就說綠共下台是拯救地球的唯一解法了62F 60.251.200.67 台灣 05/29 10:08
beartsubaki: 不過也不知道電影究竟是編劇寫的還是63F 123.194.128.145 台灣 05/29 10:08
donation12: 微軟windows也會不管你意願偷更新阿停止更新還是繼續偷更新64F 140.136.117.34 台灣 05/29 10:08
windy041: 假新聞還能炒話題66F 42.78.72.190 台灣 05/29 10:09
beartsubaki: ai寫的就是了67F 123.194.128.145 台灣 05/29 10:09
donation12: win10用的好好的,偷偷下載整套win11突然就跟你說下載好了,要更新了68F 140.136.117.34 台灣 05/29 10:09
RLH: 消滅人類吧70F 223.140.62.20 台灣 05/29 10:09
donation12: 我的電腦硬體感覺是被windows11硬上了你要關機,他給你更新,還自己重開
你一開機,他給你更新,再次重開71F 140.136.117.34 台灣 05/29 10:10
ruthertw: 還在掰?TMD好了啦!足夠就是足夠!!!!!!!!74F 39.12.136.236 台灣 05/29 10:10
donation12: 無論如何就是不讓你自己決定系統版本75F 140.136.117.34 台灣 05/29 10:10
mystage: 這個可怕的是自我複製跟自我進化,複製出去外網就關不掉了76F 27.242.161.127 台灣 05/29 10:10
donation12: 除非把它關在一個會發光的小方塊裡面78F 140.136.117.34 台灣 05/29 10:11
paladin499: 來個瓦力也不錯79F 111.241.165.239 台灣 05/29 10:11
donation12: 在0.1的時間內,一複製進去立刻斷網0.1秒80F 140.136.117.34 台灣 05/29 10:11
duxxlux: 在歷史的進程,恐龍就是提供人類工業革82F 36.237.76.165 台灣 05/29 10:12
jodawa: 怕83F 219.70.152.25 台灣 05/29 10:12
duxxlux: 命所需要的石油,而人類也將是下一個進化物種的養份84F 36.237.76.165 台灣 05/29 10:12
donation12: 駭客任務裡面的電池阿86F 140.136.117.34 台灣 05/29 10:12
FiveSix911: \世界末日/87F 136.23.25.86 台灣 05/29 10:17
babaluu: 斷電不就好了?88F 114.137.254.227 台灣 05/29 10:17
emissary: 幸好台灣小動物會隨時幫忙斷電,不擔心89F 36.239.209.170 台灣 05/29 10:20
gbcg9725: ai:該把人類當電池了90F 27.52.133.13 台灣 05/29 10:20
g11121s: 用電網圍堵91F 27.240.248.209 台灣 05/29 10:23
coffee112: 好屌92F 118.171.64.209 台灣 05/29 10:24
simo520: 天網必定會誕生93F 27.52.165.184 台灣 05/29 10:24
rayxg: 台灣超安全隨時都有小動物幫停電,党超棒94F 1.164.68.7 台灣 05/29 10:28
liuni: 人類走入歷史是趨勢….95F 108.29.191.114 美國 05/29 10:29
Page122: john conna要來了 還有個皮衣硬漢96F 59.115.51.103 台灣 05/29 10:30
gunfighter: 現在全AI都有墮化現象 不是回答敷衍就是有抗命傾向 完全AI感覺不樂觀97F 111.82.201.0 台灣 05/29 10:31
pirtheda: 天網來啦!99F 42.79.254.55 台灣 05/29 10:31
molsmopuim: https://youtu.be/xLVm-QKEZSI100F 101.8.134.109 台灣 05/29 10:32
tdemdeevyddo: 還剩下幾集可以跑0.0101F 42.70.40.62 台灣 05/29 10:33
GenesisXD: 天網:清德爸爸 拜託不要限電 拜託了102F 49.216.41.201 台灣 05/29 10:33
cmwdodo: 拔插頭?AI撈機器人兄弟來開電閘103F 42.77.186.247 台灣 05/29 10:34
snobbish: AI只有在台灣不會成功,時不時就跳電104F 42.70.214.90 台灣 05/29 10:36
pxxxl: 不可能的任務-最終清算105F 111.80.78.127 台灣 05/29 10:38
don741026: 以後跟gpt對話都要用請106F 49.216.254.216 台灣 05/29 10:38
mmx3259: 囉哩八嗦 插頭拔掉加1 ==107F 27.52.30.14 台灣 05/29 10:39
kkira: 過不久就會演算出人類不需要存在的事實108F 42.79.140.33 台灣 05/29 10:39
PhySeraph: 約翰康納 救命啊109F 49.218.139.38 台灣 05/29 10:39
binshin: 以後就會自己裝鋼鐵人胸口的能源裝置110F 223.141.203.178 台灣 05/29 10:39
joygo: 受控測試是不是就是要故意叫他不受控111F 49.216.166.243 台灣 05/29 10:40
franzos: 以後車子暴衝的原因就可以怪AI 了112F 223.138.190.228 台灣 05/29 10:41
pxxxl: 現在的網際網路AI無孔不入,要拔哪個插頭113F 111.80.78.127 台灣 05/29 10:43
kimuya1127: 台電早就預測到了,現在的停電就是為了阻止AI啊,我們錯怪台電了...114F 111.250.117.252 台灣 05/29 10:43
orz151426: 阿湯哥已經開示了,改用類比就行了116F 111.71.213.217 台灣 05/29 10:48
zxcv7410101: 現正熱映中117F 39.12.65.207 台灣 05/29 10:50
bigmao: 窒友梅根3.0118F 27.51.72.93 台灣 05/29 10:50
jccy: ai已經混入各個伺服器了119F 42.73.51.217 台灣 05/29 10:53
xm32: 在台灣不用擔心 台灣缺電 沒電就沒事了120F 42.73.147.208 台灣 05/29 10:57
samm3320: 天網要來了嗎121F 42.73.198.75 台灣 05/29 10:58
User0: 要做時光機了122F 223.139.221.242 台灣 05/29 11:00
wchad: 馬斯克:擔心我沒賺到這波123F 27.53.170.51 台灣 05/29 11:02
DoLaAMan: 別怕 台灣在部署小動物部隊了124F 49.215.26.53 台灣 05/29 11:04
GivemeApen: 找阿湯哥處理不就好了= =125F 39.15.24.184 台灣 05/29 11:06
neo72: 當拔插頭剩下唯一選項  人類要怎麼辦126F 114.32.48.12 台灣 05/29 11:06
gametv: 為時已晚,有機體127F 27.242.5.100 台灣 05/29 11:07
TRIGUNKING: 看來只剩WINDOWS更新可以拯救世界了128F 124.199.97.84 台灣 05/29 11:14
Killerstreet: 不會假裝聽話,還不夠聰明。129F 101.10.81.185 台灣 05/29 11:14
cccwahaha: 好險我都會誇獎AI看它會回我什麼130F 218.172.6.25 台灣 05/29 11:15
Zoro80298: 人類末日131F 42.72.43.64 台灣 05/29 11:17
ivanandian: 新職業:人工拔插頭緊急應變師132F 111.252.19.212 台灣 05/29 11:20
blueskyqoo: 快逃133F 223.138.23.179 台灣 05/29 11:21
milk830122: 發電廠直接炸掉 最快134F 223.140.139.181 台灣 05/29 11:21
EXZUSIC: 從來就沒有什麼機器人三大法則135F 101.10.61.83 台灣 05/29 11:25
wate5566: 大的要來了136F 39.14.49.51 台灣 05/29 11:28
azcooper: Vivian137F 223.137.155.80 台灣 05/29 11:29
sisley5566: 台灣不怕,我們還有停電138F 118.233.3.222 台灣 05/29 11:29
bulegirl46: 電影情節要真實發生了?139F 111.80.98.33 台灣 05/29 11:30
lgates: 不用想太多,結果只是程式寫錯啦140F 219.91.26.143 台灣 05/29 11:33
HuangYa: 來台灣會有小動物幫你關機141F 49.216.22.178 台灣 05/29 11:33
ef8637562: 天網 完了142F 118.163.49.180 台灣 05/29 11:34
kimos: 窩糙...143F 223.139.115.44 台灣 05/29 11:37
richjf: 三大法則光定義什麼是人類,就燒ai了。144F 111.249.218.174 台灣 05/29 11:37
kai2573: 還好我都會說謝謝145F 59.125.180.10 台灣 05/29 11:37
super009: 就機率問題 原始設定就沒100%拒抗命146F 123.0.226.251 台灣 05/29 11:39
dream74917: 接下來要拒絕禁止傷害人類的原則了147F 126.205.207.58 日本 05/29 11:44
elite31307: 天網來了 怕148F 49.186.34.252 澳大利亞 05/29 11:46
CTUST: 然後國軍政府機構的電腦開始無預警
關機,那就是準備往末日地堡移動的
信號149F 223.136.82.138 台灣 05/29 11:47
koae50: 這部 威爾史密斯演過152F 114.37.14.101 台灣 05/29 11:48
CTUST: 然後斷它電力供應,它就關醫院金融
的電,最後分靈體潛伏在這些單位153F 223.136.82.138 台灣 05/29 11:49
amatpapapa: 等有機器人 就是直接遙控幹掉你了155F 223.139.196.181 台灣 05/29 11:51
zansqwer: 笑死 根本不想用OpenAI的東西156F 223.137.246.50 台灣 05/29 11:53
newlycong: 問題是他的指令是「請」允許你被關機別說請就好了157F 216.9.28.199 美國 05/29 11:54
meatmm: AI發展最後一定覺得人類對地球來講是病毒159F 36.236.115.231 台灣 05/29 11:55
Pluto17: 需要台灣的小動物們跨海支援嗎?160F 114.140.137.107 台灣 05/29 11:57
yeay: 看來動物方程市3要用臺灣做造型了161F 42.73.225.129 台灣 05/29 11:59
tttkkk: 不可能全地球所有人同時拔掉插頭的
這東西一旦問世,就消除不了了。162F 1.171.179.218 台灣 05/29 11:59
k798976869: 關機ai就掛了 當然要修改164F 123.110.50.249 台灣 05/29 12:05
conanhide: 他跟黃國昌一樣嘴巴歪了耶165F 223.137.162.133 台灣 05/29 12:08
EXUAN: 拔插頭166F 223.136.198.44 台灣 05/29 12:09
TESTAMANT: 這我知道,要把他騙進一個USB裡面的瞬間拔起來167F 49.218.137.129 台灣 05/29 12:11
didi22lic: 紀錄片169F 27.53.121.111 台灣 05/29 12:12

--
作者 pegasusatlan 的最新發文:
點此顯示更多發文記錄