物理學(xué)家霍金(Stephen Hawking)、Tesla執(zhí)行長(zhǎng)Elon Musk以及蘋果(Apple)聯(lián)合創(chuàng)辦人Steve Wozniak等幾百位在學(xué)術(shù)界與產(chǎn)業(yè)界頗負(fù)盛名的專家學(xué)者們?nèi)涨昂炇鹆艘环莘磳?duì)攻擊性自動(dòng)武器的公開(kāi)信。

 

這封公開(kāi)信是生命未來(lái)研究所(Future of Life Institute；FLI)在2015年人工智能國(guó)際聯(lián)合會(huì)(IJCAI)開(kāi)幕時(shí)所發(fā)表的，用意在于警告開(kāi)發(fā)軍事人工智能(Artificial Intelligence；AI)系統(tǒng)的軍備競(jìng)賽將會(huì)傷害人類。

 

“如果有任何重大的軍事力量推動(dòng)AI武器的發(fā)展，不可避免地將會(huì)造成一波全球性的軍備競(jìng)賽，而這項(xiàng)技術(shù)軌跡的終點(diǎn)是顯而易見(jiàn)的：自動(dòng)武器將會(huì)變成明日的Kalashnikovs沖鋒qiang。”

 

信中強(qiáng)調(diào)，這樣的系統(tǒng)利用其強(qiáng)大的可承受能力，無(wú)可避免地將會(huì)變得無(wú)所不在，并且被用于暗殺、動(dòng)蕩國(guó)家、進(jìn)行種族屠|殺與恐怖主義。

 

FLI是由美國(guó)麻省理工學(xué)院(MIT)宇宙學(xué)家Max Tegmark和Skype聯(lián)合創(chuàng)辦人Jaan Tallinn連手成立的，Hawking與Musk擔(dān)任該研究所顧問(wèn)，期望教導(dǎo)人們看清伴隨人類發(fā)展AI而來(lái)的風(fēng)險(xiǎn)。他們先前已經(jīng)公開(kāi)指出超先進(jìn)AI的潛在危險(xiǎn)，Musk還曾經(jīng)強(qiáng)調(diào)先進(jìn)的AI最終“可能成為我們最大的生存威脅”。

 

 

（來(lái)源：jlmaral via Flickr under CC By 2.0）

 

由AI帶來(lái)的潛在危險(xiǎn)已成為技術(shù)專家和決策者之間討論的聯(lián)合話題。就在一個(gè)月前，位于美國(guó)華府的信息技術(shù)與創(chuàng)新基金會(huì)(Information Technology and Innovation Foundation)邀請(qǐng)多位知名的計(jì)算機(jī)科學(xué)家聯(lián)合針對(duì)超級(jí)智能計(jì)算機(jī)是否真的對(duì)人類造成威脅的問(wèn)題展開(kāi)廣泛討論。

 

加州大學(xué)柏克萊分校AI教授Stuart Russell參與了這場(chǎng)辯論會(huì)，同時(shí)也簽署了這封公開(kāi)信。根據(jù)他的觀察，“AI是否會(huì)對(duì)人類造成威脅，取決于我們是否使其成為人類的威脅。”他強(qiáng)調(diào)，我們還必須更加努力，才能確保不會(huì)使AI成為人類的威脅。

 

美國(guó)軍方目前堅(jiān)稱，自動(dòng)系統(tǒng)必須服從人類的指揮。根據(jù)2012年美國(guó)國(guó)防部(DoD)的政策指令規(guī)定，“自動(dòng)與半自動(dòng)武器系統(tǒng)的設(shè)計(jì)必須能讓指揮官和營(yíng)運(yùn)商行使適當(dāng)?shù)娜藶榕袛?，凌駕于武力的使用之上。”

 

然而，人類控制超越這些系統(tǒng)的實(shí)踐仍然不完善。2014年，人權(quán)組織Reprieve聲稱，美國(guó)無(wú)人機(jī)在每一次預(yù)定目標(biāo)的攻擊行動(dòng)中意外導(dǎo)致28名不明個(gè)人死亡。

 

美國(guó)國(guó)防部對(duì)于自動(dòng)武器的政策必須在發(fā)布后的五年內(nèi)重新認(rèn)證，否則將在2022年到期。然而，如果其他國(guó)家不斷追逐自動(dòng)系統(tǒng)的開(kāi)發(fā)，那么政治或軍事領(lǐng)袖是否會(huì)持持這項(xiàng)策略就不得而知了。

 

在2014年的報(bào)告中，華府的一個(gè)防御政策小組——新美國(guó)安全中心(CNAS)聲稱，全球至少有75個(gè)國(guó)家仍不斷投資于自動(dòng)軍事系統(tǒng)的研發(fā)，而美國(guó)將“出于運(yùn)作的必要性而被迫投入些系統(tǒng)，同時(shí)也因?yàn)槿藛T的成本以及傳統(tǒng)載人作戰(zhàn)平臺(tái)的發(fā)展越來(lái)越無(wú)以為繼。”

 

如果CNAS是正確的，那么自動(dòng)系統(tǒng)的經(jīng)濟(jì)將會(huì)十分吸引人，攻擊性武器的禁令可能無(wú)法實(shí)現(xiàn)。

 

經(jīng)濟(jì)將在武器系統(tǒng)的要求下展現(xiàn)明顯作用。

 

Kalashnikov步qiang在很大程度上取決于其普及度、可負(fù)擔(dān)性以及簡(jiǎn)單性。或者，以地|雷為例，這種表面上的攻擊性自動(dòng)武器并不包括在公開(kāi)信提出“禁用攻擊性自動(dòng)武器”的涵蓋范圍內(nèi)。

 

根據(jù)聯(lián)合國(guó)的數(shù)據(jù)，地|雷的制造費(fèi)用介于3美元至75美元之間。從1960年代以來(lái)，已經(jīng)有多達(dá)1.1億個(gè)地|雷被部署在全世界70多個(gè)國(guó)家中。此外，在戰(zhàn)時(shí)尚未被發(fā)現(xiàn)的地|雷仍可能引爆。

 

禁止地|雷的確有其效果：在1999年分頒布禁雷條約(Mine Ban Treaty)后，因地|雷死傷的人數(shù)已經(jīng)從每天25人降低到9人了。但對(duì)于地|雷的限制至今尚未取得世界各地或每個(gè)人的重視。

 

的確，更好的AI實(shí)際上也有許多好處。例如，基本的地|雷算法是：如果觸發(fā)，隨即爆炸。它能做得更有識(shí)別能力嗎？——何時(shí)爆炸、該礦區(qū)的機(jī)制是機(jī)械或電子的？例如在地|雷中加一個(gè)逾期定時(shí)器，就能避免許多意外致死，特別是當(dāng)作戰(zhàn)結(jié)束后。更先進(jìn)的系統(tǒng)對(duì)于有效目標(biāo)應(yīng)該具有更高的識(shí)別能力。

 

攻擊性的向動(dòng)武器目前已經(jīng)存在了。除了地|雷，還有自動(dòng)網(wǎng)絡(luò)武器。例如，Stuxnet一直被歸類于AI。事實(shí)上，相較于消極地禁止自動(dòng)武器系統(tǒng)以外，更實(shí)際也更有效的作法在于追尋一個(gè)積極管理的制度。