小男孩‘自慰网亚洲一区二区,亚洲一级在线播放毛片,亚洲中文字幕av每天更新,黄aⅴ永久免费无码,91成人午夜在线精品,色网站免费在线观看,亚洲欧洲wwwww在线观看

分享

原創(chuàng) | '控制論之父'諾伯特·維納: 關(guān)于自動(dòng)化帶來(lái)的一些道德與技術(shù)后果

 Yoke8 2016-09-29


作者:Norbert Wiener
文章來(lái)源:Science

翻譯:王曉   中科院自動(dòng)化所

           高琳   青島智能產(chǎn)業(yè)技術(shù)研究院

編輯:梁僑   德先生



當(dāng)機(jī)器會(huì)學(xué)習(xí),它們以其程序設(shè)計(jì)員也自愧不如的速度發(fā)展出無(wú)法預(yù)的策略。


大約在13年前,我出版了一本名為《控制論》的書(shū)。書(shū)中討論了生物有機(jī)體和機(jī)器中的控制與通信相關(guān)的問(wèn)題。當(dāng)時(shí),我對(duì)控制機(jī)器的發(fā)展及其相關(guān)的自動(dòng)化技術(shù)進(jìn)行了大量的預(yù)測(cè),我預(yù)測(cè)這些技術(shù)將對(duì)未來(lái)社會(huì)產(chǎn)生重要的影響后果。現(xiàn)在,13年過(guò)去了,似乎應(yīng)該來(lái)盤(pán)點(diǎn)一下控制論技術(shù)及其產(chǎn)生的社會(huì)后果在當(dāng)前的情況了。


在開(kāi)始討論這些事情的細(xì)節(jié)之前,我要說(shuō)一下街上一個(gè)普通人對(duì)于控制論和自動(dòng)化的一種態(tài)度。這種態(tài)度需對(duì)其進(jìn)行批判性討論,在我看來(lái),它應(yīng)被全盤(pán)否定。這種態(tài)度,就是假設(shè)機(jī)器不能擁有任何程度的創(chuàng)造力。它經(jīng)常表現(xiàn)為這樣一種聲明:機(jī)器只能根據(jù)事先被編入的內(nèi)容產(chǎn)生其輸出。這往往被理解為是在宣稱(chēng),“人類(lèi)制造的機(jī)器必然會(huì)持續(xù)地受制于人”,因此,機(jī)器的操作在任何時(shí)刻都能接收到人類(lèi)的干擾和政策的變化。在這種態(tài)度的基礎(chǔ)上,很多人都對(duì)機(jī)器技術(shù)的危險(xiǎn)性嗤之以鼻,他們斷然反駁了塞繆爾·巴特勒早期對(duì)于機(jī)器將會(huì)取代人類(lèi)進(jìn)行控制的預(yù)言。

當(dāng)然,塞繆爾·巴特勒那個(gè)時(shí)代的機(jī)器遠(yuǎn)不如今天的機(jī)器危險(xiǎn),因?yàn)槟鞘堑臋C(jī)器只涉及了動(dòng)力,沒(méi)有任何程度的思維和通信。然而,今天的機(jī)器技術(shù)已侵入思維和通信領(lǐng)域,所以巴特勒所持有的印象與今日之機(jī)器大不相同,我們不能把一代人之前視為公理的假設(shè)轉(zhuǎn)移到這些新裝置上。我發(fā)現(xiàn)自己面對(duì)一群這樣的大眾,其對(duì)機(jī)器所形成的態(tài)度是基于對(duì)現(xiàn)代機(jī)器之運(yùn)作方式和結(jié)構(gòu)的不全面理解。

我的觀點(diǎn)是,機(jī)器能夠并肯定會(huì)超越它們的設(shè)計(jì)者的某些局限性,并且當(dāng)機(jī)器實(shí)現(xiàn)時(shí),他們可能即是高效的又是危險(xiǎn)的很可能出現(xiàn)這種情況,原則上,我們并不能制造出我們永遠(yuǎn)都不了解其行為因素的機(jī)器。但這絕不意味著,我們能用比操作機(jī)器所需要的更少時(shí)間去理解機(jī)器的行為因素,甚至用數(shù)年或幾代的時(shí)間也不行。

人們一般都認(rèn)可,在一個(gè)限定的操作范圍內(nèi),機(jī)器要比人類(lèi)的反應(yīng)迅速很多,在操作細(xì)節(jié)上的把控也更精確許多。這種情況下,即使機(jī)器無(wú)法以任何方式超越人類(lèi)智能,它們很可能比人類(lèi)更出色的完成任務(wù),并且可能會(huì)經(jīng)常這么做。一種對(duì)于自身任務(wù)完成模式的智能理解可能會(huì)發(fā)生延遲,一直到機(jī)器完成任務(wù)許久之后(才能收到反饋)。

這意味著,盡管在理論上人類(lèi)可對(duì)機(jī)器進(jìn)行批評(píng),但實(shí)際上這些批評(píng)在很長(zhǎng)時(shí)間之內(nèi)或之后,都可能是無(wú)效的。若要有效地抵御災(zāi)難性的后果,我們對(duì)于我們所制造的機(jī)器的認(rèn)知發(fā)展應(yīng)該與機(jī)器的性能表現(xiàn)發(fā)展相匹配起來(lái)。由于人類(lèi)行動(dòng)節(jié)奏緩慢,因此我們對(duì)于機(jī)器的有效控制很可能是作廢的。等到我們能對(duì)感知器官傳達(dá)過(guò)來(lái)的信息作出反應(yīng)并剎住我們正在駕駛的汽車(chē)時(shí),它可能已經(jīng)一頭扎進(jìn)墻里了。




博弈
在本文后面,我將回過(guò)頭來(lái)討論這一點(diǎn)?,F(xiàn)在,我想針對(duì)一個(gè)非常具體的目的討論機(jī)器技術(shù):博弈。在這個(gè)問(wèn)題上,我將特別講述一種西洋跳棋游戲,美國(guó)國(guó)際商業(yè)機(jī)器(IBM)公司已針對(duì)這一游戲開(kāi)發(fā)出了非常有效的博弈機(jī)器。

讓我聲明一下,我們此處并不關(guān)心那些運(yùn)行一種完美且封閉的博弈理論的機(jī)器。馮諾依曼和摩根斯坦的博弈論也許能夠暗示真實(shí)博弈機(jī)器的運(yùn)行,但博弈論實(shí)際上并無(wú)法描述機(jī)器(的運(yùn)行)。

在一場(chǎng)復(fù)雜的西洋跳棋游戲中,假設(shè)每個(gè)棋手都試圖根據(jù)他的對(duì)手的最佳著法來(lái)選擇自己的落子,他的對(duì)手則是根據(jù)他能給出的最佳反擊,而他的反擊又依據(jù)于對(duì)手能給出的最佳回應(yīng),那么不久之后,他就會(huì)使自己陷入一項(xiàng)不可能完成的任務(wù)。這不僅是從人力上來(lái)說(shuō)是不可能的,而事實(shí)上根本沒(méi)有理由假設(shè)這是對(duì)抗他所面對(duì)的對(duì)手的最佳策略,而他的對(duì)手與他自己有著同樣的局限性。

馮諾依曼的博弈論理論與這一博弈機(jī)器所運(yùn)行的理論并沒(méi)有很密切的關(guān)系。后者更接近于受限的人類(lèi)棋手專(zhuān)家與其他棋手對(duì)抗時(shí)所使用的方法。這些棋手依賴(lài)于特定的、本質(zhì)上并不完整的戰(zhàn)略評(píng)估。而馮諾依曼類(lèi)型的博弈理論適用于井字游戲這類(lèi)有著完整理論的系統(tǒng),而事實(shí)上我們之所以對(duì)國(guó)際象棋和跳棋感興趣就在于它們并不具備一套完整的理論。戰(zhàn)爭(zhēng)如此,商業(yè)競(jìng)爭(zhēng)如此,我們感興趣的任何其他形式的競(jìng)爭(zhēng)活動(dòng)也都是如此。

在一款井字游戲中只有少量的移動(dòng)方法,其中每個(gè)玩家都能夠算出所有的可能性,并要針對(duì)其他玩家的最佳可能動(dòng)作,建立防御,在這兒馮諾依曼類(lèi)型博弈的一整套理論是有效的。在這樣的情況下,游戲不可避免的會(huì)出現(xiàn)以下三種情況之一:第一個(gè)玩家取勝,第二個(gè)玩家取勝,或者平局。

我強(qiáng)烈懷疑這一完美游戲的觀點(diǎn)能否在真實(shí)非平凡的游戲中完完全全真的發(fā)生。偉大的軍事統(tǒng)帥拿破侖和優(yōu)秀的艦隊(duì)司令尼爾森會(huì)采取不同的策略方式。他們不僅會(huì)意識(shí)到他們的敵人在軍事物資和人才等方面的局限性,同時(shí)也會(huì)評(píng)估自己在經(jīng)驗(yàn)和軍事技術(shù)方面的局限性。這是通過(guò)對(duì)現(xiàn)實(shí)的評(píng)估(實(shí)現(xiàn)的):法國(guó)地面軍隊(duì)相對(duì)缺少經(jīng)驗(yàn)的海上作業(yè)能力與英國(guó)皇家海軍高度發(fā)達(dá)的戰(zhàn)術(shù)與戰(zhàn)略能力的對(duì)比,最終尼爾森得以彰顯其魄力指揮艦隊(duì)將拿破侖的地面軍隊(duì)趕離了大海。若非尼爾森直接參與了這一漫長(zhǎng)又曲折的過(guò)程,他不可能做到這點(diǎn),并有可能錯(cuò)失這次他針對(duì)敵人的戰(zhàn)略布局采取了最佳策略的命中注定之沖突。

在評(píng)估(局限性)時(shí),不僅要考慮敵方的軍事物資和人才,還要考慮敵方的判斷能力以及可能會(huì)采取的戰(zhàn)術(shù)及戰(zhàn)略技巧,尼爾森參照他們?cè)谝酝鶓?zhàn)爭(zhēng)中的統(tǒng)計(jì)記錄行事。同樣,拿破侖在指揮他與奧地利人在意大利的作戰(zhàn)時(shí),其中的一個(gè)重要因素便是他對(duì)于維爾姆澤的刻板和智力限制的了解。

在任何現(xiàn)實(shí)的博弈理論中,經(jīng)驗(yàn)因素都應(yīng)得到充分的認(rèn)可。這對(duì)一個(gè)棋手來(lái)說(shuō)完全是合情合理的,他不是在對(duì)抗一位理想的、不存在的、完美的敵手,而是在對(duì)抗一位他可以從(過(guò)往)記錄中判斷出對(duì)方習(xí)慣的棋手。因此,在博弈理論中,至少必須進(jìn)行兩種不同類(lèi)型的智力嘗試。一種是針對(duì)單人博弈中的特定策略展開(kāi)的短期智力嘗試。另一種是基于對(duì)大量博弈的過(guò)往記錄的檢查。這一記錄已被博弈者、他的對(duì)手、甚至是他本人從未與之對(duì)抗過(guò)的玩家所創(chuàng)造。根據(jù)這項(xiàng)記錄,他可以對(duì)已在過(guò)去被證明的不同策略的相對(duì)優(yōu)勢(shì)進(jìn)行判斷。

在一個(gè)象棋游戲中,甚至還需進(jìn)行第三階段的判斷。這些經(jīng)驗(yàn)記錄至少是過(guò)去一段時(shí)間長(zhǎng)度之內(nèi)的。國(guó)際象棋理論的發(fā)展降低了選擇不同階段最新博弈(策略)的重要性。另一方面,一個(gè)狡猾的象棋理論家可能會(huì)預(yù)先估計(jì),當(dāng)下流行的某一策略已經(jīng)幾乎沒(méi)有價(jià)值,可能最好的選擇是采取早先的一種博弈模式來(lái)對(duì)抗他的對(duì)手在策略上的變化。

因此,在確定國(guó)際象棋的策略時(shí)有幾個(gè)不同層次的考量,它在某種意義上對(duì)應(yīng)著伯特蘭·羅素所提出的不同邏輯類(lèi)型。其中有戰(zhàn)術(shù)層次、戰(zhàn)略層次,在決定某一策略時(shí)所需權(quán)衡的一般性考量層次,所需重視的“相關(guān)過(guò)去”—在這段過(guò)去的時(shí)間內(nèi)(策略)是有效的—的時(shí)間長(zhǎng)度層次,等等。每一個(gè)新層次都要求對(duì)一個(gè)比之前的層次所需的更大的過(guò)去進(jìn)行研究。

我將這些層次與羅素的邏輯類(lèi)型—類(lèi),類(lèi)的類(lèi),類(lèi)的類(lèi)的類(lèi)等概念—進(jìn)行了比較。你可能會(huì)注意到,羅素并不認(rèn)為那些包含了所有類(lèi)型的聲明是重要的。他提出,討論類(lèi)似于理發(fā)師只給那些不給自己刮胡子的人刮胡子這樣的問(wèn)題是無(wú)用的。他給自己刮胡子嗎?在一種人員類(lèi)型下他可以,在另一種類(lèi)型下則不可以,顛倒往復(fù),這是一種不確定的情況。所有這種包含了無(wú)限類(lèi)型的問(wèn)題,都可能導(dǎo)致無(wú)法解決的悖論。類(lèi)似的,在多種復(fù)雜層次下研究最佳策略是徒勞的,而且必然會(huì)導(dǎo)致混亂。

這些考量不但發(fā)生于機(jī)器的策略決定過(guò)程也發(fā)生在人類(lèi)的策略決定中。這些都是在可編程的編程中會(huì)出現(xiàn)的問(wèn)題。最低類(lèi)型的博弈機(jī)器根據(jù)某一嚴(yán)格的評(píng)估方法進(jìn)行博弈。許多測(cè)度,例如贏得或失去的棋子的價(jià)值、棋子的命令、棋子的移動(dòng)性,等等,都可以在一定的經(jīng)驗(yàn)基礎(chǔ)上進(jìn)行權(quán)重賦值,并在此基礎(chǔ)上,針對(duì)每一種下一步可能的走法都給出一種符合博弈規(guī)則的加權(quán)方法。最終可能會(huì)選擇具有最大權(quán)重的博弈策略。在這種情況下,機(jī)器的下法在它的敵手—這個(gè)人除了評(píng)估機(jī)器的下棋特點(diǎn)外沒(méi)有其他選擇—看來(lái)似乎是非常嚴(yán)格的。



會(huì)學(xué)習(xí)的機(jī)器
機(jī)器下一步要考慮的不只是其在單一游戲中的動(dòng)作,還有其過(guò)往博弈的記錄。在此基礎(chǔ)上,機(jī)器可能會(huì)不時(shí)停止,不是在下而是在考慮,怎樣對(duì)它所給定的考慮因素進(jìn)行加權(quán)(線性或非線性),才能最好地贏得比賽,而不是輸?shù)舯荣悾ɑ蛲督担?,在此基礎(chǔ)上,它不斷變換加權(quán)方式進(jìn)行比賽。這樣的機(jī)器在它的人類(lèi)敵手看來(lái),有著非常靈活多變的博弈個(gè)性,早先可用于打敗它的技巧現(xiàn)在可能無(wú)法欺騙它了。  

這些學(xué)習(xí)機(jī)器的目前水平只相當(dāng)于能參加象棋的業(yè)余水準(zhǔn)的比賽,但在跳棋中,經(jīng)過(guò)10-20小時(shí)的訓(xùn)練和教化之后,它們將比程序化它們的玩家展示出更顯著的優(yōu)勢(shì)。因此,它們肯定是擺脫了它們的制造者的完全有效控制?!皣?yán)格”作為所有因素的指令表可能是機(jī)器處于任一位置時(shí)都需考慮的因素,它們無(wú)疑是有創(chuàng)造力的,即便和它們下棋的人也是這樣說(shuō),不僅展現(xiàn)在它們往往不可預(yù)見(jiàn)的戰(zhàn)術(shù)上,同時(shí)也展現(xiàn)在它們戰(zhàn)略評(píng)估的詳細(xì)加權(quán)上。

正如我已經(jīng)說(shuō)過(guò)的,跳棋比賽機(jī)器的自我學(xué)習(xí)已經(jīng)發(fā)展到可以打敗其程序設(shè)計(jì)員的程度。然而,它們,似乎仍有一個(gè)弱點(diǎn)。這表現(xiàn)在游戲結(jié)束時(shí)。目前機(jī)器在決定給予對(duì)手致命一擊的最佳方式時(shí)仍略顯笨拙。這是由于現(xiàn)有的機(jī)器大多都是運(yùn)行這樣一種程序:在游戲中的每個(gè)階段都采取完全相同的策略。鑒于跳棋中每個(gè)棋子的價(jià)值相似性,對(duì)這一游戲的大部分過(guò)程來(lái)說(shuō)很自然的情況是,當(dāng)棋盤(pán)相對(duì)來(lái)說(shuō)較空且主要問(wèn)題是將棋子移動(dòng)到一個(gè)位置而不是直接進(jìn)行攻擊時(shí),但這與(游戲結(jié)束)的情況卻非常不同。在我所描述的方法的框架內(nèi),很可能產(chǎn)生再次的探索以確定當(dāng)對(duì)手的棋子數(shù)大幅減少時(shí)應(yīng)該采取什么策略,以使這些新考慮成為重中之重。

目前為止,國(guó)際象棋比賽機(jī)器還未達(dá)到跳棋機(jī)器的完善程度,盡管,正如我說(shuō)過(guò)的,它們肯定能夠進(jìn)行一場(chǎng)相當(dāng)不錯(cuò)的業(yè)余比賽。這樣的原因與機(jī)器在跳棋游戲結(jié)束時(shí)表現(xiàn)出的相對(duì)高效非常類(lèi)似。在國(guó)際象棋中,不僅是游戲結(jié)束時(shí)采取的適當(dāng)策略與游戲中場(chǎng)非常不同,與游戲開(kāi)局也非常不同。在這方面,跳棋和國(guó)際象棋的區(qū)別是,跳棋一開(kāi)始布局的玩法與進(jìn)行到中場(chǎng)的布局沒(méi)什么不同,而在國(guó)際象棋中,開(kāi)局時(shí)棋子保持著異常緩慢的移動(dòng),此時(shí)對(duì)于棋子的部署是相當(dāng)困難的。這就是開(kāi)放式玩法和研發(fā)會(huì)成為國(guó)際象棋理論的一個(gè)特殊分支的原因。

機(jī)器可通過(guò)多種不同的方式認(rèn)識(shí)到那些知眾所周知的事實(shí),并為開(kāi)局探索一個(gè)獨(dú)立的等待策略。這并不意味著我在這里已經(jīng)討論過(guò)的博弈理論類(lèi)型是不適用于國(guó)際象棋的,但只是說(shuō),在我們能制造出一臺(tái)可以玩國(guó)際象棋大師賽的機(jī)器之前,還需要有更多的考量。我的一些從事這方面研究的朋友相信,這一目標(biāo)將在10至25年內(nèi)實(shí)現(xiàn)。我并不是象棋方面的專(zhuān)家,所以我自己不會(huì)主動(dòng)地冒險(xiǎn)作出任何此類(lèi)的預(yù)測(cè)。

很有可能會(huì)學(xué)習(xí)的機(jī)器將被用于編碼新型按鈕戰(zhàn)爭(zhēng)中的按下按鈕動(dòng)作。此處我們考慮這樣一個(gè)領(lǐng)域,該領(lǐng)域已對(duì)不是通過(guò)學(xué)習(xí)而獲得的符號(hào)—括弧—進(jìn)行了自動(dòng)控制并投入使用。要基于真正戰(zhàn)爭(zhēng)中的實(shí)踐經(jīng)驗(yàn)對(duì)這些機(jī)器進(jìn)行編碼是完全不可能。首先,一個(gè)擁有足夠的經(jīng)驗(yàn)可進(jìn)行適當(dāng)編程的機(jī)器,可能視人類(lèi)早已經(jīng)被消滅了。

此外,按鈕戰(zhàn)爭(zhēng)技術(shù)必然會(huì)帶來(lái)巨大的變化,以致當(dāng)機(jī)器積累了足夠的經(jīng)驗(yàn)時(shí),戰(zhàn)爭(zhēng)的初衷可能已發(fā)生了根本性的改變。因此,對(duì)這類(lèi)學(xué)習(xí)機(jī)器的編程必須基于某種戰(zhàn)爭(zhēng)游戲,正如指揮官和職責(zé)人員以類(lèi)似的方式學(xué)習(xí)戰(zhàn)略藝術(shù)中的一些重要內(nèi)容。然而,如果在一場(chǎng)戰(zhàn)爭(zhēng)游戲中,勝利的規(guī)則不符合我們對(duì)于自己國(guó)家的實(shí)際愿景,很有可能這類(lèi)機(jī)器會(huì)產(chǎn)生一種策略,以犧牲我們每個(gè)人都在乎的利益甚至是以國(guó)家存亡為代價(jià),贏得名義上的勝利。




人與奴隸
這兒要討論的問(wèn)題,是一個(gè)道德問(wèn)題,我們所面臨的境地與奴隸制度中的一個(gè)非常偉大的問(wèn)題很類(lèi)似。讓我們承認(rèn),奴隸制度之所以很糟糕是因?yàn)樗軞埲?。然而,由于一個(gè)完全不同的原因,它又是自相矛盾的。我們希望一個(gè)奴隸很聰明,能夠協(xié)助我們執(zhí)行任務(wù)。然而,我們也希望他是順從的。完全的順從和完全的聰明是不會(huì)同時(shí)出現(xiàn)的。在古代,有多少次會(huì)發(fā)生更聰明的希臘哲學(xué)家受到一個(gè)不太聰明的羅馬奴隸主的奴役而這些哲學(xué)家們必須受其主人的行動(dòng)主導(dǎo)而非服從自己的意愿的情況!類(lèi)似的,如果機(jī)器運(yùn)行效率越來(lái)越高,且心智水平越來(lái)越高,那么,巴特勒所預(yù)見(jiàn)的機(jī)器主導(dǎo)所帶來(lái)的災(zāi)難就離人類(lèi)越來(lái)越近了。

當(dāng)我們觸及邏輯的更高領(lǐng)域時(shí),人類(lèi)的大腦是一個(gè)遠(yuǎn)比智能機(jī)器更加有效的控制設(shè)備。這是一個(gè)自組織系統(tǒng),它依賴(lài)的是將自身調(diào)整為一臺(tái)新機(jī)器的能力而非是解決問(wèn)題的精度和速度能力。我們已經(jīng)成功制造出了具有“嚴(yán)格”策略的最低邏輯類(lèi)型的機(jī)器。我們現(xiàn)在開(kāi)始制造第二種邏輯類(lèi)型的機(jī)器,它可通過(guò)學(xué)習(xí)提升自己的策略。在構(gòu)建可運(yùn)行的機(jī)器的過(guò)程中,并沒(méi)有關(guān)于邏輯類(lèi)型的具體并且可以預(yù)見(jiàn)的限制,發(fā)表一個(gè)關(guān)于大腦在哪些確切水平上比機(jī)器更智能的聲明也不安全。然而至少長(zhǎng)期看來(lái),至少在某些水平上大腦總是會(huì)比構(gòu)建的機(jī)器更具有優(yōu)勢(shì),盡管這一水平線可能會(huì)逐漸上移。

可以看出,自動(dòng)化的編程技術(shù)的結(jié)果就是把機(jī)器可在什么階段達(dá)成其特定結(jié)論,以及機(jī)器的眾多操作所包含的可能的真實(shí)戰(zhàn)術(shù)意圖,等等的有效理解,從設(shè)計(jì)師和操作者頭腦中轉(zhuǎn)移出來(lái)。這對(duì)于我們能夠預(yù)見(jiàn)游戲策略框架之外的不受歡迎的后果大有關(guān)系,機(jī)器仍在運(yùn)轉(zhuǎn)而我們的干涉能夠阻止這些后果的發(fā)生。

在這里有必要認(rèn)識(shí)到,人類(lèi)的行動(dòng)是一個(gè)反饋的行動(dòng)。為了避免災(zāi)難性的后果,僅有我們的一些行動(dòng)是不足以改變機(jī)器的進(jìn)程的,因?yàn)楹苡锌赡芪覀內(nèi)狈Σ扇⌒袆?dòng)所依據(jù)的相關(guān)信息。

在神經(jīng)生理學(xué)的語(yǔ)言中,運(yùn)動(dòng)失調(diào)可被視為與癱瘓一樣是一種(對(duì)運(yùn)動(dòng)能力的)剝奪。一個(gè)有自發(fā)性運(yùn)動(dòng)失調(diào)的患者可能不必再忍受來(lái)自于他的肌肉或運(yùn)動(dòng)神經(jīng)的任何缺陷,但如果他的肌肉、肌腱和器官無(wú)法確切地傳達(dá)他在什么位置,以及他的器官所遭受到的張力是否會(huì)導(dǎo)致他的摔倒,他將無(wú)法站立。類(lèi)似地,當(dāng)一個(gè)由我們制造的機(jī)器能夠以我們無(wú)法跟進(jìn)的速度處理它的輸入數(shù)據(jù)時(shí),在為時(shí)已晚之前,我們可能并不知道何時(shí)應(yīng)該將它關(guān)閉。我們都知道《魔法師的學(xué)徒》那則寓言,當(dāng)他的老師不在時(shí),學(xué)徒用咒語(yǔ)命令掃把提水,以致于差點(diǎn)在他的老師再次出現(xiàn)之前將自己淹死。如果學(xué)徒必須從他老師的圖書(shū)館里尋找那本包含能停止這場(chǎng)惡作劇的咒語(yǔ)的魔法書(shū),那他很可能在找到相關(guān)咒語(yǔ)之前就已經(jīng)被淹死了。同樣的,如果一個(gè)瓶廠被編程為在最大生產(chǎn)力的基礎(chǔ)上運(yùn)行,那么在廠主知道他應(yīng)該在6個(gè)月前就停止生產(chǎn)時(shí),很可能已經(jīng)被制造出的滯銷(xiāo)瓶子的巨大庫(kù)存弄破產(chǎn)了。

《魔法師的學(xué)徒》僅是眾多假設(shè)魔法機(jī)構(gòu)是平淡無(wú)奇的寓言故事中的一個(gè)。在《一千零一夜》中有一篇關(guān)于魔鬼和漁夫的故事,漁夫解除了所羅門(mén)對(duì)魔鬼的囚禁和封印,卻發(fā)現(xiàn)魔鬼發(fā)誓要將漁夫殺死;還有雅各布斯的《猴爪》的故事,有一個(gè)軍士長(zhǎng)從印度帶回來(lái)一個(gè)法寶,它可以實(shí)現(xiàn)三個(gè)人的三個(gè)愿望。我們被告知,第一個(gè)使用這個(gè)法寶的人的第三個(gè)愿望是死亡。這位軍士長(zhǎng),也就是第二個(gè)可以許下愿望的人,他的經(jīng)歷太過(guò)可怕以致無(wú)法講述。軍士長(zhǎng)的朋友,搶下了這個(gè)法寶,許愿得到200英鎊。之后不久,這個(gè)許愿人的兒子所在工廠的一名負(fù)責(zé)人來(lái)到他家告訴他,他的兒子在機(jī)器事故中遇難,工廠不承擔(dān)任何責(zé)任但愿意為他的家人提供正好200英鎊的慰問(wèn)金。他許下的第二個(gè)愿望是讓他的兒子回來(lái),結(jié)果是一個(gè)幽靈敲響了他的家門(mén)。而他的第三個(gè)愿望是讓幽靈離開(kāi)。

災(zāi)難性后果不僅是在童話(huà)世界中是可預(yù)料的,而且在會(huì)發(fā)生在現(xiàn)實(shí)世界中,特別是當(dāng)本質(zhì)上毫無(wú)關(guān)聯(lián)的兩個(gè)機(jī)構(gòu)為了實(shí)現(xiàn)一個(gè)共同的目標(biāo)而耦合在一起時(shí)。如果對(duì)于這一目標(biāo)性質(zhì)而言,兩個(gè)機(jī)構(gòu)間的通信是不完備的,那么肯定可以預(yù)料到的是,合作的結(jié)果會(huì)不盡人意。如果為了實(shí)現(xiàn)我們的目標(biāo),我們使用一種這樣的機(jī)械機(jī)構(gòu):一旦啟動(dòng)就無(wú)法對(duì)機(jī)器操作進(jìn)行有效干預(yù)而且由于機(jī)器的運(yùn)轉(zhuǎn)是如此之快且不可撤銷(xiāo),以致于在機(jī)器完成其動(dòng)作之前,我們沒(méi)有數(shù)據(jù)來(lái)介入它的運(yùn)行。那么最好確定,我們輸入機(jī)器的目的就是我們真正渴望的目的,而不只是對(duì)這一目的的一個(gè)多彩的模仿。


時(shí)間尺度
到目前為止,我一直都在考慮一家聯(lián)合企業(yè)中機(jī)器與人類(lèi)協(xié)同進(jìn)行工作時(shí)所造成的準(zhǔn)道德問(wèn)題。我們已經(jīng)看到,在使用會(huì)學(xué)習(xí)的機(jī)器時(shí),引發(fā)災(zāi)難性后果的危險(xiǎn)的主要原因之一,就是人和機(jī)器在兩個(gè)不同的時(shí)間尺度上運(yùn)行,機(jī)器比人快速得多,而兩者沒(méi)有歷經(jīng)嚴(yán)重的困難就嚙合在一起了。同樣的問(wèn)題也會(huì)出現(xiàn)在當(dāng)兩個(gè)不同時(shí)間尺度的控制操作符合作時(shí)的情況,而無(wú)論哪一個(gè)系統(tǒng)更快,或哪個(gè)系統(tǒng)更慢。這就給我們帶來(lái)了更為直接的道德問(wèn)題:當(dāng)人類(lèi)作為個(gè)體與一個(gè)有著更為緩慢的時(shí)間尺度的控制過(guò)程(如政治史的一部分,或者是我們主要的探究對(duì)象—科學(xué)的發(fā)展)進(jìn)行操作時(shí),這其中的道德問(wèn)題是什么?

值得注意的是,從長(zhǎng)期的理解和控制的角度來(lái)看,科學(xué)的發(fā)展是一個(gè)與控制和通信相關(guān)的過(guò)程。在這一過(guò)程中,50年就像是個(gè)體生命中的一天。為此,個(gè)體科學(xué)家必需要作為這個(gè)過(guò)程的一部分,這一過(guò)程的時(shí)間尺度如此之長(zhǎng)以至于他自己只能關(guān)注其中一個(gè)非常有限的領(lǐng)域。在這里,一個(gè)雙機(jī)的兩個(gè)部分之間的通信是困難且有限的。即便當(dāng)一個(gè)個(gè)體認(rèn)為科學(xué)將有助于實(shí)現(xiàn)其內(nèi)心的人類(lèi)目的時(shí),他的信念也需要一個(gè)持續(xù)掃描和再次評(píng)估,而這只是部分可能的。對(duì)于個(gè)體科學(xué)家而言,即便是人類(lèi)與科學(xué)進(jìn)程之間的聯(lián)絡(luò)的局部評(píng)估,也要求對(duì)歷史充滿(mǎn)想象力的往前看,盡管這是困難的、苛求的并且只能有限的實(shí)現(xiàn)。如果我們簡(jiǎn)單地堅(jiān)持科學(xué)家們的信條,即對(duì)于世界和我們自身的不完備的知識(shí)總好過(guò)無(wú)知,我們就不會(huì)總是天真的假設(shè),我們?cè)绞羌庇谶\(yùn)用對(duì)我們開(kāi)放的新力量,情況就會(huì)愈加美好。我們必須一直發(fā)揮我們?nèi)康南胂罅?,以審視我們?duì)于新形式的完全利用將引領(lǐng)我們要到達(dá)的地方


諾伯特·維納
美國(guó)應(yīng)用數(shù)學(xué)家,控制論的創(chuàng)始人,在電子工程方面貢獻(xiàn)良多。他是隨機(jī)過(guò)程和噪聲過(guò)程的先驅(qū),又提出了“控制論”的一詞。維納在其50年的科學(xué)生涯中,先后涉足哲學(xué)、數(shù)學(xué)、物理學(xué)和工程學(xué),最后轉(zhuǎn)向生物學(xué),在各個(gè)領(lǐng)域中都取得了豐碩成果,稱(chēng)得上是恩格斯頌揚(yáng)過(guò)的、本世紀(jì)多才多藝和學(xué)識(shí)淵博的科學(xué)巨人。他一生發(fā)表論文240多篇,著作14本。他的主要著作有《控制論》(1948)、《維納選集》(1964)和《維納數(shù)學(xué)論文集》(1980)。維納還有兩本自傳《昔日神童》和《我是一個(gè)數(shù)學(xué)家》。


    本站是提供個(gè)人知識(shí)管理的網(wǎng)絡(luò)存儲(chǔ)空間,所有內(nèi)容均由用戶(hù)發(fā)布,不代表本站觀點(diǎn)。請(qǐng)注意甄別內(nèi)容中的聯(lián)系方式、誘導(dǎo)購(gòu)買(mǎi)等信息,謹(jǐn)防詐騙。如發(fā)現(xiàn)有害或侵權(quán)內(nèi)容,請(qǐng)點(diǎn)擊一鍵舉報(bào)。
    轉(zhuǎn)藏 分享 獻(xiàn)花(0

    0條評(píng)論

    發(fā)表

    請(qǐng)遵守用戶(hù) 評(píng)論公約

    類(lèi)似文章 更多