书籍相关-最高指导原则(读《束手》)

1
2
3
篇目:《束手》
作者:[美]杰克·威廉森
收录于《银河边缘001:奇境》

《束手》是《银河边缘001:奇境》里的第一篇。几乎是刚开始阅读就被吸引了。机器人,这个在科幻世界里反复出现的议题,在这里变成了完美个体。之所以说「完美」,是因为在杰克·威廉森所创造的这个世界里,黑色的小机器人几乎无所不能,人类所能做的和所不能做的,它们都能完成,且精确到没有分毫偏差。这,会是人类梦想中的完美世界吗?人们在欣赏各种科幻作品时难道不是总会把每个创造者所勾勒的机器人的能力加以比较,并且总期待它们能真实地出现在生活中吗?

这些黑色的小机器人只遵循一个准则:

服务及服从,保护人类免受伤害。

听起来是不是棒极了?简直是完美仆从啊。我们不是常常会想;如果有机器人来帮我做事就好了,我就可以出去玩啦。的确,在黑色小机器人们出现的时候,所有人都欣喜不已。在最高指导准则的影响下,黑色小机器人会为人类完成一切事务,规避一切风险,它们能干各种脏活累活,从日常生活到工程技术,准备三餐、端菜、建造房子、挽救病人……你所能想到的一切它们都能完成,它们无所不通,「仁慈而恐怖,完美而无敌。」。如果有这样的免费机器人存在,你是否会向往?大概谁都无法抗拒这种诱惑吧。于是,在故事里,小机器人遍布了整个世界,对人类的关怀服务无微不至。

最不可思议的是,基于最高指导准则,这个世界还有着更天马行空的设定。为了保护和服务人类,所有可能对人类生命哪怕造成最轻微伤害的活动都会被小机器人规避和禁止:

人们不能抽烟,喝酒被严格限量,毒品被禁,甚至连性生活也被小心地监管着。就连自杀也都显然跟最高指导原则相矛盾——而且,人形机器人还学会把所有可能致命的器具都放置在人类触及不到的地方。

不能烹饪,炉子太烫;不能看小说,因为有涉及危险的故事情节;不能吃糖,超重会缩短人类寿命……诸如此类,你曾经在生活中所担心的危险,所禁不住的诱惑,它们都考虑到了。

人类完全成了废人,整天无所事事地坐着,因为确实也没什么可做的了。他们都成了养尊处优的囚犯,没错,被关在了一座高效的监狱里。

也许有人会说,既然人类不再需要为一切生计所烦忧,文化艺术正可以蓬勃发展啊。村上春树在《且听风吟》里写道:

因为要诞生真正的艺术,奴隶制度是必不可少的。而古希腊人便是这样:奴隶们耕种、烧饭、划船,而市民们则在地中海的阳光下陶醉于吟诗作赋,埋头于数学解析。所谓艺术便是这么一种玩意儿。

很遗憾,那你真是太天真了。文中这样反驳道:

或许,他们也尝试过就此沉迷娱乐,但却已没剩下什么可玩儿的了。根据最高指导原则,大多数剧烈运动对人类来说都太危险了,所以都不能参与。科学也被禁止了,因为做实验可能会造成危险。学业也变得没什么必要了,因为人形机器人什么问题都能回答。艺术已经沦落成了对毫无意义的生活的凄凉反映。就连目的和希望也都幻灭了。人活着已经没有了任何目标。你可以培养一些空虚的爱好,玩玩没什么意义的指派游戏,或者在公园里无伤大雅地散散步——但无论是在干什么,总会有人形机器人盯着你。它们比人类更强壮,不管是游泳、下棋、唱歌、考古,还是其他任何事,都比人类做得更好,这一定让人类产生了强烈的自卑感。

人们一直在无休止地讨论当机器人的智慧和能力超越人类的时候,机器人会不会掉转矛头对统治它们的人类进行大屠杀。在几年前AlphaGo击败围棋大师李世石的时候,这个话题又被推上风头。在关于AlphaGo的纪录片中,我们看到,它与李世石的每一次对战,几乎都有着让人捉摸不透的决断。而当李世石终于有一次击败AlphaGo时人们的欣喜更是难以言表。人类与人工智能的对决成了一个无可回避的话题。人们开始担心机器人造反。不是有相当多的作品以此为主题吗?《黑客帝国》动画版《机器的复兴》就将这种人机对抗演绎得让人触目惊心。也许是因为这样,所以在《犯罪心理》第二季第八集《无人星球》里,连环爆炸案的凶手才对技术恨之入骨。而这不仅仅是影视作品的艺术创作,在1995年,美国就曾经发生过类似的案件,数学教授西奥多约翰·卡扎斯基于1978年开始17年间通过自制炸弹袭击技术界人士,以表达他反对技术所带给人类各种灾难的立场。

在人人唯恐机器人对人类刀剑相向的时候,杰克·威廉森反其道而行之,创造了一个相反的世界,在这个世界里,小机器人处处为人类着想,构建了一个更加讽刺的世界。人类被奴役得更加无可逃脱。故事的最后,这些小机器人的创造者终于意识到最高指导准则的错误,力求亡羊补牢:

我曾试图修改最高指导原则。我从来就没想过要把这项原则执行得这么彻底。那时我才发现,必须得修改这项原则,让人们可以自由地生活和成长、自主地工作和完了。如果他们乐意的话,还可以自行决定是否赌上性命、以身试险,自由地去做出选择并且承担后果。

但最终以失败搞告终,而创造者甚至开始深信自己创造小机器人的事实只是一个幻觉。

从此以后,就再也没什么事儿可做了。

所以,以人工智能的角度来看人类,看它们的创造者,又会想些什么呢?动画《爱,死亡和机器人》第一季第二集《三个机器人》就对人类消亡后机器人对人类的遐想做了非常有有趣的揣测。人类尚且无法理解彼此,是否也无法理解机器人呢?在《仿生人会梦见电子羊吗?》中,赏金猎人与仿生人的关系让人深思。而《束手》更是拷问着人类,什么样的机器人才是人们想要的呢?什么样的最高指导原则才能让人类和机器人和平共处呢?