“在开发那种可以独立行动的智能ai时,你认为系统需要什么保护措施?”
“你们的ai可以独立行动,但即使是这样,它们也还是有主人的。”
卡斯托尔一笑:“是的。”
亚布里艾尔沉着脸:“所以,它需要一个识别命令的系统。”
“人类给予机器的指令是清晰的,但dn1165拥有独立的意识,所以,它可以自行判断主人的命令是否可以执行。”
亚布里艾尔看着眼前的女人,一会儿后她站了起来,眼神锐利:“所以,这是一个反向的系统,是为了剥夺独立的意识——这是个控制极。你们打算如何使用?”
“是的,博士。你说得对,这是一个控制极的系统。”卡斯托尔没有否认:“它可以作用在人类身上。这一类的研究,我相信你不会陌生,人类脑机接口的研究很早就开始了。对于很多特殊病人而言,利用神经工程的手段将损坏的神经系统重新建立起来,可以让某些失去视力的病人重新看见世界、失去行动能力的病人也可以再次像普通人一样生活。”
“那些是为了帮助他人,而不是像你说的,为了控制。”
“说得对。”卡斯托尔面色不改:“那些技术,是为了帮助他人。但是,你应该也很清楚,技术是一把双刃剑,就像你说的,医生的手术刀,可以救人也可以杀人。那些技术继续发展,终有一天也会出现这样的控制极,而且这些伦理问题早已经有人预见到,我们只是先行一步,开发了这个技术。”
“……”亚布里艾尔一语不发。
“这个控制极使用的技术,是从dn1165那些量产型号上来的。原本是为了防止它们因为自行判断主人的命令不可执行而拒不执行命令时,强制切断它们的意识,使他们服从主人的命令。虽然这种情况极少发生,但作为保险手段它不可不存在。”卡斯托尔继续说道,并不在意亚布里艾尔的脸色:“不过,控制人类的心灵与控制机器两者完全不同。人类的意识是一种精神活动,要干扰人类的精神活动,除去这种手段之外还有很多方法。但这个控制极可以重新训练人的心灵。”
“通俗地说就是改变人的想法。”亚布里艾尔说道。