杀手AI公式：“天网”=机器学习 区块链 物联网 无人机(9)

我们什么时候能过第四关？在人类设立自我意识测试之前，我无法给出确定的答案。但是有些AI已经写入这样的命令“如果看见人，就是用某种武器”。所以，可能几十年内，我们就能通过这个关卡。
结论
确定AI的“价值观”可不是件易事。而且，在某种程度上，第四关是最让人头疼的。如果某个AI过了这一关，觉得保全自身是最重要的，那我们不担心也不行了。
另一方面，如果只是一个机器人有这样的想法，毁掉它很简单，要么关掉，要么物理损毁。而如果我们面对是像区块链这样点对点计算、可自我复制、并在多个设备商可以运行的代码，要毁灭它就会难得多。
本文中提出的想法，可能听起来不现实，要发生也只会在未来，虽然现在的AI不像终结者中的天网那样，有权限接触武器，但是未来我们可能会往同样的方向发展。
问题的关键，不在于前文中提及的某个关卡被突破，而是说，万一这些关卡某天都被突破，同时有人够聪明，把它们结合起来。如果我们通过了前三关，那AI出现价值观也是迟早的问题。这就会加速第四关被突破的速度，某个AI就有可能觉得保全自己比保全人类更重要。
那时，我们不害怕都不行了。