IT思维

我不会说它不会说谎，但当它说谎时，你能通过谎言拼凑出真相。”对霍尔德曼来说，编写真值表时有一点十分关键：“我十分清楚如何在一个准代数系统中把真相梳理出来，这让我感受到力量。”

这种额外的维度允许计算能力超越当前的极限，从而为人工智能掌握诸如自我意识这样的先进功能提供了可能性。

这种系统的危险来自于自动系统完全失控，类似于著名的“回形针最大化”思想实验：一个系统被训练以达到最大的安全性和效率，最终可能会决定人类的控制或行动不够安全或有效，从而导致系统采取行动阻止人类干扰或使用它。

凯利引用了最近Facebook聊天机器人AI被关闭的例子，说明当我们失去对人工智能的控制后会发生什么：在试图学习用英语交流之后，Facebook聊天机器人AI决定，它将创造自己独有的、更高效的语言，而人类很难理解这种语言。

当研究人员意识到它在做什么时，他们很快关闭了AI机器人。