5. “人工超智能很聪明，不会犯错。”
电影《少年透明人》(1957)中的超级计算机
AI研究者兼Surfing Samurai机器人开发者Richard Loosemore认为大多数假设的AI毁灭世界的情景都不符合逻辑。人们总假想在这种情景下，AI可能会说：“我知道毁灭人类文明只是我的设计故障，但我不得不这么做。”Loosemore指出如果AI像这样打算毁灭人类时，那它一生会很多这样的逻辑矛盾，也会因此摧毁自己的知识库，导致自己变得愚蠢，而不足以对我们造成伤害。他还断言，那些认为“AI只会按照指定程序做事”的人，与当初用这样的话评价电脑不具备灵活性的人一样，犯了同样的错误。
就职于牛津大学人类未来研究所(Future of Humanity Institute)的皮特?麦金泰尔(Peter McIntyre)和斯图尔特?阿姆斯特朗(Stuart Armstrong)都对此有不同看法。他们认为人工智能将很大程度上受到编程的限制。他们相信AI也会犯错误，或者他们还没有聪明到了解人类想从他们那里得到什么。
“从定义上讲，超级人工智能(ASI)是一个拥有智力的载体，它在各个相关领域都要比最优秀的人类大脑更聪明。”麦金泰尔如是告诉Gizmodo。 “它将十分清楚我们用他们来做什么。”麦金泰尔和阿姆斯特朗相信AI只会做程序编写的任务，如果它能变得足够聪明的话，它将能理解依照程序完成任务与领略规则精髓的不同，也将能理解人类的意图。
麦金泰尔把人类未来的困境比作老鼠的困境。老鼠想要在人类居所寻求食物和栖息地，人类不愿居室内有老鼠，两者冲突。麦金泰尔说，“正如我们明白老鼠的目的，超级智能系统也能知道人类想要的，但仍对此漠不关心。”
