然而，目前我也很难想象我开发出来的计算机怎么样才能成为未来世界的怪物。有时就会像奥本海默在带头建造世界上第一颗核弹之后哀叹的那样，我会想我是否也会成为“世界的毁灭者”？
我想，我会在历史上留名，但确是臭名昭著。那作为一名人工智能科学家，我在担心什么呢？
对未知的恐惧
由科幻小说作家Arthur Clarke设想并最后由电影导演Stanley Kubrick制成的计算机HAL 9000就是一个很好的例子。在很多复杂的系统里，例如泰坦尼克号、美国航空航天局的航天飞机、切尔诺贝利核电站，工程师们把许多不同的组件放在一起。设计师们可能非常清楚每个单独的元素是如何工作的，但是当这些元素连接在一起时，他们就无法知之甚透，就会产生意外的后果。