刘慈欣谈ChatGPT：人类的无能反而是人类最后的屏障(2)

第一个层次就是这种字面意义上的消灭，就是人工智能用某种暴力从肉体上完全消灭人类或是统治世界。

这一点从目前的这个技术发展趋势来看，特别是从目前的技术水平来看，在可以看到的未来可能性不是太大。

当然您刚才提到一个很有意思的概念叫迭代。人工智能的迭代，这是目前人工智能最可能出现危险的一个行为。

这个行为是什么呢？就是说当人工智能按我们现在的发展，它比人类的智能稍稍高一些的话，它自己也会像人类一样去创造新的人工智能，它创造出来的这个新人工智能可能比它的智能也稍微高一点，那么它又会接着迭代下一代，这样的话他们就会很快的把这些人工智能的智能水平提高到很高。

可能迭代下去，会提高到人类（智能）的几百倍甚至上万倍。

而它而由于它的这个计算机的计算时间比这个人脑人的大脑要快成千上万倍，那么这个迭代的时间可能十分的短，据推测可能只有半个小时到一个小时。

就说我们把人工智能发展到现在用了一个世纪的时间，而人工智能百倍于现在的这个程度，可能只用半个小时到一个小时，这是很可怕的一件事。

但是做出这个预测的人忘了一点，就是我们人类的计算能力，我们所能提供的算力是有限的。它的迭代到一定程度，我们的算力不（能够）支持它。

所以这就是一个有很讽刺意义的一件事情：我们人类的无能反而成为我们一个最后的屏障。所以您说的这这种毁灭不太可能。

那么第二种消灭则是一种我们想不到的一种方式，就是说第一种消灭人类是完全违背人类意愿的，而第二种对人类的消灭可能完全符合我们的意义。

比如说人工智能的发展，我刚才说过它可能会代替我们的这个大量的工作，而我们的社会如果适应了与人工智能的这种共存，我们发展出一种新的这种分配制度，那么我们就可能带来一个十分舒适的那种社会环境和十分舒适的生活。大部分人可能不需要工作，把大部分的工作都交给人工智能来进行。

在这种情况下，我们会越来越多地交出自己对社会运作的操作这种权利给到人工智能。

而生活会变得越来越舒适，那么这个样子下去的话，我们可能面临着人类历史上前所未有的一个巨大的陷阱。

就是说在这个科技的这种安乐窝里面，那么人类文明的活力在哪里？我们的开拓精神在哪里？如果这样一直发展下去的话，那可能人类最后的命运就是您说的被人工智能所消灭，但这个消灭的过程完全是在我们的意愿之内，而人工智能至始至终它没有任何恶意，它只是照着人类的指示去行驶。

而这样的如果真的发生这样的事，那人工智能所需要的它的智能程度以及它所需要的计算能力远远小于我们前面那个真正的字面意义上的那种消灭。所以这确实是我们应该对未来有所警觉的一件事情。


刘慈欣演讲全文整理

大家好，我们今天要谈论的话题是科幻文学中的可持续未来。

作为一种基于想象力的文学形式，科幻小说并不能够对未来作出科学的预测，它只是描述未来的各种可能性，同时它也提供了一个看世界和看未来的独特视角，这个视角与我们从现实看世界看未来的视角可能有很大的不同。

科幻的视角是什么？大家可能都知道一张叫《暗淡蓝点》的照片，我本来想把那个照片拿来的，但我觉得好像大家应该都看过那张照片，就没有把它拿来放出来。

这可能是人类历史上最重要也是最著名的照片之一，他是上个世纪70年代发射的旅行者1号宇宙探测器，在90年代初在距地球60亿公里的太空中拍摄的。

初看上去整张照片它都是黑色的，很仔细看才能发现这一片黑色中有一个小小的亮点。它十分的小，就是仅有这张照片的0.12个像素那么大。如果不加以指示，你说观看者是很难发现这个白点的。

有人形容它是太空中的一粒尘埃，其实是把它说的大了。按照比例计算，这个暗淡的小点放在宇宙中，它比地球大气层中的一粒尘埃还要小很多个数量级，要小得多。这个亮点就是地球，人类世界的全部，和我们有关的一切，所有活着和曾经活过的人，所有曾经有过和正在进行历史和生活，都在这里尘埃上面，这就是科幻的视角。

对于人类的发展和未来，这个视角与我们传统的视角是有很大差异的。从这个视角去看，我们对人类社会的可持续发展会有一些新的感悟。

原文转自：https://www.thepaper.cn/newsDetail_forward_23639458