← Lex Fridman

Pamela McCorduck: 帕梅拉·麦考达克:《会思考的机器》与人工智能的早期岁月

Pamela McCorduck: Machines Who Think and the Early Days of AI

Episode 2019-08-232019-08-23简体中文

Guests: Pamela McCorduck

Listen to this episode00:00 / 1:00:17
Reading settings
Reading preferences
Text size
Download in-depth read
Read offline

English · In-depth read · Current version

Downloads are not available yet.

Full transcript · Read the full conversation in order, with its original context.

Contents3 chapters§01原文文稿 · 00:00–23:42§02原文文稿 · 23:42–46:21§03原文文稿 · 46:21–1:00:05

§01原文文稿 · 00:00–23:42

00:00以下是与帕梅拉·麦考达克(Pamela McCorduck,原文转写为 McCordick)的对话。她是一位作家,写过

00:04人工智能的历史及其哲学意义。她的著作包括

00:101979 年的《会思考的机器》,1983 年与爱德·费根鲍姆合著的《第五代》,费根鲍姆被视为

00:18专家系统之父,还有以女性为主题的《混沌的边缘》,以及许多其他著作。

00:24我是以一种不寻常的方式接触到她的作品的:偶然读到《会思考的机器》里的一句话,

00:29大意是:人工智能始于锻造众神的古老愿望。

00:37这是一种很美的方式,把我们社会与 AI 的关系连接起来,

00:42从脚踏实地的日常科学、数学和工程,到大众故事和科幻小说,

00:48再到可追溯数百年的自动机神话。通过她的文学作品,

00:54她花了大量时间接触人工智能领域的奠基性人物,包括

01:001956 年达特茅斯夏季研讨会上的 AI 创始人,这一领域正是在那次研讨会上起步的。

01:08我联系了帕梅拉做一场对话,希望了解那些早期

01:13岁月是什么样子,以及他们的梦想如何继续在我们这个社群

01:19今天的工作中回响。我常常不知道对话会把我们带向何处,但我会投入其中去看看。没有任何

01:25约束、规则或目标,是发现新想法的绝佳方式。这里是《人工

01:31智能播客》。如果你喜欢,请在 YouTube 上订阅,在 iTunes 上打五星,

01:37在 Patreon 上支持,或者在推特上联系我,账号是 Lex Friedman,拼写为 F R I D M

01:44A N。现在,请听我与帕梅拉·麦考达克的对话。1979 年,你的《会思考的机器》

01:55出版了。书中你采访了一些早期的 AI 先驱,并探讨了这样一个观点:

02:00AI 或许并非诞生于数学和计算机科学,而是诞生于神话和传说。那么,请告诉我,

02:10如果可以的话,讲讲你最初是怎样写到这本书的,开始写作的历程是怎样的。

02:19我原来是个小说家。我出版过两部小说,有一天我坐在斯坦福的门廊下,

02:29那是我们夏天租的房子。我想,我该写一部关于这些

02:33AI 领域怪人的小说,我认识他们。然后我又想,啊,别写小说,写一部历史吧。简单。

02:41只要四处走走,采访他们,拼接起来,瞧,一本现成的书。哈哈哈。

02:48其实比这难得多。但没有别人在做这件事。所以我想,嗯,这是个绝好的

02:54机会。有些人,比如约翰·麦卡锡,认为这是个疯狂的

03:03想法。这个领域还没发展起来,等等。他还有个数学方面的东西,觉得我应该

03:11改写那个。我说,不,约翰,我不是在找项目的女人。这是我想

03:17做的事。我希望你能配合。他说,哦,嘟囔嘟囔,好吧,那是你的时间。

03:24你当时是怎么推介这个想法的?我的意思是,那时这个领域还那么年轻。你怎么为一个如此年轻的领域

03:30写一部个人化的历史?我说,这太好了。这个领域的创始人

03:37都还健在,精力充沛,能谈论他们在做的事。他们当时听起来或感觉起来像创始人吗?

03:42他们知道自己创立了某种东西吗?

03:48哦,是的。他们知道自己做的事非常重要。非常。我现在回头看到的

03:56是,他们正处于研究生涯的巅峰。让我感到谦卑的是,他们

04:04抽出时间,放下身处那个位置必须做的所有事情,来和

04:11这位说“我想我要写一本关于你们的书”的女人交谈。不,这太了不起了。真的了不起。

04:17那么谁给你的印象最深?也许回顾 63 年前的达特茅斯会议,

04:26马文·明斯基在,麦卡锡在,克劳德·香农、艾伦·纽厄尔、赫伯·西蒙,

04:32还有你提到过的一些人。还有其他人物,对吧?你的一位合作者

04:40他不在达特茅斯。

04:43他不在达特茅斯。

04:43不在。我想他当时还是本科生。

04:47当然还有乔·特劳布。这些都是那个时代的参与者,虽然不在达特茅斯。

04:56对。

04:57卡内基梅隆大学等等。那么如果你能描绘一幅图景,有哪些人物令你印象深刻,

05:02凭记忆来说?包括你采访过的人,也可能没采访过,只是身处那种

05:08氛围之中的人。

05:09氛围之中。

05:11当然,四位创始人都是非凡的人物。他们确实是。

05:15四位创始人是谁?

05:18艾伦·纽厄尔、赫伯特·西蒙、马文·明斯基、约翰·麦卡锡。他们四人不仅

05:24参加了达特茅斯会议,而且纽厄尔和西蒙带着一个能运行的程序抵达,

05:29名叫“逻辑理论家”。其他人对如何做都有很好的想法,但

05:34但他们还没打算动手。

05:41你提到了乔·特劳布,我的丈夫。在认识乔之前,我就已经沉浸在 AI 之中,

05:50因为我曾是斯坦福的爱德·费根鲍姆的助理。在那之前,

05:55我参与过一本由费根鲍姆和朱利安·费尔德曼编辑的书,名叫《计算机与思维》。

06:04那是第一本 AI 读本教材。他们编这本书,只是因为他们想给伯克利的人

06:10讲授 AI。当时什么都没有,你得让他们去这本期刊那本期刊上找。

06:15那时不是可以上网查文章的互联网时代。所以我从一开始就对

06:22AI 着迷。我是英语专业的,我懂什么?可我就是着迷。这就是

06:30你看到那种历史的、文学的背景的原因,我认为它在很大程度上是

06:38AI 这一延续脉络的一部分,AI 正是出自同样的冲动。那种传统的,那是什么,

06:47是什么吸引你走向 AI?你当时是怎么看待它的?有哪些可能性、

06:54哪些梦想?什么让你感兴趣?人类头颅之外的智能这个想法,

07:03这是个非凡的想法。即使在我写完《会思考的机器》时,

07:08我也不知道他们能否成功。事实上,最后一章非常含糊,

07:15坦率地说。这个领域是成功了。是的。那么,是否存在这样的想法:AI 始于锻造众神的

07:25愿望?也就是我们渴望创造这种比我们自己

07:33更伟大的另一种存在的精神成分。对那些人来说,我认为不是。纽厄尔和西蒙是认知心理学家。

07:42他们想要的是模拟人类智能的各个方面,

07:49并且发现可以在计算机上做到。明斯基只是觉得这是件很酷的事。

07:57麦卡锡也是一样。麦卡锡在 1949 年还是加州理工学院的学生时就有了这个想法。

08:06他听了某个人的讲座,这在我的书里有,我忘了是谁了。他想,

08:15哦,这会很有趣。我们怎么做呢?他采取了非常数学化的方法。

08:21明斯基是混合型的,纽厄尔和西蒙则非常偏认知心理学。我们如何模拟

08:29人类认知的各个方面?多年来发生的事情当然是,

08:37我们对智能的定义大大扩展了。如今,生物学家

08:44可以坦然地谈论细胞的智能、大脑的智能,

08:49不只是人脑,而是任何一种大脑的智能。头足类动物,我是说,章鱼

09:00无论怎么衡量都非常聪明。我们在 60 年代甚至 70 年代都不会这样想。

09:06所以所有这些都融入了进来。我确实听一位行为灵长类学家弗朗斯·德瓦尔(Franz De Waal)

09:16说过,AI 教会了我们该问什么问题。是的,这就是会发生的事,对吧?当你尝试去构建它,

09:26你才真正开始提问。它给我们自己照了一面镜子。是的,没错。所以你

09:32身处其中。似乎没有多少人在问你问的那些问题,

09:38或者像你这样去审视这个领域。我当时地位很低。我去

09:45为此申请资金,因为我需要有人转录访谈,也需要差旅

09:53费用,我找遍了你能想到的所有机构,国家科学基金会、DARPA,还有一个空军的

10:07拨款机构。每一个都说,嗯,这是个很有趣的想法。

10:15但我们会考虑一下。国家科学基金会甚至明明白白地对我说,

10:23嘿,你只是个作家,不是科学史学家。我说,是的,没错。但

10:30科学史学家以后会在这个领域里扎堆。我是为普通

10:35读者写的,我当时是这么想的。他们仍然不肯让步。最后我拿到了一笔私人资助,

10:43起初并不知道来自谁,后来才知道是麻省理工学院的爱德·弗雷德金。他很富有,喜欢他所谓的

10:51“怪人点子”。他认为这是个怪点子,并且愿意支持。我永远

10:58感激他,我要这么说。有人会说,从科学史角度看待 AI,或者哪怕只是一部

11:06历史,或者任何类似你写的这本书的东西,此后就再没人写过。也许是我

11:13不了解,但肯定不多。如果我们把视野放得比这短短的几十年

11:20更大一些,AI 的根源是什么?哦,可以追溯得非常久远。是的,当然,

11:30有各种传说,比如魔像和 20 世纪早期的机器人。但可以追溯得

11:41远得多。如果你读荷马,《伊利亚特》里就有机器人。一位古典学者

11:49几个月前向我指出,你说你刚读完《奥德赛》。《奥德赛》

11:54里到处是机器人。是吗?我问。是的。你以为奥德修斯的船是怎样从一个地方到另一个地方的?

12:00他没有那么多船员来做这件事。对,那是魔法,那是机器人。

12:07哦,我想,真有意思。所以我们很早以前就有了 AI 这个概念。然后到了

12:1719 世纪末、20 世纪初,有科学家真的

12:23试图以某种方式实现它,但没有成功。他们没有相应的技术。

12:29当然还有 19 世纪 50、60 年代的巴贝奇,他看到自己制造的东西能够

12:40表现出智能行为。当他的资金耗尽,英国政府最终说,

12:47够了。他和洛夫莱斯夫人决定,哦,那我们何不拿这个去赌赛马?他

12:55还有其他筹钱的想法。但如果我们再回溯一次,我想人们

13:02其实并不真正知道机器人和机器人的概念确实出现过。你谈到了希腊式的

13:09和希伯来式的观点。哦,是的。你能分别讲讲吗?我是这样界定的。

13:16希腊式观点认为机器人很棒。它们是帮手。它们帮助这位赫菲斯托斯,

13:25这位神祇在他的锻造坊里。我想他造它们是为了帮自己,诸如此类。

13:32他们欢迎机器人这整个概念。希伯来式观点与,我想是第二条

13:40诫命有关:不可为自己雕刻偶像。换句话说,你最好不要

13:47开始模仿人类,因为那是被禁止的。这是第二条诫命。

13:55对人工智能的许多反应,是觉得这在某种程度上是邪恶的,

14:08在某种程度上是亵渎的,我们不该走这条路。现在你可以说,是的,但会有

14:17一些负面影响。我说,是的,有,但亵渎不在其中。

14:21有一种恐惧感觉近乎原始。这有宗教根源吗?

14:29因为我们社会的很大一部分有宗教根源。所以会有一种感觉,就像你

14:36说的,创造“他者”的亵渎,创造某种东西,不一定

14:43是人工智能,而是一般意义上创造生命。这是弗兰肯斯坦的想法。

14:48我的咖啡桌上就放着带注释的《弗兰肯斯坦》。那是一部了不起的小说,真的

14:56极其敏锐。是的,我们确实害怕这个,而且有充分的理由害怕,

15:03因为它可能失控。也许你可以谈谈这种恐惧,

15:08关于它的心理,如果你想过的话。你知道,短期内有一组现实的恐惧和

15:12担忧。如果我们真的思考人工智能

15:17系统,可以想到算法中的偏见与歧视。可以想到社交

15:29网络有推荐你所见内容的算法,这些算法因此控制着

15:35大众的行为。有这些担忧。但在我看来,人们的恐惧

15:40比这更深。那么你思考过其中的心理吗?

15:46我想我肤浅地想过。有这样一种观念:如果我们制造出一台

15:57会思考的机器,它会比我们想得更好,从而取代我们。

16:01我想这是一种近乎对死亡的原始恐惧。你说大约在那个时候

16:11你在斯坦福与爱德·费根鲍姆共事。我们来看看这个人。纵观他的

16:21历史,他显然是关键人物,是 AI 历史上众多关键人物之一。他本人总体上有什么变化,

16:31他周围又有什么变化?斯坦福在过去,我们谈的是多少年?

16:36哦,从 65 年起。

16:3865 年。所以也许不必只谈他,可以更宏观一些。但因为他是专家系统中的

16:45关键人物,比如,那么你在 70 年代、79 年采访过的这些人,

16:54这几十年里发生了怎样的变化?

16:58就爱德而言,我很了解他。我们是亲密的朋友,大约每个月见一次。他告诉我,

17:12《会思考的机器》刚出版时,他真觉得所有的前言部分都有点

17:17胡扯。十年后,他说,不,我明白你想说什么了。是的,这是一种冲动,

17:27数千年来人类一直有这种冲动,要在人类头颅之外

17:34创造出具有智能的东西。我认为当你身处算法层面时,

17:46只是努力让某样东西跑起来,这已经够难了,很难再退后一步去思考

17:53全局。这让我想起在圣达菲时,我认识很多考古学家,

17:59这是我的一个爱好。我会说,是啊是啊,你可以看着陶片说,

18:07哦,这来自这个部落,这来自这条贸易路线,等等。但整体

18:14图景呢?一位非常杰出的考古学家对我说,他们不这样想。不,

18:21他们是在把陶片与其来源对应起来。这堆玉米的其余部分

18:30是从哪来的?是在这里种的吗?还是在别处种的?我认为这是任何

18:37科学领域的一部分。你忙于艰苦的工作,那确实是艰苦的工作,以至于没有退后一步

18:46说,哦,现在我们来谈谈这一切的总体意义。是的。

18:53那么连明斯基和麦卡锡也没有,他们……

18:58哦,那些人想过。是的,创始人们想过。

19:01是早期还是后来?

19:03相当早。但方式与我看待它的方式不同。那两位认知心理学家,

19:11纽厄尔和西蒙,他们想设想改造认知心理学,让我们能够真正、

19:20真正理解大脑。明斯基更偏思辨。约翰·麦卡锡则把它看作,

19:32我想我这样说对他是公道的,他确实认为拥有这项技术对人类是一大福音,

19:40仅此就足以成为去做的理由。他有非常精彩的

19:48寓言,说如果你做了数学推导,就会看到这些东西对

19:56人类确实有益。如果你提出技术上的反对,他有答案,一个技术上的

20:03答案。他会说,我们可以这样克服,然后等等等等。他最喜欢的一件事

20:10是他所谓的“文学问题”,当然他曾好几次向我提起。

20:16就是文学中的一切都有惯例。其中一个惯例

20:23是有反派和英雄。而在大多数文学作品中,英雄是人类,

20:36反派是机器。他说,事情根本不会是这样发展的。

20:41但这是我们习惯的样子。所以当我们讲述 AI 的故事时,总是

20:47套用这种模式。我想,是的,他说得对。回头看,经典作品《罗素姆万能机器人》(RUR)当然就是

20:57机器试图推翻人类。《弗兰肯斯坦》不一样。弗兰肯斯坦是

21:06一个造物。他从来没有名字。弗兰肯斯坦当然是创造他的那个人,人类,

21:13弗兰肯斯坦博士。这个造物想被爱,想被接纳。只有当

21:22弗兰肯斯坦转过头去,其实是朝相反方向跑掉,造物失去了爱,

21:34他才变成后来的那个怪物。

21:38那么《弗兰肯斯坦》里谁是反派?不清楚,对吧?

21:43哦,是不清楚。

21:45其实是那些逼迫他的人。他们把他逼走,激发出了他最坏的一面。

21:54没错。他们不给他任何人间的慰藉。他被赶走了,你说得对。

22:00他曾一度成为一位盲人的朋友。他侍奉这位盲人,

22:08两人变得很亲近。但当盲人家里视力正常的人走进来时,

22:14啊,你这里有个怪物。所以它在某种意义上很有说教性。我原先不知道的

22:23是,玛丽·雪莱和珀西·雪莱是关于废奴

22:31——美国废除奴隶制——的文献的热心读者。他们全盘吸收了这些:你们正在把这些人

22:38变成怪物,因为你们不肯给他们应得的尊重和爱。

22:44如果我们哲学一下,你是否担心,一旦我们造出

22:52稍微更聪明一点的机器,比如看看 Roomba 这种吸尘器、清洁机器人,

22:58人性中那种虐待他者、虐待与我们不同者的阴暗面

23:08会显现出来?

23:09我不担心。我能想象它会发生。但我认为 AI 能为人类带来的东西

23:18会如此有吸引力,以至于人们会被说服。

23:25你深入研究过这些人,与他们有过深入交谈,很有意思的是想了解

23:32他们思考方式的故事,以及它是如何改变的,你自己

§02原文文稿 · 23:42–46:21

23:42对 AI 的思考是如何改变的。你提到了麦卡锡。那么在卡内基梅隆大学的那些年呢,

23:51和乔在一起时?好的。乔不在 AI 领域,他研究的是算法复杂性。

24:03比如说,AI 和计算机科学之间是否一直有一条界线?

24:07AI 是不是一个自成一体的“弃儿”之地?当时是这种感觉吗?

24:10AI 确实有过一段被排斥的时期。比如 1974 年,这个新领域才刚满 10 年。

24:24计算机科学这一新领域被国家科学基金会要求,

24:31我相信是国家科学基金会,但也可能是国家科学院,我记不清了,

24:34向同行科学家说明计算机科学处于什么位置、意味着什么。

24:44他们想把 AI 排除在外。他们同意把它放进去,只是因为唐·克努特说,

24:53嘿,这很重要,你们不能把它漏掉。

24:57真的吗?唐,老兄?

24:58唐·克努特,是的。

24:59我最近也和他聊过。偏偏是他。

25:02是的。但你看,AI 圈的人不可能提出这个论点,没人会相信他。

25:08但克努特是被相信的。是的。

25:10所以乔·特劳布研究的是“真东西”。

25:15乔研究算法复杂性。但他会一再明明白白地说,

25:22我认识的最聪明的人都在 AI 领域。

25:24真的吗?

25:25哦,是的,毫无疑问。总之,乔喜欢这些人。事情是这样的,我想是在

25:35我开始写《会思考的机器》的时候,赫伯·西蒙和我成了非常亲近的朋友。

25:41他每天下班后会走过我们在诺森伯兰街的房子。而我正好

25:47在给打字机盖上罩子。我会探出门去说,

25:52赫伯,要不要来杯雪莉酒?赫伯几乎总是想喝一杯雪莉酒。于是他就进来,

25:59我们聊一两个小时。我的日记里写着,我们今天下午聊了三个小时。

26:06当时他在 AI 方面心里想的是什么?

26:11哦,我们没怎么谈 AI,聊的是别的事。

26:14就是生活。

26:15我们都热爱文学。赫伯用法语原文把普鲁斯特从头到尾读过两遍。

26:24我做不到,我读的是英文译本。所以我们聊文学。

26:30聊语言,聊音乐,因为他热爱音乐。我们还聊

26:36艺术,因为他其实画得够好,后来不得不放弃,因为他担心

26:44这会妨碍他的研究,等等。所以不,真的就是闲聊。

26:51但很温暖。有一年夏天我对赫伯说,我的学生们拥有所有真正

26:59有趣的对话。我当时在匹兹堡大学英语系教书。

27:03他们可以谈论生命的意义之类的话题。而我有什么呢?

27:09我只有大学的会议,讨论复印预算,以及浪漫主义诗歌课

27:17该上一学期还是两学期。赫伯笑了。他说,是的,我明白你的意思。

27:23他说,但你可以做点什么。多特,那是他的妻子,多特和我过去

27:30在芝加哥大学每个周日晚上办沙龙。基本上就是

27:38敞开大门,人们都知道。不是为了闲聊,而是真正为了某个有深度的

27:47话题。他说,但我的建议是你事先选好话题。好,我说。

27:54于是整个夏天我们通信。那时用的是美国邮政,因为

28:01当时没有个人电子邮件。我决定由我来组织,一共八个人,

28:12艾伦·诺兰(原文转写,应指艾伦·纽厄尔)和他的妻子、赫伯·西蒙和他的妻子多萝西娅。城里有一位小说家,

28:21叫马克·哈里斯,他刚到,还有他的妻子约瑟芬。马克当时最出名的是

28:29一部叫《轻轻敲起战鼓》的小说,写的是棒球。再加上乔和我,一共八个人。

28:36我们每月聚会,一头扎进真正困难的话题,非常有趣。

28:45TK 你自己对人工智能的看法

28:53在写作《会思考的机器》的过程中以及之后,发生了怎样的变化,有哪些连锁反应?

28:57RL 我对整件事能否成功有点怀疑。但这无所谓。对我来说,

29:04它太大胆了,AI 总体上就是如此。在某些方面,它至今没有按我预期的那样发展。

29:16也就是说,借助深度学习等等,出现了大量精彩的应用。

29:26但那些都是算法层面的。而在符号处理方面,目前还很少。

29:39那是一个等待勤奋的研究生们去开拓的领域。

29:45TK 也许你可以告诉我,80 年代你的生活中冒出了哪些人物,与专家系统有关,

29:53那时符号 AI 的可能性,也就是大多数人所认为的 AI,

30:00如果你梦想 AI 的可能性,那其实就是专家系统。它们撞上了一些墙,

30:07遇到了一些挑战。我想,是的,它们会带着一些新的突破

30:12再次出现。但那种感觉是怎样的,既有那种可能性,也有随之而来的

30:17研究放缓的寒冬?BG 啊,你知道,整个“AI 寒冬”的说法对我来说

30:25纯属胡扯。TK 雪的冬天。

30:26BG 因为我看 80 年代所做的基础研究,据说那是,

30:34天哪,其实非常重要。它奠定了以前没人想过的东西,

30:40但那是基础研究,无法变现。于是就有了“寒冬”。

30:44TK 那就是寒冬。BG 你知道,研究,

30:49科学研究是时断时续、起起落落的。它不是那种顺畅的,

30:54哦,这个接着那个,那个又接着另一个。不,它根本不是这样运作的。

30:59TK 有意思的是,寒冬的发生方式,从来不是研究者的错。

31:05而是某种炒作、过度承诺造成的。嗯,不,让我收回这句话。有时

31:12确实是研究者的错。有时某些研究者可能会过度承诺

31:17可能性。他们自己相信我们只差几年了。比如我最近

31:23和埃隆·马斯克交谈,他相信他会有自动驾驶车辆,会有自动驾驶车辆

31:28在一年内实现。而且他是真的相信。BG 一年?

31:30TK 一年。是的,同时大规模部署。

31:33BG 说明一下,现在是 2019 年。所以他说的是 2020 年。

31:38TK 要做成不可能的事,你真的必须相信它。我认为当你相信的时候会发生的是,

31:44因为他身边有很多非常杰出的人,

31:48会有一些好东西出来。当你真正相信、那样努力工作时,会产生一些意想不到的

31:53出色突破。BG 我相信这一点。我也相信

31:58自动驾驶车辆会到来。我只是不相信会在一年内。我希望如此。

32:02TK 但无论如何,自动驾驶车辆是个好例子。有一种感觉,

32:09许多公司承诺在 2021 年、2022 年前实现,福特、通用,基本上每一家汽车

32:16公司都承诺会有自动驾驶车辆。这种过度承诺正是

32:21导致寒冬的原因。因为我们会到那些日期,而那时不会有自动驾驶车辆。

32:26BG 然后人们会觉得,等一下,如果我们当时相信了你的话,

32:32那就意味着我们花了数十亿美元,却没有赚到钱,于是会出现一种反向反应,

32:39所有人都放弃了它。从智识上说,在各个层面,希望就

32:46消失了,只剩下少数基础研究者。所以你对这个想法的

32:52某些方面感到不舒服。TK 嗯,这是科学与商业之间的区别。

32:58BG 那你认为科学就按其自身的方式继续下去?

33:04TK 哦,科学确实可能因为得不到适当或及时的资金而被扼杀。

33:14我认为英国就是个完美的例子。莱特希尔报告,

33:19我记不清哪一年了,基本上是说,英国往这上面投任何钱都没有用,

33:26它没有前途。而这一切其实源于英国的社会派系。

33:37爱丁堡憎恨剑桥,剑桥憎恨曼彻斯特。这个故事让别人去写吧。

33:44但它确实对那里的研究造成了沉重打击。现在他们凭借 DeepMind 强势回归了。

33:54但那是一个人和他身边的一群有远见的人。BG 但我想就此追问一下,

34:03这有点意思。你不喜欢“AI 寒冬”这个说法。

34:08这从何而来?你当时在哪里?TK 哦,因为我就是觉得它不是真的。

34:15BG 确实存在过一个特定的时期。这当然是一种浪漫的想法。

34:21TK 是啊,嗯。不,我敬佩科学,也许胜过敬佩商业。商业也挺好。嘿,

34:33你知道,我们都得活着。但科学的眼光比商业长远得多,而且

34:46几乎不受影响地继续下去。不可能完全不受影响,但几乎不受

34:56什么能卖、什么不能卖,什么能变现、什么不能变现的影响。BG 所以寒冬只是

35:01发生在商业一侧的事,而科学继续前进。这是个美好而乐观、

35:10鼓舞人心的观点。我同意你。我认为如果我们看看在 AI 领域工作的关键人物,

35:16以及大多数学科中的关键科学家,他们是出于对科学的热爱而继续工作。

35:22你总能凑到一些资金维持生存,他们会继续勤奋工作。

35:31但现在确实有大量资金,在 AI 和

35:38深度学习方面存在一种担忧:由于过度承诺,我们可能再次遭遇

35:44资金放缓,这确实会影响学生的数量,诸如此类。

35:47RG 是的,确实会。BG 那么你在《会思考的机器》中的那些想法,

35:52在随后的几十年里你是否延续了那种好奇心?

35:56RG 是的,延续了。BG 那你对 AI 社群如何演变的看法,历史性的看法是什么,

36:03围绕它的对话、工作?从诞生至今它是否一直保持同样的样子?

36:09RG 不,当然不是。正如我们刚才谈到的,符号 AI 基本上枯竭了,

36:19一切都变成了算法。我记得一位年轻的 AI 学生告诉我他在做什么,

36:27而我离开这个领域已经很久了。我投入到圣塔菲

36:33研究所的复杂性研究中。我想,算法,是的,它们是服务于某个目标的,但不是主角。

36:41不,它们成了主角。这让我很惊讶。我们都知道这样做的弊端。我们都

36:49知道,如果你用算法根据海量的人类决策来做决定,

36:58其中就固化了人类犯的所有错误,各种偏见、短视,

37:05等等等等。BG 你提到了圣塔菲研究所。你写过小说

37:13《混沌的边缘》,但它受到复杂性思想的启发,其中很多思想已在

37:20圣塔菲研究所得到广泛探索。这是另一个迷人的话题,也就是从混沌中涌现的

37:31复杂性。没人真正知道它是怎么发生的,但似乎所有有趣的

37:37事情都发生在那里。那么,首先不说你的小说,仅就复杂性本身以及

37:44圣塔菲的工作,如何融入 AI 历史这个更大的拼图?或者甚至是你个人的

37:51历程?RG 我做的最后几个与 AI 相关的项目之一,

37:57是研究画家哈罗德·科恩的作品。哈罗德

38:06深度参与了 AI。他首先是一位画家。他的项目 AARON(原文转写为 ARIN)是他的毕生

38:17项目,所做的是反映他自己的认知过程。好的。哈罗德和我,尽管我写了

38:30一本关于它的书,我们之间有很多摩擦。我当时想,就这样吧。这本书

38:39没了声息。它出版后就掉进了沟里。就这样了,我完了。是时候做点不同的

38:47事情了。碰巧那是我丈夫的休假年。我们在

38:55圣塔菲研究所待了两个月,在加州理工学院待了两个月,然后春季学期去了德国

39:03慕尼黑。在圣塔菲研究所的那两个月对我来说极具修复作用。我开始

39:15当时研究所很小,位于老圣塔菲小径上的某个办公楼群里。

39:22每个人都开着门。所以你可以为一个问题绞尽脑汁,如果最终还是没搞懂,

39:29你可以走进去找斯图尔特·考夫曼(Stuart Kaufman)或其他任何人,说,我不明白这个。

39:39你能解释一下吗?我谈到复杂适应系统时交谈的人之一

39:46是默里·盖尔曼(原文转写为 Gelman)。我把哈罗德·科恩所做的事告诉了默里。我说,你知道,

39:55这在我听来像是一个复杂适应系统。他说,是的,就是。嗯,你瞧?

40:02哈罗德的 AARON 在世界各地的科学和经济学等领域有一大批“孩子”和“表亲”,

40:09诸如此类。我如释重负。我想,好吧,你的直觉没错,你做的是

40:16对的事。我当时缺乏相应的词汇。而这正是圣塔菲

40:21研究所给我的东西之一。如果我能重写那本书——不,它刚刚出版,我没法重写。

40:26我本可以有一套词汇来解释 AARON 在做什么。好的。于是我对研究所里正在发生的事

40:34产生了浓厚兴趣。那里的人聪明、风趣,并且愿意向我这个外行

40:44解释任何事情。当时研究所所长乔治·考恩(George Cowan)说,他

40:51觉得如果我写一本关于研究所的书也许是个好主意。我考虑了一下,

40:58正盯着别的什么项目,天知道是什么。我说,抱歉,乔治。是的,我真的很

41:05想做,但眼下对我来说行不通。他说,哦,太可惜了。我觉得这

41:11会是一本有意思的书。结果他是对的,我错了。我真希望当初做了。不过这

41:17很有意思。我之前没这样想过:那是一条我没走、却希望自己走过的路。

41:22你知道吗?就这一点而言,作为作家,你其实相当勇敢,

41:31你来自文学的世界,有着文学思维和历史思维。我是说,就是

41:37从那个世界出来,勇敢地与我想应该是自我相当大的 AI 或复杂性领域的人交谈。

41:49是的,AI 或复杂性领域等等。你是怎么做到的?我是说,我猜他们也可能

41:59被你吓到,因为这是两个不同的世界碰到了一起。

42:03我从来没察觉到有人被我吓到。

42:06但你怎么有足够的勇气?你从哪里找到的胆量去……

42:08天哪,纯属傻运气。我是说,这是一块值得翻开的有趣石头。我打算

42:14写一本关于它的书。你知道,如果人们觉得自己会被写进书里,

42:18他们对作家就会有足够的耐心,任由你瞎折腾,等等。

42:24但他们也会看作家是否有,

42:28眼里有没有那种光彩,是否真的懂。

42:31是啊,当然。

42:32你是什么时候在圣塔菲研究所的?

42:35我说的时间是 1990、1991、1992 年。但之后,因为乔是研究所的外聘教员,

42:46我们每年夏天都在圣塔菲。我们在那里买了房子,我与研究所的往来就没那么多了。

42:52我在写我的小说,做我手头在做的事。

43:00但我热爱那个研究所,我热爱

43:08同样,是那些想法的大胆。这真的吸引我。

43:12我觉得有这样一种感觉,就像在一流的神经科学研究所里一样,

43:23人们是为了长远的目标,去理解关于

43:29现实与自然的某些根本问题。这真令人兴奋。那么如果我们现在把目光放近一些,

43:36AI 如今非常流行。这个世界,你提到了算法化,

43:46但总体来说,人们的精神面貌,你通过小道消息听到的那些

43:51谈话,和你记忆中的起点有所不同吗?

43:55没有。同样的兴奋,同样的那种“这真的会改变

44:01世界”的感觉。而且它会,它已经做到了。你知道,很多人,尤其是年轻人,二十岁左右的,

44:07觉得我们刚刚发现了特别的东西。我们明天就要改变

44:14世界。从时间尺度上看,你是否对 AI 突破发生的

44:24时间尺度有所判断?我真的没有。因为看看深度学习。

44:32杰弗里·辛顿 86 年就提出了那个算法。但花了这么多年,

44:44技术才好到真正可以应用。所以不,我完全无法预测。

44:56我做不到,我甚至不会尝试。那么,我不是让你去预测,而是请你谈谈,

45:03我相信在 60 年代,一直到现在,都有一些人认为,我们不妨称之为,

45:09用这个有趣的词,“奇点”。出现一次相变,出现某种深刻的感受,

45:16我们都对所能实现的事感到真正的惊讶。我相信那些梦想

45:22是存在的。我记得读到过 60 年代的一些言论,并且一直延续。你自己的看法,

45:29如果回头看,对于奇点时间表的看法有什么变化?

45:34嗯,我不太赞同雷·库兹韦尔所描述的奇点。

45:46你如何界定库兹韦尔的观点?你如何看待其中的奇点?

45:53如果我理解库兹韦尔的观点,大致是会有这样一个时刻,机器

45:59比人类更聪明,然后,你知道,游戏结束。至于游戏怎么结束,我是说,它们会把我们关进保留地吗?

46:07它们会怎样,等等等等。首先,机器在很多方面

46:15早就比人类聪明,而且自从加法机发明以来就是如此。

§03原文文稿 · 46:21–1:00:05

46:21所以它不会像某个宏大的十字路口那样到来,在那里

46:29双方相遇,我们的后代,俄狄浦斯,说,你死定了。这根本不会发生。

46:37是啊。所以在计算器面前游戏早就结束了,对吧?它们在基础算术上

46:44已经比我们强得多。但你知道,还有类人的智能。而且不是那些

46:51毁灭我们的,而是你可以当作朋友、可以与之建立深层

46:57联系的,那种通过图灵测试乃至超越它的想法。你

47:04梦想过这些吗?哦,是的,是的,是的,那些可能性。在我与爱德·费根鲍姆合写的一本书里,

47:10在我与爱德·费根鲍姆合写的书里,有一个小故事叫“老年护理机器人”。

47:17我是怎么想出这个老年护理机器人的,本身就是个故事。不过这个老年护理

47:24机器人会做什么呢?它不只是给你清洁、喂你吃饭、推你到阳光下。

47:29它有很大的优点:它会倾听。它说,再给我讲讲 73 年那次了不起的政变。再给我讲讲

47:45你的孙子孙女多么糟糕或多么棒,等等等等。

47:52它不是守在身边想继承你的钱。它守在身边也不是因为找不到

47:59别的工作。这就是它的工作,等等等等。嗯,我会喜欢这样的东西。

48:09是的。对我来说,这深深地让我兴奋。我想我们有很多人是这样。

48:15莱克斯,你要知道,那是个玩笑。我编出它是因为我需要对大学生们讲话,

48:20得让他们对 AI 可能是什么样子有点概念。我越讲越细,他们笑得在过道里打滚。

48:26结果它写进书里后,《纽约书评》把我批得体无完肤:

48:36这正是我们对 AI 圈这些人的看法。

48:41他们没有人性。拜托,别这样。你不觉得这对

48:47这个世界来说是 AI 可能做到的好事吗?我觉得是,绝对是。而且,

48:52我现在快 80 岁了。等我需要这样的帮助时,我也希望它自己滚到角落里,

49:02闭上那张该死的嘴。让我在这一点上多说几句。你真的这样想吗?

49:09是的,真的。原因是这样。你不想让它稍微顶撞你一下吗?

49:13稍微可以。但我看着我的朋友们经历过家里请人帮忙的种种问题。

49:20有些人很幸运,请到了出色的帮手。有些人

49:28家里的帮手想让电视整天开着,想整天

49:34打电话。不行。就自己滚到角落里闭嘴。不幸的是,

49:41我们人类当助手的时候,即使在帮助别人,

49:47我们仍更在乎自己。当然。所以会造成更多的挫败感。而机器人 AI

49:54助手真的可以为你优化体验。我刚才说的是这一点,

50:01你其实提出了一个非常非常好的观点。但我说的是这样一个事实:

50:05我们人类有点复杂,我们不一定想要一个完美的仆人。

50:11我不想,也许你不同意,但我认为人与人之间存在一种推拉。

50:20你说得对。

50:21一点张力,一点神秘感,当然这对 AI 来说很难做对。但

50:27我确实感觉到,尤其是在今天有了社交媒体之后,人们越来越孤独,

50:34即使是年轻人,有时尤其是年轻人,这种孤独,存在一种对联结的

50:42渴望,AI 可以帮助缓解其中一部分孤独。一部分,就是有个倾听的对象,

50:50就像真人一样。可以这么说。可以这么说,是的。可以这么说。对我来说这真的令人兴奋。

51:03这确实令人兴奋。但如果我们看看那种水平的智能,它

51:08其实极其难以实现,作为奇点或者随便什么,那是人类水平的

51:15门槛,人们也梦想过。图灵就梦想过,他还给出了日期时间表。你的

51:23时间表是怎样演变的?

51:27我根本不去想它。

51:28你根本不去想?

51:29不。这个领域对我来说一直充满惊喜。

51:38你只是接受它,享受基础科学的乐趣。

51:42是的,我就是做不到。也许是因为我在这个领域待得够久,会觉得,

51:48别往那个方向走。赫伯·西蒙在预测这件事何时、那件事何时会发生上糟透了,

51:54而他本来是个明智的人。

52:00他的话经常被引用,对吧?

52:03是的,被当作传奇。

52:04是的。你对 AI 有担忧吗,比如许多人

52:14如埃隆·马斯克、山姆·哈里斯等人所思考的生存威胁?

52:18有。这在我的书里占了半章。我称之为“男性凝视”。

52:29你先听我说完。“男性凝视”其实是电影评论中的术语。

52:36提出这个概念的那位女性的名字我一时想不起来。但她指出,大多数电影

52:44都是从男性视角拍摄的,女性是客体而非主体,她们没有任何

52:53能动性,等等。所以当埃隆和他的朋友霍金等人出来说

53:01AI 会把我们的午饭、晚饭连夜宵都吃掉时,我想,什么?

53:08我对爱德·费根鲍姆说,哦,这就是第一个。首先,这些人一直都是

53:13街区里最聪明的人。而现在来了个可能更聪明的东西。哦,趁它接管之前

53:18把它扼杀掉。爱德笑了,他说,我没这样想过。

53:24但我这样想过,确实。这就是男性凝视。好吧,假设这些东西真的有能动性。

53:34那就让我们等着瞧会发生什么。我们能赋予它们伦理吗?能赋予它们

53:43同理心吗?还是它们只会变成,我不知道,我们已经有几个世纪这样的男人了。

53:54有意思的是,自我,男性凝视一下子就感到受威胁了。因此你

54:05无法耐心、冷静地思考这项技术可能如何演变。说到这个,你 96 年的书,

54:16《女性的未来》,我认为在当时和现在,当然是现在,我是说,抱歉,也许当时

54:23但我现在更有体会,它极具现实意义。你和南希·拉姆齐谈到了女性在科学和技术领域的

54:30四种可能的未来。那么如果我们看这本书出版前后的几十年,

54:38你能讲讲女性在科学与技术领域的历史,以及它是如何

54:46演变的吗?情况有何变化?我们现在处于什么位置?不够。变化得还不够。

54:54女性在计算领域被消磨的方式简直令人难以置信。但书中女性在科技领域的

55:05四种可能的未来是什么?你真正看到的是现状的

55:13各个方面。所以对每一种,你都可以说,哦是的,我们确实有反弹。看看

55:20堕胎问题等等的现状。我们是前进一步、后退一步。

55:28“平等的黄金时代”是最难写的一章。我借用了圣塔菲研究所的

55:33一个概念,即沙堆效应:你把沙子非常缓慢地撒到一堆上,

55:41它越长越高,直到突然崩塌。

55:50从某种意义上说,#MeToo 就起到了这个作用。那是压垮一切的最后一粒沙。

55:58那是沙堆效应的完美例证。这让我感觉不错。它并没有

56:03改变整个社会,但确实唤醒了很多人。那么总体上你乐观吗,

56:10也许是在 #MeToo 之后?我是说,#MeToo 针对的是一类非常具体的事。

56:17天哪,解决了那个,你就解决了一切。

56:19但你总体上对未来乐观吗?

56:23是的。我是天生的乐观主义者,没办法。

56:28那 AI 呢?你对 AI 的未来怎么看?

56:34当然,我会被问到,你担心什么?我唯一担心的是

56:40我们无法预料的事情。会有某种意想不到的东西冒出来,我们只能说,

56:47我们没有为此做好准备。我总体上是乐观的。当我最初对

56:58AI 产生兴趣时,和这个领域的大多数人一样,智能越多就像美德越多。

57:05你知道,这能有什么坏处?从某种程度上说,我仍然这么相信。但我意识到我对

57:13智能的概念已经拓宽了。智能有很多种,

57:19我们需要让我们的机器具备这许多种智能。

57:24你刚刚完成或正在完成你一直在写的那本书,那本回忆录,

57:32你有什么变化?我知道这只是写作,但回头看,写作过程让你

57:39有什么变化?它让你想起了什么、让你感到惊讶的东西?

57:47纵观全部。最大的一点,其实并不令人惊讶,

57:55就是我有多幸运。哦,天哪。能接触到一个将要

58:07改变世界的科学领域的开端。我怎么这么走运?当然,我对事物的看法也大大拓宽了。

58:20如果我能回到我们对话中的一个女性主义话题。在不知不觉中,

58:28这确实是潜意识的。我希望 AI 成功,因为我厌倦透了听到

58:36智能存在于男性头颅之中的说法。我想,如果外面有某种

58:43不是男性的东西在思考并表现出色,那就会戳穿“智能

58:53存在于男性头颅之中”这整个观念。我原先并不知道这一点,直到某个晚上哈罗德·科恩和我

59:01喝了一杯酒,也许两杯,他问,是什么吸引你走向 AI?我说,哦,

59:09你知道,我认识的最聪明的人、伟大的项目,等等等等。然后我说,我还想要

59:14男性聪明之外的东西。这话就这样从我心里冒了出来,像是,什么?

59:24其实挺妙的。所以 AI 真的让我们所有人变得谦卑,并让最

59:32需要谦卑的人变得谦卑。但愿如此。

59:35哇,太美了。帕梅拉,非常感谢你和我交谈,这真的是莫大的荣幸。

59:40我也非常愉快。

59:41谢谢。

— A LITTLE MORE TO THINK ABOUT. —