«

Sam Altman 2万字谈AI未来:GPT-5与OpenAI的使命

emer 发布于 阅读:524 TP钱包


作者:天空之城·城主,来源:Web3天空之城

主持人:

我第一次遇见我们即将介绍的嘉宾Sam Altman是在大约20年前,那时他正在开发一款名为Loop的本地移动应用程序。我们都得到了红杉资本的支持,实际上,我们都是红杉资本的第一批童子军。

他投资了一家名不见经传的金融科技公司Stripe,而我投资了Uber。在那个小实验中...

Sam:

你投资了Uber?我以前从未听说过。

是的,我想是的。

你应该写一本书,Jacob。

我和Sam作为童子军参与的那个小型实验基金是红杉资本回报率最高的基金。我听说,几百万美元变成了超过2亿美元。他还曾在Y Combinator工作过一段时间,并在2014年至2019年担任总裁。2016年,他与他人共同创立了OpenAI,其目标是确保通用人工智能造福全人类。2019年,他离开YC,全职加入OpenAI担任首席执行官。

2022年11月30日,事情变得非常有趣。那天是OpenAI推出ChatGPT的日子。2023年1月,微软投资了100亿美元。2023年11月,在疯狂的五天时间里,Sam被OpenAI解雇。每个人都要去微软工作。一堆心形表情符号在X和Twitter上疯传,人们开始猜测该团队已经达到了通用人工智能。世界末日就要来临了。突然间,几天后,他又回到了OpenAI的首席执行官的位置。

据报道,2023年2月,Sam正在寻求为一个AI芯片项目筹集7万亿美元。此前有报道称,Sam正在寻求从Masayoshi San那里筹集10亿美元,与iPhone的联合创始人Johnny Ive一起打造一款iPhone杀手。

与此同时,ChatGPT变得越来越好,并成为家喻户晓的名字。它对我们的工作方式和工作完成方式产生了巨大影响。据报道,它是历史上在短短两个月内用户数量达到1亿的最快产品。

看看OpenAI的疯狂收入增长。据报道,去年他们的ARR达到了20亿美元。欢迎收听全能播客,

我观察到整个行业都在紧张地期待GPT-5的发布。据我了解,它可能会在今年夏天的某个时候推出,但这个时间窗口相当宽泛。你能否为我们具体化一些?

Sam:

我们会花费一些时间来发布这个主要的新模型。我相信,当我们这样做的时候,一定会非常棒。我们会仔细考虑如何进行。可能会以一种与我们发布以前模型不同的方式来发布它。另外,我甚至不确定我们是否会称之为GPT-5。

我想说的是,自从我们发布了GPT-4以来,尤其是在过去的几个月里,很多人都注意到了它的优秀表现。我认为这更好地揭示了世界的本质,它并不是简单的1、2、3、4、5、6、7,而是一个使用AI系统的过程,整个系统会持续地变得越来越好。我认为这既是一个更好的技术方向,也更容易让社会适应,我相信这就是我们的发展方向。

主持人:

那么,这是否意味着我们不会有漫长的训练周期,而是会不断地重新训练或训练子模型,Sam?也许你可以和我们分享一下未来大型模型在架构上可能会发生哪些变化。

Sam:

你可以想象的一种情况就是我们一直在训练一个模型。这对我来说似乎是一种合理的做法。

我们这次讨论的是不同的发布方式。你是在考虑先向付费用户发布,还是放慢发布速度以让红队紧张,因为现在风险太大了。实际上,你有如此多的付费用户,而且大家都在关注着你的每一步。你现在必须更加深思熟虑,对吗?

是的,目前GPT-4仍然只对付费用户开放,但我们真正想做的一件事情是弄清楚如何让免费用户也能使用更先进的技术。我认为这是我们使命中非常重要的一部分。我们的目标是构建人工智能工具并使其广泛可用,无论是免费的还是不那么昂贵的,无论它是什么,这样人们就可以使用它们去创造未来,而不是让天空中的神奇AGI创造未来并将其倾泻在我们身上。这似乎是一条更好的道路,也是一条更鼓舞人心的道路。我坚信事情确实在朝着这个方向发展。所以我很遗憾,我们还没有想出如何让免费用户使用GPT-4级别的技术。这是我们真正想做的事情。我必须承认,这非常昂贵。

Sam,我认为人们经常讨论的两个大因素可能是潜在成本和延迟,这在某种程度上限制了杀手级应用的速率。然后我认为第二个因素是人们在开源世界与闭源世界中构建的长期能力。我认为,这个领域的狂热之处在于其开源社区的热情。一个令人难以置信的例子是,我们为Devon做了一个非常疯狂的演示,这是在五六周前,效果非常出色。然后,一些年轻人根据MIT的开放许可证(如OpenDevon)发布了这个项目。它的表现非常好,几乎可以与其他闭源的项目相媲美。因此,也许我们可以从这个问题开始讨论,即,保持这些模型闭源的商业决策是什么?你认为未来几年会有怎样的发展?

对于你的问题的第一部分,速度和成本,这些对我们来说非常重要。我不想给出一个时间表,说明我们何时可以大幅降低延迟,因为研究很难,但我相信我们能够做到。我们希望大幅降低延迟,大幅降低成本。我相信这会发生。我们仍处于科学发展的早期阶段,无法理解其工作原理。此外,我们拥有所有工程方面的顺风。所以我不知道什么时候我们才能获得便宜到无法计量的智能,而且速度如此之快,以至于我们和其他所有人都觉得它是即时的。但我相信我们可以达到相当高的智能水平。这对我们很重要,对用户来说也很重要,它将解锁很多东西。

关于开源和闭源,我认为两者都有其优点。我认为,我们已经开源了一些项目,将来我们会开源更多的项目。但实际上,我们的使命是朝着人工智能的方向发展,并想办法广泛地分配它的好处。我们有一个策略,似乎引起了很多人的共鸣。显然,它并不适合所有人。而且这是一个庞大的生态系统。还会有开源模型和以这种方式构建的人。

我个人对开源特别感兴趣的一个领域是,我想要一个尽可能好的开源模型,可以在我的手机上运行。我认为,世界还没有足够好的技术来开发出一个好的版本。但这似乎是一件非常重要的事情,在某个时候要做。

你会这样做吗?你会发布吗?

我不知道我们会不会,或者有人会。

Llama 3怎么样?

Llama 3在手机上运行?

我想也许有70亿参数(手机)版本。

是的。我不知道那是否适合手机,但是……

那应该适合手机。

但是我不知道,我不确定那是否适合,我还没有玩过。我不知道它是否足以完成我在这里考虑的事情。

因此,当Llama 3发布时,我认为很多人最大的收获是,哇,他们已经赶上了GPT-4。我认为它并不是在所有方面都平等,但总的来说,它非常非常接近。我想问题是,你们不久前发布了4,你们正在开发5,或者对4进行更多升级。我想听听你的观点,即如何在开源环境中保持领先,你有何看法?这通常是一项极具挑战性的任务,你怎么看?

我们的目标并不是制造出我们能制造的最智能的权重集,而是制造出一个有用的智能层供人们使用。模型只是其中的一部分。我相信我们将在这方面保持领先,我希望我们在这方面能够远远领先于世界其他国家。但整个系统还有很多其他工作,不仅仅是模型权重。我们必须像其他任何企业一样,以传统方式建立持久价值。我们必须想出一个伟大的产品和坚持下去的理由,并以优惠的价格交付它。

当你创立这个组织时,你所说的目标或讨论的部分内容是,这对任何一家公司来说都太重要了,因此,它需要开放。然后转变为,任何人都看不到它太危险了,我们需要把它锁定,因为你对此有些担心。我想知道,这是真的吗?因为愤世嫉俗的一方会说,这是一种资本主义的举动。然后,我很好奇从开放开始的决定是什么。世界需要看到这一点。关闭真的很重要。只有我们才能看到。那么,你是怎么得出这个结论的呢?

我们发布ChatGPT的部分原因是我们希望全世界都能看到这一点。我们一直在试图告诉人们人工智能真的很重要。如果你回到2022年10月,那时并没有那么多人认为人工智能会那么重要,或者它真的发生了。我们试图做的很大一部分就是把技术交到人们手中。现在,再次重申,有不同的方法可以做到这一点。我认为确实有一个重要的角色,就是说,比如,这是实现它的方法。

但事实上,我们有这么多人使用ChatGPT的免费版本,我们不投放广告,我们也不会试图从中赚钱。我们只是因为我们希望人们拥有这些工具而推出它。我认为它做了很多工作,提供了很大的价值,教人们如何钓鱼,也让世界真正思考这里发生的事情。现在,我们仍然没有找到所有答案。我们和其他人一样,正在摸索着前行。我认为,随着我们学习新事物,我们会多次改变策略。

当我们创办OpenAI时,我们真的不知道事情会如何发展,不知道我们会制作语言模型,不知道我们会制作产品。我清楚地记得第一天,我们当时想,好吧,现在我们都在这里。要把这一切准备好很困难。但现在会发生什么?也许我们应该写一些论文。也许我们应该围着白板站着。我们一直在努力,一步一步地弄清楚下一步是什么,下一步是什么,下一步是什么。我想我们会继续这样做。

我可以再次确认一下,以确保我没有听错吗?我理解您的观点是,无论是开源还是闭源,所有这些模型,无论您做出何种业务决策,都将逐步提高其准确度。并非所有的公司都有足够的资本,但假设有四到五家,比如Meta、谷歌、微软等,或者可能还有一家初创公司。这些公司都在开放网络上运作。然后很快,这些模型的准确性或价值可能会转移到这些专有的训练数据源,这些数据源你可能可以获取,也可能无法获取,或者别人可以获取而你无法获取。

您认为事情的发展趋势是这样的吗?开放网络使每个人都达到一定的门槛,然后就变成了一场争夺数据的军备竞赛?

我并不这么认为。我坚决认为这不会变成一场争夺数据的军备竞赛,因为当模型变得足够智能时,它不应该只是关于获取更多的数据,至少不是用于训练的数据。数据可能很重要,因为它有其价值。我从这一切中学到的最重要的一件事是,很难对未来几年的走向做出自信的预测,所以我现在不想尝试。我想说的是,我期待世界上出现许多非常有能力的模型。我觉得我们刚刚偶然发现了一个新的自然或科学事实,或者你可以称之为我们可以创造的事实。我不认为这是