生成式 AI 的 Act o1
本文讨论了生成式 AI 领域的最新进展,特别是从快速响应(“System 1”)向推理能力(“System 2”)的转变。这一转变标志着 AI 系统在推理和认知操作方面的能力显著提升,开启了一个新的“代理性应用”时代。文章还探讨了生成式 AI 市场的现状及未来趋势,特别是 OpenAI 推出的 o1 模型如何通过推理时间计算实现更强的推理能力。此外,作者分析了 AI 市场的各个层次(基础设施、模型、开发工具和应用层)的竞争格局,指出应用层的机会最大,特别是在构建定制的认知架构以应对现实世界中的复杂任务。 市场结构的稳定:生成式 AI 市场的基础层已经趋于稳定,主要由几大巨头主导,如 Microsoft/OpenAI、AWS/Anthropic、Meta 和 Google/DeepMind。尽管竞争激烈,但市场结构逐渐固化,预示着更便宜且更强大的预测能力即将到来。 推理层的崛起:随着基础层的稳定,AI 研究的重点转向推理层,即“System 2”思维。这种思维模式类似于 AlphaGo 的运作方式,即通过推理和模拟多个未来场景来做出更有深度的决策。 OpenAI 的 o1 模型:2024 年最重要的模型更新是 OpenAI 的 o1 模型(代号 Strawberry),这是第一个具有真正推理能力的模型。它通过推理时间计算实现了更复杂的推理能力,特别是在逻辑和数学等领域表现突出。 推理的挑战:与 AlphaGo 不同,语言模型在推理时难以构建明确的价值函数,因为许多任务(如写作或制定旅行计划)没有明确的评分标准。这使得推理在开放性任务中更加困难。 系统 1 与系统 2 思维:系统 1 思维是基于模式匹配的快速响应,而系统 2 思维则需要模型在推理时停下来思考,生成多种可能性并评估其结果。这种深度推理对于复杂任务(如数学或生物学突破)至关重要。 推理时间计算的扩展:o1 模型揭示了推理时间计算的新扩展规律,即给模型更多的推理时间,它的表现会显著提升。这一发现将推动从大规模预训练集群向动态推理云的转变。 应用层的机会:尽管基础层和模型层由巨头主导,但应用层仍有巨大的机会,特别是在构建能够应对现实世界复杂任务的定制认知架构方面。许多 AI 公司已经开始在各个行业中开发代理性应用,如 Harvey(AI 律师)、Factory(AI 软件工程师)和 Sierra(AI 客户支持)。 服务即软件的转变:生成式 AI 正在推动从软件即服务(SaaS)向服务即软件的转变。AI 公司通过代理性应用提供具体的工作成果,而不是简单的软件工具,从而瞄准了数万亿美元的服务市场。 未来展望:未来的 AI 发展将继续围绕推理和推理时间计算展开,特别是在复杂的现实世界任务中。多代理系统可能会成为一种新趋势,帮助 AI 实现更复杂的任务协作。最终,AI 可能会达到类似 AlphaGo 的“Move 37”时刻,即展示出超越人类的创新能力。...