Who is leading in AI? An analysis of industry AI research

📄 arXiv: 2312.00043v1 📥 PDF

作者: Ben Cottier, Tamay Besiroglu, David Owen

分类: cs.CY, cs.AI

发布日期: 2023-11-24

💡 一句话要点

分析行业AI研究，揭示领先企业贡献

🎯 匹配领域: 支柱九：具身大模型 (Embodied Foundation Models)

关键词: AI研究 行业分析 算法创新 大型训练 公司贡献 引用影响力 美国公司 中国公司

📋 核心要点

  1. 核心问题：AI研究的行业驱动特性使得公司贡献的评估变得重要，但现有研究缺乏系统性比较。
  2. 方法要点：通过分析研究出版物、引用、训练规模和算法创新，比较不同公司的AI研究贡献。
  3. 实验或效果：发现谷歌、OpenAI和Meta在多个关键指标上领先，且新兴公司在训练规模上表现突出。

📝 摘要（中文）

随着AI研究日益受到行业驱动，了解各公司在这一领域的贡献变得至关重要。本文通过研究出版物、引用次数、训练规模和算法创新等指标，比较了领先的AI公司。结果显示，谷歌、OpenAI和Meta在大型训练运行、算法创新和引用影响力等方面发挥了重要作用。相比之下，腾讯和百度等中国公司在这些指标上的影响力较低。我们观察到许多行业实验室正在追求大型训练运行，而OpenAI和Anthropic等新兴公司在训练规模上已与谷歌等老牌公司相匹敌。

🔬 方法详解

问题定义：本文旨在解决对行业AI研究贡献的系统性评估问题。现有方法往往缺乏对不同公司在AI研究中的相对贡献的全面比较，导致对行业动态的理解不够深入。

核心思路：通过量化分析研究出版物、引用次数、训练规模和算法创新等指标，全面评估各大公司在AI领域的贡献，特别是对大型语言模型的影响。

技术框架：研究采用数据收集与分析的框架，首先收集各公司在AI领域的研究成果数据，然后通过统计分析方法对比不同公司的表现，最后总结出行业内的主要领导者及其贡献。

关键创新：本文的创新点在于系统性地比较了不同公司的AI研究贡献，尤其是将新兴公司的表现与传统巨头进行对比，揭示了行业内的动态变化。

关键设计：在数据分析中，采用了多种指标，包括研究出版物数量、引用次数、训练规模等，确保了评估的全面性和准确性。

🖼️ 关键图片

fig_0
fig_1
fig_2

📊 实验亮点

实验结果表明，谷歌、OpenAI和Meta在研究出版物和引用次数等多个指标上显著领先，尤其在大型训练运行方面，这三家公司负责了大量的训练数据处理，显示出其在AI领域的强大影响力。

🎯 应用场景

该研究为理解AI行业的动态变化提供了重要视角，能够帮助政策制定者、投资者和研究人员识别行业领导者及其创新贡献，从而更好地把握AI技术的发展趋势和市场机会。

📄 摘要（原文）

AI research is increasingly industry-driven, making it crucial to understand company contributions to this field. We compare leading AI companies by research publications, citations, size of training runs, and contributions to algorithmic innovations. Our analysis reveals the substantial role played by Google, OpenAI and Meta. We find that these three companies have been responsible for some of the largest training runs, developed a large fraction of the algorithmic innovations that underpin large language models, and led in various metrics of citation impact. In contrast, leading Chinese companies such as Tencent and Baidu had a lower impact on many of these metrics compared to US counterparts. We observe many industry labs are pursuing large training runs, and that training runs from relative newcomers -- such as OpenAI and Anthropic -- have matched or surpassed those of long-standing incumbents such as Google. The data reveals a diverse ecosystem of companies steering AI progress, though US labs such as Google, OpenAI and Meta lead across critical metrics.