一家未直接开发AI技术的公司,年收入已达1亿美元。
这一商业上的巨大成功归功于Arena,一个目前正吸引着众多AI领域巨头参与其中的“大模型竞技场”。
Arena最初源于2023年加州大学伯克利分校一个团队发起的名为Chatbot Arena的开源研究项目。
谁曾想到,在极短的时间内,它便成为了影响大模型发展方向的关键平台。
就在近期,Arena商业化服务推出仅8个月,其年化营收已成功突破1亿美元,达到了一个新的里程碑。
ChatGPT、Claude等模型在此“刷榜”,Arena成为大模型评测的焦点
对于许多人来说,Arena并不陌生。
它最受关注的特点在于,能够基于用户真实的匿名测试数据,生成一份大模型排行榜。
其运作模式极其简单,却又充满了竞争的意味——
用户输入指令后,系统会匿名派出两个模型同时生成回应;随后,用户选择认为表现更优的模型。
平台汇集了数千万次的此类用户投票,形成类似于Elo评分系统的排行榜。
正是这种“擂台比拼”的机制,使其成为全球AI爱好者和开发者聚集的热门地点。
目前,该平台已积累了超过1000万次用户评测、7亿次对话、8200万张投票,每月吸引超过1000万访客,遍布全球150多个国家。
尤为关键的是,大约80%的用户每天提出的问题都是全新的,这意味着没有任何模型能够事先“背下答案”。
其评价的含金量有多高?
OpenAI、谷歌、Anthropic、Meta等平时竞争激烈的顶尖科技公司,都纷纷将自家最新的模型提交到Arena接受社区的检验。
甚至有报道称,OpenAI在GPT-5正式发布前,曾使用代号“summit”的模型在该平台上进行秘密测试。
换言之,硅谷最先进的模型,都在等待一个来自伯克利学生项目的“盖章认证”。
1亿美元营收是如何实现的?
那么,一个免费的排行榜是如何转化为1亿美元的收入来源的呢?
去年9月,Arena推出了名为AI Evaluations的商业服务:
模型开发商和大型企业可以付费,利用Arena庞大的用户社区对其模型进行深度评估,从而获得仅靠基准测试无法获得的“真实世界”性能分析。
这套服务被定位为一套“面向真实世界的持续集成/持续部署(CI/CD)系统”。
当模型准备公开发布时,Arena会免费为其进行社区评测;
而企业如果想了解自家模型在实际用户手中的优势、劣势以及可能出现的“胡说八道”的情况,则需要付费使用该服务。
这是一种典型的“卖水人”商业模式——在淘金热中,卖水和卖铲子的人往往比挖金子的人更赚钱。
随着大模型厂商竞争的加剧,以及对模型性能的极致追求,他们对这种“上线后调优”服务的需求也日益增长。
Arena恰好处于所有模型厂商都必须经过的关键节点上。
三位伯克利背景人士,打造出最赚钱的AI生意
Arena的前身是Chatbot Arena。
再往前追溯,它隶属于伯克利大学著名的LMSYS研究小组。
最初,两位伯克利的室友怀揣着一个朴素的愿望——为大语言模型建立一个中立的比较平台,让大家能够公平地进行评测。
没有人预料到,这个学生项目会迅速发展成为一家估值数十亿美元的公司。
项目进展神速:2025年春季,项目独立出来并正式注册公司,几周内即完成1亿美元的种子轮融资,估值达到6亿美元;
数月后,其商业产品上线,仅仅四个月后,年化营收便飙升至3000万美元。
随后,今年1月,由Felicis和UC Investments领投的1.5亿美元A轮融资完成,公司投后估值达到17亿美元。
领导这一项目的核心人物,均非等闲之辈。
CEO Anastasios Angelopoulos,其学术背景深厚,专注于数学领域。
他在斯坦福大学攻读电子工程本科期间,曾师从凸优化领域的知名学者Stephen Boyd。
在伯克利大学攻读博士学位时,他的导师更是机器学习领域的泰斗Michael I. Jordan和计算机视觉领域的权威Jitendra Malik。
多年来,他一直致力于研究如何为“黑箱”模型提供数学上严谨的评估方法。
CTO Wei-Lin Chiang是开源社区的知名人士,他曾主导开发了广受欢迎的开源聊天机器人Vicuna。
他在伯克利大学攻读博士学位,师从分布式系统专家Ion Stoica,此前曾在谷歌、亚马逊和微软等公司有过工作经验。
2022年底ChatGPT公测之际,他暂停了之前的研究,全身心投入到Arena项目中。
搭档Angelopoulos形容他对此项目的投入是“一份用爱发电的事业”。
为了这个项目,两人长时间投入工作,甚至选择同住,最终两位室友共同构建了一家估值17亿美元的公司。
第三位联合创始人是著名的伯克利教授、Databricks联合创始人Ion Stoica。在项目于2025年4月公司化之前,他一直担任项目的顾问。
充当裁判比作为选手更重要
Arena最新的举措是推出了Agent Mode(智能体模式)。
该模式的评测范围已不再局限于“谁的聊天能力更强”,而是涵盖了数百万用户正在使用智能体执行的真实任务,例如编写代码、调试错误、进行研究、分析文档等,这些任务往往涉及数百万次工具调用和多轮交互。
Arena开始采用任务完成率、幻觉率等客观指标进行评分,这已经远远超出了最初“人类偏好投票”的范畴。
随着AI从“聊天机器人”向能够独立完成任务的“智能体”演进,其任务的复杂性和重要性也在不断提升。
评测,正成为人类深入理解AI内部运作机制的重要手段。
Arena之所以能创造1亿美元的营收,并最终达到17亿美元的估值,其核心逻辑在于押注评测的重要性将日益凸显,其价值也将持续增长。
然而,最终所有人都将面临一个关键问题——当机器开始自主生成问题时,谁将拥有最终的评判权?
