14 VC
❯ 模型评测平台 Arena 完成 2 亿美元 B 轮融资,估值 31 亿美元,年化收入超过 1 亿美元
十个月估值近乎翻倍AI 模型评测平台 Arena 10 月 8 日宣布完成 2 亿美元 B 轮融资,估值 31 亿美元。本轮由 Lightspeed 和 Khosla Ventures 共同领投,Salesforce Ventures、Dell Technologies Capital 等参投,a16z、Felicis 等老股东跟投。
让用户投票给模型打分Arena 2023 年起源于加州大学伯克利分校的一个研究项目。据 TechCrunch 介绍,普通用户免费输入问题或提出编程需求,再评判哪个模型做得更好,这些投票汇成排行榜。去年 9 月它推出收费产品 AI Evaluations,向模型实验室和企业出售基于社区反馈的详细性能分析。
收入涨到三倍多今年 1 月,Arena 完成 1.5 亿美元 A 轮融资,投后估值 17 亿美元,当时年化收入为 3000 万美元。公司现在称年化收入已超过 1 亿美元。与融资同时,它发布了 Alignment Index,衡量模型是否擅自执行操作、张冠李戴或谎称完成任务。
裁判的客户就是选手Arena 的理由是,固定题库的基准测试在模型认出自己正被测试后就失效了。企业采购模型时因此更需要来自真实使用的评价,模型实验室也愿意付费了解自己的短板。Arena 自己的难题是保持中立:它的付费客户正是榜单上被排名的那些实验室。
▮ SIGNAL评测公司一年内收入涨到三倍多,模型厂商自己公布的分数已经不够用来做采购决定,“谁来当裁判”成了一门独立的生意。