第一期赛道调研 · 覆盖美国与中国 · 数据来自 2026 年 10 月 20 日的公开来源检索(公司公告、TechCrunch、Reuters/Bloomberg 转述、PR Newswire、36kr 与上海官方渠道等)。公司自报数字、未关闭的融资谈判均单独标注,不与已确认事实混列。
边界:经典 APM 测「系统是否在线/快」,评测测「输出是否对/好/安全」;标注产出训练输入,评测产出判断——(c)(f) 类公司刻意模糊这条线。
公开排行榜本身免费,卖的是背后的投票/偏好数据与私有分析。
追踪、数据集、打分器(LLM 裁判/代码/人工)、实验、CI 门禁、线上监控与护栏。
经筛选的医生、律师、程序员、银行家产出任务、评分标准、偏好数据与 RL 环境——卖成品数据集,不卖工时。
发布前危险能力、谋划(scheming)、越狱与智能体风险评测,为系统卡(system card)供稿。
通用分数在专业场景里没有价值,因此用私有、贴近真实工作的任务集 + 评分器。
可重置的模拟职场(网站、银行、代码库、商店),智能体在其中被训练、并按可验证结果打分——评测与训练数据合并为同一个产品。
公开题库一旦发布就会被训进去。能持续生成模型没见过的题、并把测试集留在私有侧,是 2026 年最直接的定价点。
双人盲测的规模、投票质量与人群代表性决定竞技场的可信度;标注口径不一,分数就不可比。
LLM 裁判、代码验证器与人工评分要互相校验;裁判本身有系统性盲区,不校准的分数是噪声。
专业任务的题与评分标准(rubric)只能由真正的从业者写;谁拥有专家网络,谁就拥有别人复制不了的题库。
分数要能预测真实表现,任务就得来自真实工作流——包括可重置、可验证结果的模拟环境,这也是评测与训练数据合并的方向。
裁判若被参赛者拥有、或允许只报最好成绩,分数体系就会崩坏。披露规则、私有变体管理和利益冲突隔离是治理层能力,不是技术层。
「最新融资」为 2024–2026 年查得的最新重大事件。⭐ 为 2025–2026 年新入场者。收入/客户数字除注明外均为公司自报。
前身是 UC Berkeley 的 LMSYS Chatbot Arena 学术项目,2025 年 4 月公司化为 Arena Intelligence。卖点是持续刷新的真人盲测数据——模型无法提前针对它训练。公司原话(2026-10):「静态基准在模型能识别自己正被测试时就会失效。」
估值口径:投后估值。B 轮 2026-10-08 由 Lightspeed 与 Khosla 共同领投,a16z、Felicis、Salesforce Ventures 等参投。
来源:Pulse2(B 轮) · TechCrunch(种子轮) · 官网 arena.ai
另在跟踪、但 2024–2026 未发现评测专项重大融资:Fiddler AI(2026-01 完成 $3,000 万 C 轮,定位 AI 治理「控制平面」,二级汇总口径);Humanloop(团队 2025-09 被 Anthropic 人才收购、产品关停);Helicone(2026-03-03 被 Mintlify 收购,转入维护模式)。需要修正的旧认知:Promptfoo、Galileo、Arize 均已不再独立;Patronus 的主业已不是评测打分;LMArena 的商业实体已改名 Arena;Surge AI 的 $10 亿融资没有关闭证据,不要列为已完成轮次。
检索范围:中文(大模型评测 融资、模型评测 创业公司、AI评测 平台,含 36kr/量子位类渠道)与英文,2024–2026。
本次中英文检索返回四类结果:① 模型公司自身的融资(StepFun、月之暗面、智谱、MiniMax);② 围绕美国公司的专家数据报道;③ 下列学术/国家实验室基准;④ 上市数据厂商。没有任何一家以模型评测、竞技场排行榜或评测 SaaS 为主业的中国 VC 支持创业公司被识别出来。最接近的功能等价物是 Compass Arena——匿名双人对决、公开排名,与 Chatbot Arena 几乎同构,但它是国家实验室内的公共研究平台:没有公司、没有定价、没有融资。
证据边界:IT桔子、天眼查等付费数据库本次不可访问,中国早期轮次在英文来源中系统性低报。因此本判定是「在所检索的公开来源中未发现」,不是不存在的证明——下一步建议做一次付费数据库核查(见未解问题 8)。
通用开源评测平台:100+ 数据集,覆盖大语言模型与多模态(VLMEvalKit);公开排行榜 + Compass Arena 匿名双人对决多模态竞技场。2026-08 的 README 更新了 VLMEvalKit 集成与 Responses API 支持。值得注意的防博弈做法:闭源模型季度榜通过邮件申请加入;API 模型由 OpenCompass 经正常商业渠道自购访问,而不是接受厂商送测的 key。
上海 AI 实验室牵头,中国首个医疗大模型应用测试验证中心(2025-01-03):资质审查、模型评审、安全评估、场景评测、伦理审查;12 家上海医院为首批验证单位。主任周伯文称其用于评估上海医疗系统内各类 AI 应用的安全、合规与效率——这是中国「垂直、国家主导」评测的模板。
中文通用能力基准,自 2019 年 CLUE 延续:月度/年度报告、SuperCLUE-Agent、多模态与性价比分析。2025 年度报告:Claude Opus 4.5 Reasoning 居首(68.25),国产开源最佳为 Kimi-K2.5-Thinking(61.50)。未发现 VC 融资或商业分拆。
FlagOpen 生态内的开源评测体系(与测 AI 硬件的 FlagPerf、FlagData 并列),FlagEvalMM 为统一多模态框架。研究院经费支持、开源发布,据报道已加入 Linux 基金会生态。来源中不存在 FlagEval 的商业实体。
中文知识(C-Eval、CMMLU)与对齐(AlignBench)基准,如今主要被 OpenCompass / SuperCLUE 套件吸收使用。明确的负面发现:检索其商业化/分拆只返回学术论文与排行榜集成,没有公司。
训练数据产品 + 定制服务(语音/视觉/NLP);2025 年投资者关系记录把多模态数据评测列为增长场景之一,本质仍是卖给模型厂商的数据供应商,不是评测平台。2024–2026 未发现新股权融资(已上市)。经营数据:2025 H1 营收同比 +69.54%(公司 IR 记录);2026 H1 营收 ¥1.92 亿(+22.45%)、净利润 ¥977 万(+156.87%)。研报口径客户含阿里、腾讯、百度、讯飞、字节、微软、亚马逊、三星、中国移动。
数据堂(2011,北京):人工数据/标注与数据集服务;标贝科技(2016,北京):语音合成/识别数据与标注。本次检索均未发现 2024–2026 年融资,也未发现向模型评测产品转型的发布——状态为存量厂商、无评测平台动作(负面发现,证据边界同上)。
面向公众的生成式 AI 服务上线前实际需要:安全自评估报告、语料标注规则、关键词拦截表,以及参照 TC260-003 五大风险类/31 种风险的评估测试题集。国家标准 GB/T 45654-2025 自 2025-11-01 生效,给出量化门槛(二级来源摘要:抽样生成安全通过率 ≥90%、应拒答类拒答率 ≥95%)。这是咨询与检测机构按单收费的服务市场——中国最大的付费评测需求池,但不产生 VC 融资事件。
中国的需求结构与美国相反:实验室(阿里通义、DeepSeek、字节豆包)自建大型内部评测团队并在 OpenCompass/SuperCLUE 上发布;实验室之外的买方为备案合规测试与训练数据付费,而不是为 Braintrust 式的开发者 SaaS 付费。专家数据的淘金热对中国人才是「离岸供给、美国注册」(Mercor/Surge/Scale 的供应链),未发现同等规模的中国注册等价物。
收录规则:X / LinkedIn 只在来源(节目说明、公司关联页、明确给出账号的资料)实际给出时才链接;查不到就写「未找到」,不猜测账号。
「未找到」指 2026-10-20 所检索来源中未出现,不等于账号不存在。Rebecca Qian 的第三方销售数据库条目因非官方/公司关联来源,按规则不予采用。
仅含融资、重大发布与并购,全部条目在公司卡与正文中有来源。
并购事件中国事件融资 / 发布
Reddit 覆盖不完整,先说明:本次会话中 site:reddit.com 定向检索对 LMArena/评测类查询未返回可索引的帖子,这是工具/索引限制,未用编造的帖子标题填充。可查证的是论坛镜像与讨论摘要,重复着与 X 相同的三个立场:(1) Arena 只可作人类偏好信号,绝不能作为唯一选型依据(「在自己的负载上测」);(2) 私有变体测试是「游戏化」(Sara Hooker 的用词,被广泛引用);(3) r/LocalLLaMA 风格的实践者越来越信任自有负载与功能性变体测试,而非冻结的公开基准。完整的社区档案需要一次 Reddit 站内原生检索。
App Store 基本缺席,且原因明确:Arena、Braintrust、Patronus、Vals 及本页所有公司均未发现 App Store 产品。仅有的评测相邻 iOS 应用是 (i) 端侧推理测速工具(如 AIBench – Test Speed,本机跑 DeepSeek-R1 蒸馏/Llama/Qwen 报 tok/s)与 (ii) 本地 LLM 聊天应用(LM Studio)——都不是「评测前沿模型的服务」。Arena 本体是网页产品(arena.ai 免费对战),无原生应用。原因:买方是签合同的实验室与企业;消费者端只是收集数据的漏斗,网页摩擦最低;上架 App Store 只会增加审核、隐私标签与 30% 抽成的摩擦,尽头没有付费客户。任何把「消费者评测 App」当分发渠道的投资材料都应视为红旗。
真正的分发渠道是 GitHub,不是 Product Hunt:DeepEval、Promptfoo、Langfuse(二级档案称 26k+ stars)、Phoenix(11.6k+)、Evidently、OpenCompass 都靠开源仓库增长;本页公司中未发现以 Product Hunt 发布为融资相关事件的案例。