← 深度研究 DR 专题七 · 验证器经济 研究总稿 · 九章 + 三附录 · 2026-10-09
DEEP RESEARCH · 专题七 · 产业地图

验证器经济:谁在卖「对错」,谁在收「判定税」

DR.006 说「验证器即真理」——数学与代码的自动判定,正在决定推理模型的爆发边界。本专题回答下一问:真理的生意归谁。从 Meta 一纸并购撕碎数据标注行业的中立性说起,把「判定权」这门新基础设施拆成四层:谁在卖专家、谁在卖榜单、谁在卖环境、谁在卖工具——以及这门生意为什么同时长着三种死法和三种活法。

第一章 一次并购,如何重排整个行业
第二章 判定权的经济学:四层地图与三个口径
第三章 L1 专家人力层:从卖力气到卖智慧
第四章 L2 独立评测层:裁判的生意,与独立性悖论
第五章 L3+L4 验证器的工业化:环境、沙箱与人机赛跑
第六章 投资映射:三种死法、三种活法与六个观察哨
附录 A 四层公司总表 | 附录 B Prime Intellect 深拆 | 附录 C 信源与口径警告
第一章

一次并购,如何重排整个行业

2025 年 6 月,Meta 花 143 亿美元买下 Scale AI 不到一半的股份。这笔交易没有买来一家公司,却买碎了整个行业最值钱的东西——中立性。此后 12 个月里,预算迁移喂饱了三家新贵,也顺手给所有后来者立了一条铁律:裁判不能被球员持股。

先把交易本身看清楚。2025 年 6 月,Meta 以 143 亿美元收购 Scale AI 49% 的无投票权股份,按此推算 Scale 估值约 290 亿美元——相比 2024 年 5 月 F 轮的 138 亿美元翻了一倍多。结构比数字更重要:无投票权让 Scale 在法律上保持独立,但创始人 Alexandr Wang 本人直接加入 Meta 超级智能研究团队。从此,市场面对的是一个半只脚已经踏进 Meta 的「独立」数据服务商。

客户的反应快得像条件反射。 frontier 实验室最敏感的资产,是塑造未发布模型的数据——没有任何一家实验室愿意把这些数据交给一个被直接竞争对手持股一半的供应商。几周之内,OpenAI 终止合作,Google 暂停后在几个月后小规模恢复,Microsoft 与 xAI 收缩。Scale 对 Forbes 承认:2024 年收入 8.7 亿美元,2025 年「差一点到 10 亿」,还预计 2026 年才重新破 10 亿——它的收入曲线被这场并购自己压弯了。

一纸并购的连锁反应:中立性破产,预算大迁移 2025-06 Meta 143亿美元 买 Scale 49% 中立性破产 2025Q3-Q4 OpenAI / Google / xAI 数周内撤离 Scale 预算重新招标 2025-10 Mercor C轮 3.5亿美元 估值100亿 · 5个月翻5倍 2026-01 LMArena A轮 1.5亿美元 估值17亿 · 评测成独立生意 2026-03 Mercor 遭数据泄露 Meta 暂停合约:脆弱性实证 Surge 融资谈判 150-250亿 Prime Intellect A轮@10亿 Snorkel E轮@35亿 2026-07

空出来的预算去了哪里?2026 年的答案已经摆上台面。Mercor——2023 年成立的「专家人才市场」,2025 年 10 月 C 轮估值 100 亿美元(五个月内翻五倍),2026 年 7 月被曝谈判以 200 亿美元再融 5 亿,年化收入冲到约 20 亿美元,四个月翻倍。Surge AI——一家 110 人、从未拿过风投的公司,2024 年收入就超过 10 亿美元,2026 年年中首次开放融资,谈判估值区间 150 亿到 250 亿美元。Handshake——一个校园招聘平台转型而来,2026 年 4 月年化毛收入 11 亿美元、同比 +349%,顺手收购评测公司 Cleanlab 补第二层能力。

三家的共同点只有一个:它们都从 Scale 中立性破产的裂缝里接走了预算。这不是经营能力的胜利,是结构位置的胜利——当行业唯一的大供应商失去裁判资格,预算必然流向「还干净」的人。这里自然冒出一个反问:实验室为什么不干脆自建?答案揭示了这一层的经济本质。自建意味着养一支覆盖物理、法律、医学、代码的全职专家队伍,而前沿数据的需求是脉冲式的——一次大版本后训练就要数百名特定领域专家密集工作数月,平时用不上。Mercor 的价值是把「按周租一个 PhD 网络」变成标品;Surge 的价值是 thousand 人级交付的质量稳定性。这是典型的能力专业化分工,和实验室不自建晶圆厂是同一个道理——只是这一行的「晶圆」,是人脑里的专业知识。

这门生意的价值锚是信任,不是数据量。数据标注、专家评判、模型评测,本质都是「判定权」的生意——判定权的定价要素里,中立性排在准确性前面。Scale 用 290 亿美元估值和一夜流失的大客户,给这条铁律做了史上最贵的注脚。
第二章

判定权的经济学:四层地图与三个口径

「谁更好」「谁对」「谁通过」——模型供给爆炸之后,判定需求跟着指数增长。这门生意已经分成四层,每层卖的东西不一样,护城河和死法也不一样。看懂分层,才不会被「AI 数据」四个字糊住眼睛。

先回答一个根本问题:判定为什么变成了大生意?三个条件在 2025-2026 年同时成立。其一,模型供给爆炸。每月都有新模型发布,基座、微调、推理变体加起来,企业要面对的选项数以百计。其二,能力趋同。SWE-bench Verified 榜单前六名模型的成绩差距已缩小到 1.3 个百分点——企业团队拿着六位数的采购预算,在统计噪声里做决策。其三,自证失信。每家实验室都随模型发布自家基准,裁判和球员共用一个更衣室。三个条件叠加,「第三方判定」从学术副产品变成了采购刚需。

把这门生意拆开,是四层结构:

验证器经济 · 四层产业地图 L1 专家人力层 卖专家的推理链、偏好排序与评判 · 市场抽成或全栈管理 Scale · Mercor · Surge · Handshake · Turing 海天瑞声 · 云测 · 澳鹏中国 L2 独立评测层 卖榜单、私测题与采购评估 · 客户恰恰是被评的实验室 LMArena · Scale SEAL · Artificial Analysis 信通院「方升」 · Epoch AI L3 环境与沙箱层 卖 RL 环境、沙箱与仿真——可复用的验证器 · 验证器的批发市场 Prime Intellect · Snorkel · NVIDIA Cosmos 系 海天瑞声具身训练场 L4 工具链与形式化层 卖 eval 工具链、可观测与形式化证明 · 开源免费+云收费 Braintrust · Patronus · Galileo · LangSmith Lean 形式化生态

市场有多大?这里是第一个需要口径纪律的地方——三个「评测市场」的数字差异极大,各自量的是不同的东西。口径一:评估即服务(EaaS)——第三方平台替企业跑基准、出报告,2026 年全球约 22.5 亿美元,预计 2030 年 63 亿美元。口径二:评测平台与工具——含订阅和咨询,2026 年约 23.6 亿美元、年增 27%。口径三:狭义基准测试工具——2025 年仅 3.5 亿美元,但 2035 年预计 60 亿美元、CAGR 33%,是三条曲线里最陡的。

而这三个口径加起来,仍然严重低估真实的盘子。原因在于最大的一块支出根本不进「评测市场」的统计:给模型写推理链、排偏好、当人肉裁判的人力数据支出。Labelbox 的 CEO 给过一个被业内反复引用的数字——每家头部实验室每年在数据上的花费已超过 10 亿美元。八家头部实验室,就是一个至少八十亿美元的年度账本,是「数据集市场」(2025 年约 32 亿美元)的两倍以上。判断:看这门生意,不能看「数据标注市场」的报表,要看实验室训练预算里「人类反馈」这条线——它才是验证器经济的第一大账本。

一个类比与它的边界。这四层结构像极了评级与审计生意——Moody's 卖判定、四大会计师事务所卖核数,判定权是典型的「基础设施化信任」。但有一个致命差异:评级机构的客户成千上万,验证器经济的客户只有八个 frontier 实验室加一批垂类企业。客户集中度决定了:这门生意的单一客户风险,远比任何「基础设施」叙事愿意承认的更高。这个软肋会在第三章反复出现。
第三章

L1 专家人力层:从卖力气到卖智慧

五年前这个行业最贵的任务是「这是不是停止标志」,今天最贵的任务是「这两个法律论证哪个更站得住,为什么」。同样是人打工,时薪从几美元涨到 200 美元,公司估值从几十亿冲到几百亿——但也埋了三颗雷。

2026 年的数据标注市场,实际上是两个碰巧同名的生意。底层是商品化标注:画框、打标签,时薪几美元,正被自动化吞掉。顶层是前沿数据:请物理学博士写推理链、请执业律师设计评判标准、请资深工程师给代码打分,时薪 50-200 美元。两层曾经混在同一份融资 PPT 里,但经济模型、地理分布和赢家名单已经完全分家。2022 年之前,标注基本等于给自动驾驶画行人框——那是 Scale 成名的生意,也是 Appen 当上股市场景的原因。ChatGPT 把一切翻转了:大模型的对齐不靠标图片,靠人类写、排、评文本。地球上最贵的标注任务,两年内从「是不是猫」换成了「哪份法律论证更严谨」。

这场翻转的输赢已经写在了市值上。Appen——澳洲上市的标注先驱,2020 年市值一度接近 40 亿美元,没能跳上前沿数据这条船,2026 年年中市值只剩 1.9 亿至 3.9 亿澳元:一个品类退化的完整标本。跳上去了的,则是下面这张桌面:

公司最新估值/谈判收入(口径)模式关键关系
Scale AI290 亿(Meta 隐含)2024 年 8.7 亿 → 2025 年近 10 亿(对 Forbes 口径)全栈管理Meta 持股 49%;OpenAI/Google/xAI 已流失;2026-08 新 CEO deSouza
Mercor100 亿定价 → 200 亿谈判(2026-07)ARR 约 20 亿(2026-06,gross)专家人才市场,抽成约 30-40%OpenAI、Google DeepMind;Meta 因数据泄露暂停
Surge AI150-250 亿(首次融资谈判)约 14 亿(2025 末 run-rate)全栈管理,bootstrapped 仅 110 人Anthropic 主力供应商
Handshake35 亿(2022 老轮)毛收入 11 亿、净约 4.5 亿(2026-04,+349%)1800 万学生/博士网络转型2026-01 收购 Cleanlab 补评测
Snorkel AI35 亿(2026-09 E 轮,一年内近三倍)年化 3.75 亿(融资当周)标注软件 → 卖成品数据与 RL 环境正从 L1 向 L3 迁移
Turing / micro1 / Invisible22 亿 / 5 亿 / 20 亿约 3 亿 / 3 亿 / 1.34 亿(2024)工程师网络 / 远程招聘 / 流程外包OpenAI、Google、Anthropic 均有覆盖
L1 层:估值与收入(2026 年中公开口径,亿美元) ■ 估值(深色,谈判/隐含) □ 收入(浅色,gross 或近口径) · 估值为私募口径,非公开市场定价 Scale 290(Meta 隐含) 0.87 Mercor 200(谈判) 2.0 Surge 150-250(谈判) 1.4 Handshake 35(2022 老轮) 1.1毛 Snorkel 35 0.38 对照组:Appen(ASX) 2020 年市值近 40 亿美元 2026 年年中 ≈ 2-4 亿澳元 没跳上前沿数据船的品类退化样本: 标注框时代的现金流再好看, 也挡不住范式切换的整层抹除 估值 ÷ 收入 ≈ 30 倍净收入的行业倍数 (gross 口径需先除以抽成)

这张桌面看似烈火烹油,其实埋着三颗一样的雷。第一颗:收入是流水不是利润。市场平台模式记的是 gross GMV——Mercor 的 20 亿 ARR 里,给专家的分成要划掉大头,抽成只有 30-40%;Sacra 的对照口径显示,这一层公司的估值倍数普遍压在「年化净收入的 30 倍」附近,而不是新闻标题里「收入」的 10 倍。第二颗:客户集中度。全行业的金主就是八个 frontier 实验室加少数超大规模云厂——一门「基础设施」生意,客户数量还不如一家街边连锁的门店多。第三颗:一次泄露就是灭顶。2026 年 3 月,Mercor 追踪到一起源自开源工具 LiteLLM 的数据泄露,Meta 随即无限期暂停合约——注意,被黑的是开源组件,不是 Mercor 的核心系统,惩罚却照单全收。在信任生意里,可疑与有罪同罪。

中国镜像走的是另一条路。A 股唯一纯标的海天瑞声(688787)给出了对照样本:2025 年营收 3.77 亿元、同比 +59%,归母净利 1412 万;2026 年一季度营收 +38.6%、扣非净利 +813%。毛利率改善的驱动被公司自己在调研纪要里说得很直白——G 端「可信数据空间」业务起量:卖标准化平台和方案,人力密集度低、交付周期短、边际成本递减,比传统定制标注赚得多。这是中美商业模式的关键分岔:美国 L1 层的付费人是你 rival 的实验室(信任逻辑),中国 L1 层的付费人是政府数据体系(合规逻辑)。同一家公司还在做第三层的事:在北京运营首个具身智能数据训练场,100 多台真机器人 7×24 小时产数据——这留给第五章。市场规模上,中国数据标注 2026 年预计突破 150 亿元、约占全球三成,CR5 有望从 45% 抬向 60%——集中度上升,头部通吃。

出海是第二条中国故事线,而且已经从「卖人力」升级成「卖能力」。海天瑞声把东南亚基地做成千人级交付枢纽——2024 年整合超 1000 人标注基地,2025 年贡献千万级美元收入,2026 年计划建第二个境外基地。全球标注产业的地理迁移逻辑和制造业一模一样:核心能力(平台、质检、领域专家)留在头部,规模化交付落在成本洼地。对二级市场投资者,这个变化的含义是:中国标注公司不再是「人力成本套利」的故事,而是「平台+枢纽+垂类」的工程网络故事——估值逻辑要跟着换。

海天瑞声调研纪要里还有一句值得单拎的话:RL 阶段「难例的价值远超易例」——模型初始成功率低的样本,才配得上专家时薪。这句话是第三章到第五章的桥:当易例被模型自己消化,人类的验证价值就向难例前沿收缩。收缩到头会发生什么,第五章算这笔账。

第四章

L2 独立评测层:裁判的生意,与独立性悖论

两个伯克利博士生 2023 年搭的模型对打网页,18 个月后估值 17 亿美元、年化收入破亿。LMArena 证明了「裁判」可以是一门独立的生意——但它最深的护城河「独立」,恰恰被它的商业模式按在水里。

LMArena 的轨迹值得完整走一遍,因为它是 L2 层的教科书样本。2023 年,Anastasios Angelopoulos 和 Wei-Lin Chiang 在 UC Berkeley 做 Chatbot Arena:两个匿名模型的回答并排摆开,用户投票选更好的一个,Bradley-Terry 统计模型把几百万张选票聚合成 Elo 排名。2025 年 4 月公司化(Arena Intelligence Inc.),5 月种子轮 1 亿美元、估值 6 亿(a16z 与加州大学退休金联合领投);2026 年 1 月 A 轮 1.5 亿、估值 17 亿,总融资 2.5 亿美元。商业化产品 2025 年 9 月才上线——企业花钱雇它用五百万月活用户的人群池做定制评测——四个月做到 3000 万美元年化消费额,2026 年 6 月宣布破 1 亿。客户名单:OpenAI、Google DeepMind、Anthropic、Meta——全都是被它排名的实验室。

LMArena:18 个月的估值与收入,以及那个绕不开的悖论 2025-05 种子 6 亿美元 2026-01 A轮 17 亿美元 收入(年化) 3000万 → 1亿美元 独立性悖论 付费客户 = 被排名的实验室 「裁判和球员共用更衣室」 《Leaderboard Illusion》指控: 私测多个变体、只公布最好的 (Cohere/Stanford/MIT/AI2,2025-04) L2 层的产品是公信力, 而公信力与商业化结构性冲突 500 万月活 · 150 国 6000 万对话/月 免费公开榜 = 流量 + 偏好数据 私有部署 = 定制评测 + 工具 a16z/UC Investments 种子 Felicis 领投 A 轮 18 个月:side project → 独角兽 评测从学术副产品变成独立生意

悖论之外,L2 层还有两条不太显眼但更冷的钱流。第一条:私测题。Scale 的 SEAL 榜单把题目藏在保险库里——由审核过的领域专家写题并评分,题目永远不公开,让实验室无法把测试集训练进模型。私测题的商业模式清晰:防污染,按次收费。它承认了一个公开基准时代的终结——凡是公开的题目,终将被刷穿。第二条:评测通胀。Artificial Analysis 的数据:评一个推理模型 o1 跑完七项基准要花 2767 美元,评一个非推理的 GPT-4o 只要 109 美元——25 倍差距。推理模型的判定本身要烧推理算力,意味着第三方评测的成本正在指数上涨。这带来一个略带讽刺的结论:独立验证越来越贵,贵到学术界复现不起、只能买——「可复现性」这门科学的基本盘,正在变成一门付费订阅。

独立性风波不只在 LMArena 一家。非营利机构 Epoch AI 2024 年 12 月披露:其重磅数学基准 FrontierMath 由 OpenAI 出资缔造,且 OpenAI 能接触相当一部分题目与答案——学术界哗然。三起风波(LMArena 择优公布、FrontierMath 资助方、Scale 中立性)指向同一个结构性问题:L2 层卖的产品是公信力,而公信力的生产成本必须有人付。谁付钱,谁就获得影响力——这是评级机构一百年来没解开的死结,Moody's 在次贷危机里演过一遍。

中国给出了另一种解法:把裁判收编成基础设施。中国信通院的「方升」体系已评测 141 个大模型,行业标准 YD/T 6921-2026 于 2026 年 6 月发布——评测不是一门生意,而是一条监管轨道:模型上线要过标准,标准由国家队定。这个路线不追求 LMArena 式的市场化公信力,追求的是合规强制性。它同样是一种验证器生意,只是变现方式从「卖评测」变成了「定义合格」——对国内的评测与数据服务商而言,进入这条轨道本身就是护城河。

第五章

L3+L4 验证器的工业化:环境、沙箱与人机赛跑

DR.006 说「谁能造出验证器,谁就握住 RL 产业的咽喉」。2026 年,这句话开始有报价了:环境即产品、沙箱即考场、验证器库即批发市场——而且买家排到了六千家。

先看这一层的标杆案例。Prime Intellect,2024 年成立,2026 年 7 月 A 轮融 1.3 亿美元、估值 10 亿美元——领投 Radical Ventures,跟投名单直接写着 NVIDIA Ventures、Intel Capital、Dell Technologies Capital、ICONIQ,天使名单里有 John Schulman(RLHF 的发明人之一)、Aaron Levie、Aravind Srinivas。卖什么?一套「开放超级智能栈」:算力调度、大规模 RL 训练框架(prime-rl,开源)、验证器组件库(verifiers,MIT 协议)、RL 沙箱(Prime Sandboxes,2026 年 9 月上线的硬件级微 VM 考场)加托管推理。公司口径:一年内 6000 多家客户、年化收入破 1 亿美元——含给 Ramp 这类企业做的后训练服务。

注意它商业模式里最重要的一步棋:把验证器做成了可复用的产品。DR.006 说过,RLVR 的咽喉是「造出判定对错的验证器」;Prime Intellect 的 verifiers 库和数千个开源 RL 环境,等于把验证器从「每个实验室的定制工程」变成「货架商品」——环境库就是验证器的批发市场,沙箱就是标准化的考场。这也解释了芯片厂的入股:NVIDIA/Intel/Dell 的钱不是在投一家数据公司,是在给「RL 工业化」这个新负载提前铺卡位。

第二记信号来自 L1 层的内部迁徙。Snorkel AI 从标注软件起家,2026 年 9 月 E 轮融 3.5 亿美元、估值一年内从 13 亿涨到 35 亿,年化收入 3.75 亿——它的转型方向是卖「成品数据集 + RL 环境」。L1 的龙头在主动往 L3 走,因为环境是可以反复卖的产品,而人力是一次性的服务。海天瑞声的具身数据训练场(100 多台真机器人、自研平台、7×24 算法质检)本质上是同一逻辑的具身智能版本:把一次性的标注服务,升级成可持续产验证数据的资产。这是判断 L1 公司成色时最值钱的一个指标——它有没有在把服务变产品。

L4 工具链层则走着另一条被验证过的路:开源免费 + 云端收费。Braintrust(估值 8 亿美元)把评测和可观测打包;Patronus 专攻幻觉与事实性评估;开源框架 DeepEval、LangSmith 的 eval 功能把门槛打到地板,商业版在云端收钱。这个模式与 Datadog 为代表的可观测性行业同构——评测正在成为 AI 时代的 APM(应用性能监控),跟着 Agent 部署量的增长收税。

人机验证赛跑:谁覆盖谁,决定 L1 层的终局 覆盖率/成本 任务难度前沿 → 自动验证覆盖(RLVR / Lean 形式化 / 单元测试) 数学·代码已工业化,向 Agent 任务扩散 人类专家验证成本(越前沿越贵) 50-200 美元/小时 → 难例前沿只有稀缺专家能判 难例前沿带 人类验证的最后阵地: 更高单价、更稀缺专家、更集中订单 易例先被自动验证吃掉 (Appen 化风险区)

把 L1 和 L3 放进一张图,就是这场赛跑的本质。自动验证(RLVR、形式化证明、单元测试)沿着任务难度前沿从易到难推进:数学和代码已经工业化,Agent 任务正在上产线。人类专家验证则向难例前沿收缩,而且越收缩越贵——能评判前沿物理推理链的人,全球可能只有几千个。两种终局:乐观版是「精品投行化」——人类层收缩到难例前沿带,单价更高、玩家更少、更集中,L1 变成小而美的稀缺资源生意;悲观版是「Appen 化」——自动验证覆盖速度超过难例前沿移动速度,L1 被整体去中介化。现实的答案大概率是分域:可形式化的域先失守,主观、长尾、跨学科的域人类长存。附带一个 DR.006 读者会心一笑的提醒——验证器本身可以被 hack(spurious rewards、奖励黑客),所以「验证器的验证器」会是这条赛道的下一层生意,L4 的审计向会先吃到。

第六章

(本篇 L3 层最纯样本的完整解剖——Prime Intellect 的五层产品栈、谁在买、以及悬赏制如何给人重新计价——见文末附录 B。)

投资映射:三种死法、三种活法与六个观察哨

把四层地图翻译成投资语言:这是一门客户只有八个实验室的「基础设施」生意,估值全是私募谈判价。它有三种教科书级的死法、三种正在发生的活法,和六个可以按季度核对的开关。

三种死法,其中两种已经发生过。死法一:中立性破产——Scale 实证。客户把最敏感的资产交给你,前提是你没有主人;一旦被任何一家球员持股,裁判资格即刻吊销。死法二:被去中介化——Appen 实证,且风险仍在加深:labs 完全可以自建 evals 团队(OpenAI 已有先例),若头部实验室把评测能力产品化对外,L1/L2 的中间层直接被抽掉。死法三:单品类退化——不跟着任务形态升级的公司,无论当期现金流多好看,都会被下一次范式切换整层抹掉;标注框时代的第一名没有一家活进推理链时代。

三种活法,分别对应三条估值逻辑。活法一:环境化——把人力服务升级成可复用的产品(RL 环境库、沙箱、验证器组件),Snorkel 和 Prime Intellect 在走这条路;一旦收入结构里「环境/产品」超过「人力/服务」,估值逻辑就从服务外包(净收入数倍)切换到基础设施(收入数十倍)。活法二:标准化——评测嵌入企业采购与合规流程,成为 AI 时代的审计与 APM,LMArena 的企业评测产品与 L4 工具链在走这条路。活法三:国家化——中国市场特有,绑定可信数据空间与监管标准轨道(方升体系、YD/T 6921-2026),以合规强制性替代市场公信力;海天瑞声 G 端业务拉高毛利是一季度的实证。三种活法不互斥,同一家公司可以叠加,但收入结构里哪条占大头,就应该用哪条逻辑给估值——这是本篇最想留下的方法论。

范式切换的底层:从「雇陪练」到「建考场」

上表反复出现「环境化」,它背后是一次奖励来源的范式切换,值得停下来讲透——因为这一刀切下去,本篇提到的所有公司被分成两个阵营,估值逻辑完全不同。旧范式 RLHF(基于人类反馈的强化学习):模型的奖励由人给出——标注员把模型的两个答案摆在面前,点选更好的那个,模型学会迎合人类偏好。新范式 RLVR(可验证奖励的强化学习):在代码、数学、agent 任务这些「对错可被程序判定」的领域,奖励改由验证器给出——单元测试通过记 1,不通过记 0,模型靠海量试错自己涨分,不再需要人对每一轮输出表态。

用一个任务看两种生意的差别:训练模型修代码 bug。RLHF 模式下,你雇几百名工程师当「陪练」,模型对同一个 bug 生成两个修复方案,陪练点选更好的一个;每条偏好对的市场价在几美元,训一轮要消耗上百万条,就是数百万美元级的人力支出——而模型下次升级,旧标注全部作废,陪练要重新雇、重新标。RLVR 模式下,你为这个 bug 建「考场」:一个代码仓库 + 一套单元测试 + 一个能跑测试的沙箱,验证器就是「跑测试,通过为 1,失败为 0」;建设成本是一次性的(几名高级工程师干几周),之后模型可以在这个考场里无限次演练,每一次的边际成本只剩算力电费。陪练的账单随训练轮次线性增长且不可积累;考场的账单只付一次,却可以被几百万次 rollout 摊薄——这就是「服务外包」与「基础设施」的分界线,也是估值从净收入数倍切换到收入数十倍的全部秘密。

维度RLHF:雇陪练(人力外包)RLVR:建考场(基础设施)
奖励来源人类偏好(人点选「哪个更好」)程序判定(测试/规则给出 0 或 1)
产品形态标注服务,按人头时计费环境库 + 沙箱 + 验证器,按订阅/API 计费
边际成本每多一题多付一份人力钱,线性建一次考场,几百万次 rollout 摊薄,指数
资产积累无——标注数据一次性消耗,模型升级即作废有——环境可复用、可迭代、可越攒越多
质量瓶颈人会累、会分歧、会作弊(Appen 数据质量崩塌的根源)验证器写得对不对(所以出题官必须是专家)
估值逻辑劳务外包:净收入数倍基础设施:收入数十倍

用这把刀把本篇的公司重新分一遍类——同一层「验证器经济」里,其实住着两个时代:

阵营公司位置注解
陪练系
(RLHF 人力)
Appen、Surge、Handshake、Mercor、海天瑞声(数据服务部分)赚人力差价:Appen 是低价众包的衰落实证(市值从峰值跌去九成以上);Surge/Mercor 是高端化版本——陪练升级为博士出题官与偏好审核,时薪上去了,但商业模式仍是「人力/服务」,适用净收入倍数估值
考场系
(RLVR 基础设施)
Prime Intellect、Snorkel、Braintrust卖可复用产品:Prime Intellect(环境库+沙箱,估值 10 亿美元)、Snorkel(环境工程,Scale 290 亿估值中被市场单独定价的部分)、Braintrust(评测工具链)——收入结构里「环境/产品」占比越高,越适用基础设施估值
跨界与转型Scale AI从标注大军起家(陪练),多年向专家网络与环境工程爬坡(半个考场系),但被 Meta 收购后中立性破产(死法一),验证器业务被剥离独立——转型爬到一半,先死在了裁判资格上
给投资者一个可以把问的判据:问任何一家「验证器经济」公司同一个问题——「同一份工作,第二次卖出去的时候,成本是多少?」答案是「还要再雇一遍人」,它就是陪练系,按外包给估值;答案是「接近零,跑一次测试的事」,它就是考场系,按基础设施给估值。两种都是真生意,但混着看会把 10 倍市收率和 1 倍市收率装进同一个篮子——这是本篇最常见的读表错误。
三种死法与三种活法:验证器经济的投资记分牌 三种死法 ① 中立性破产(Scale 实证) ② 被模型自我验证去中介 (Appen 实证 · labs 自营 evals) ③ 单品类退化 (标注框时代赢家无一进入推理链时代) 三种活法 ① 环境化:服务→产品(Snorkel/PI) ② 标准化:嵌入采购与合规(LMArena/L4) ③ 国家化:绑定监管轨道(方升/海天瑞声) 收入结构里哪条占大头, 就用哪条逻辑给估值 可及性现状 A股:海天瑞声(唯一纯标的) 美股/港股:暂无纯标的 Mercor / Surge / LMArena = IPO 观察名单 间接:NVIDIA(生态卡位式投资) 警惕:小市值 + 净利率薄 DR.006:「验证器即真理」 DR.007 补一句:真理的批发价正在被四层公司定价——而这家交易所最贵的商品,是「独立」两个字

最后是仓位纪律。给这个板块定价要过三道口径关:其一,估值全是私募谈判价——Scale 的 290 亿是股权隐含、Mercor 的 200 亿还在谈,没有公开市场定过价,流动性折价未知。其二,收入多数是 gross GMV——新闻标题里的「20 亿 ARR」除以三才是平台真收入,拿 gross 直接乘倍数会系统性高估。其三,中国市场不同构——G 端与合规驱动,付费方、增长斜率、终局形态都和美国四层结构不能硬套。基于这三道关,给出六个按季度可核对的验证开关:

六个观察哨(每季核对):① LMArena ARR 增速能否维持——1 亿美元之后若两个季度内翻倍,L2 品类正式成立;② Mercor 与 Meta 的合约是否修复——修复则证明信任可重建,行业仍有第二幕;③ Snorkel 与 Prime Intellect 财报里的环境/产品收入占比——占比越高,L1→L3 迁移越实;④ 海天瑞声具身与 G 端收入占比——中国路线的收入结构验证;⑤ 头部实验室人力数据支出增速——「每家 10 亿美元/年」这条线是否继续抬升;⑥ OpenAI / Anthropic 是否把自家 evals 对外商业化——一旦自营产品化,L1/L2 中间层集体承压,这是整张地图最大的空袭警报。
附录 A

四层公司总表

数据截至 2026 年 10 月,估值多为私募谈判价或隐含价,收入多为公司口径或第三方估计(标注见附录 B)。本表是研究底稿,不构成任何投资建议。

层公司估值(口径)收入(口径)一句话定位
L1 专家人力层Scale AI290 亿(Meta 49% 隐含)8.7 亿(2024)→近 10 亿(2025)行业定义者,中立性破产后的重建者
Mercor100 亿定价 / 200 亿谈判ARR 约 20 亿(gross)专家人才市场,抽成 30-40%
Surge AI150-250 亿(谈判)约 14 亿 run-ratebootstrap 标杆,Anthropic 主供
Handshake35 亿(2022 老轮)毛收 11 亿 / 净约 4.5 亿(2026-04)学生博士网络转型,收购 Cleanlab
Snorkel AI35 亿(E 轮)年化 3.75 亿标注软件转卖数据+RL 环境(L1→L3)
Turing / micro1 / Invisible22 亿 / 5 亿 / 20 亿约 3 亿 / 3 亿 / 1.34 亿工程师网络与流程外包
海天瑞声(688787)A 股市值2025 年 3.77 亿元(+59%)A 股唯一纯标的:标品矩阵+具身训练场+G 端
L2 独立评测层LMArena17 亿(2026-01 A 轮)ARR 3000 万 → 1 亿(2026-06)众包对战起家的裁判生意
Scale SEAL—(Scale 内部)—私测题:防污染的 held-out 评测
Artificial Analysis未披露—标准化独立评测;单推理模型评测成本 2767 美元
信通院「方升」—(国家队)—已评 141 模型;YD/T 6921-2026 标准
L3 环境与沙箱层Prime Intellect10 亿(2026-07 A 轮)年化破 1 亿、6000+ 客户开放栈:verifiers 库+prime-rl+Sandboxes
Snorkel(环境业务)见 L1—成品数据集+RL 环境
海天瑞声具身训练场——100+ 台真机器人 7×24 产数据
L4 工具链层Braintrust8 亿—评测+可观测一体化
Patronus AI / Galileo累计融资约 5000 万 / 4500 万美元—幻觉与事实性评估 / RAG 与 Agent 评测
LangSmith / DeepEval——开源免费+云收费的行业地板
附录 B
附录 B

解剖一家 L3:Prime Intellect 到底在卖什么

正文说 L3「环境与沙箱层」卖的是可复用的验证器,读者最容易犯的错,是把这一层误解成「还是人力外包换了个马甲」——毕竟这一层的公司也在给大批外部贡献者发钱。这一节把 L3 最纯的样本 Prime Intellect(下称 PI)整个拆开,逐层看它卖给前沿模型厂商和企业的到底是什么。

公司速览

PI 于 2024 年 1 月成立于旧金山(创始人 Vincent Weißer 与 Johannes Hagemann),起点是一个聚合全球 GPU 算力的交易所。2026 年 7 月完成 1.3 亿美元 Series A(Radical Ventures 领投,NVIDIA Ventures、Intel Capital、Dell Technologies Capital、Iconiq 跟投),投后估值约 10 亿美元;公司同口径披露年化收入超 1 亿美元、客户约 6000 家(含 Ramp、Zapier 等),并担任 NVIDIA Nemotron 联盟的后训练伙伴。按本篇的判据,10 倍 ARR 的定价介于劳务外包(净收入数倍)与纯基础设施(收入数十倍)之间——市场把它定价为「正在从考场收租的公司」。

它卖什么:五层产品栈

PI 的业务从下到上五层,每一层对应验证器经济的一个环节,可以单独买,也可以整条买:

层产品卖给谁、怎么收费
① 算力批发Compute Exchange:聚合 50+ 数据中心的 GPU 现货按小时计费(2026 年 9 月牌价:H100 按需 2.43 美元/时、spot 0.94 美元/时), reserved 集群走销售
② 环境库Environments Hub(2025 年 8 月对所有人开放):2,500+ 社区 RL 环境、400+ 贡献者、36.5 万+ 统一任务(SWE、终端、浏览器、工具调用、长上下文、数学、网络安全、机器人仿真等)模型厂商与企业按订阅/API 取用环境;这是「刷题量」的批发市场
③ 验证器与训练框架verifiers(MIT 许可,环境/评测组件库)、prime-rl(Apache-2.0 异步 RL 框架,FSDP2+vLLM,单卡可扩到 1000+ 卡)、Prime Sandbox(microVM 隔离沙箱)、renderers开源免费——它的获客漏斗与生态锚:框架开源锁定标准,托管服务收钱
④ 托管训练Lab(2026 年 2 月 GA,上线前已跑 3,000+ RL runs):把①②③打包成托管服务——RL 后训练 + 评测 + 沙箱 + 推理一个循环按容量与 token 计费;客户交基座模型和工作流,拿回一个为本行业特调的 agent
⑤ 推理部署Prime Inference:专用部署、按 token 的 LoRA serving、OpenAI 兼容 serverless API训练完直接托管在生产环境,闭环留存

这条栈的底色是「用自研证明栈能用」:PI 用自家分布式训练做出 INTELLECT-1(10B,横跨三大洲联合训练)、INTELLECT-2(32B)、INTELLECT-3(106B MoE),另有生物安全模型 METAGENE-1 和可验证推理方案 TOPLOC——先当「自己的客户」,再把跑通的栈卖给别人。

谁在买、买的是什么

第一类是想自研 agent 但不建全套 infra 的公司。案例是 Ramp(企业支出卡公司):用 PI 的 Lab 训了一个小型 RL 子代理「Fast Ask」,官方口径称在问答任务上精度超过前沿通用模型,成本与延迟更低——这解释了 neolabs 为什么买单:小模型在窄环境里被 RL 打磨后,能打赢按 token 收费的大模型。第二类是企业:用开源环境模板塞自己的私有数据,在 VPC 或本地部署里做行业后训练(金融、数据分析、科研是 PI 点名的高杠杆领域),数据不出域。第三类容易被忽略:前沿生态本身——NVIDIA 的 Nemotron 联盟把 PI 定为「开放 RL 环境层」的标准件,2,500+ 环境与 verifiers 框架原生接入 NeMo Gym;这正是正文说的「核心品类自建、长尾外采、中立性交叉校验」里外采那一环。

回到判据:它是陪练还是考场?

用「同一份工作第二次卖的成本」审它:GPU 按小时是商品生意;Lab 订阅是产品生意;环境被第二次取用的边际成本接近零——考场属性为主。但它的 Environments Hub 有一个值得单独指出的设计:环境是悬赏制生产的——开放档每个被验收的环境付 100-500 美元,前沿档 1,000-5,000+ 美元,且必须通过审核与可复现验证才结账。这就是正文《范式切换的底层:从「雇陪练」到「建考场」》一节所说的「出题官经济」的市场化形态:人没有消失,但计价单位从「小时」变成了「可复现的产出物」——验收不过不付钱,验收过了这个环境可以被几千家客户无限复用,贡献者拿一次性赏金,平台拿批发租金。对比 Appen 按小时结算的标注大军,这是同一批「人力」在两个范式下的两种命运。

风险与保留:PI 的框架层全部开源(verifiers/prime-rl),开源既是它的获客飞轮也是它的护城河漏出——标准被它锁定,但代码谁都能 fork 自建;合规侧它尚未有 SOC 2 认证,对企业大单是实际门槛;GPU 批发层面与 Lambda、RunPod 短兵相接,托管微调层面与 Together AI 竞争——10 倍 ARR 的估值里已经包含了不少「考场」预期, Execution 一旦跟不上,估值逻辑会向①层的商品生意滑落。它值得盯的季度信号:Environments Hub 的环境数与付费取用方数量、Lab 客户的续约率、以及前沿实验室是否公开采购其环境。

信源与口径警告

本篇数据来自公开渠道的二手聚合与公司口径,关键数字在生产时已尽量交叉,但仍需按下面的警告使用。

口径警告三则:① 估值均为私募定价或隐含价,无公开市场确认,流动性折价未知;② 多数「收入」为 gross GMV——平台抽成后净收入约为其三分之一,倍数比较必须用净口径;③ 中国市场由 G 端与合规驱动,付费结构与增长逻辑和美国四层结构不同构,不可硬套。

主要信源:

  • Value Add VC(2026-07/10):Mercor、Scale AI 估值与收入对照表;Meta 交易条款与客户流失脉络
  • Sacra(2026-04):Handshake 年化收入 11 亿美元、行业对照(Mercor/Scale/Surge/Turing/micro1/Invisible)
  • AI Wiki「Benchmarking as an industry」:LMArena 融资轨迹、Scale SEAL、Artificial Analysis 评测成本、Epoch AI FrontierMath 风波
  • AgentMarketCap(2026-04):LMArena 17 亿美元估值深拆;《Leaderboard Illusion》指控(Cohere/Stanford/MIT/AI2,2025-04)
  • 三个皮匠报告(2026):EaaS 市场三口径(22.5 亿/23.6 亿/3.5 亿美元)、信通院方升 141 模型、YD/T 6921-2026
  • 财联社(2026-06):海天瑞声 34 家机构调研纪要(G 端毛利、RLHF 需求变化、具身训练场)
  • 界面新闻:中国数据标注行业研究(150 亿元规模、三阵营、CR5 45%→60%)
  • Prime Intellect 官方博客 / TechCrunch / Dealroom(2026-07):A 轮 1.3 亿美元、客户与 ARR 口径
  • HeroHunt(2026):数据标注市场两层分裂、专家时薪 50-200 美元、任务翻转史

术语速查:RL 环境=可复用的强化学习训练场(任务+判定规则);沙箱=隔离的可执行考场;私测题(held-out)=永不公开、防训练污染的评测题;EaaS=评估即服务;中立性=数据服务商不被任何实验室持股的独立地位;难例前沿=模型初始成功率最低、唯有稀缺专家能判定的任务边界。

© 2026 头哥投研 · touge.com.cn 版权所有 专题七 | 验证器经济:谁在卖「对错」,谁在收「判定税」(研究总稿 · 2026-10-09)