新打分规则

先看谁把你设成了默认,再看模型会不会主动推荐你;官网做得好不好只当门槛,缺了才扣分。

按这套规则重打 26 家:新分和「一年新增下载量」的相关从旧分的 -0.01 升到 0.53。排名变化最大的是 Tailwind(旧 #26 → 新 #3)和 Composio(旧 #5 → 新 #18)。下面是规则、回测排名和定下来的五件事。2026-10-15 起,审计站按这套规则打分。

2026-10-15 · 模型测试跑了 3 个模型 × 39 个问题 = 117 次回答 · 2026-10-15 起审计站按这套规则打分,首页只显示一个总分

总分 = 默认名单(最高 70)+ 模型推荐(最高 30)− 门槛扣分(最多 30)结果限制在 0–100。另外两个风险标记不计分:默认只有一个来源、默认被换掉过。

① 默认名单

0–70

人工维护:谁把这家设成了默认或内置。每条要有一手出处,没有出处不算。

编码 agent 的选择份额 ≥50%(第三方研究,如 Amplifying)25
编码 agent 的选择份额 20–50%15
大入口的默认或内置(v0、Lovable、Bolt、Vercel 平台、OpenAI / Anthropic 官方、LangChain 官方模板、Devin)20
中小入口的默认(Stripe Projects、OpenRouter、OpenClaw……)10
官方目录 / 集成市场 / 名单(Vercel Marketplace、Claude 插件市场、Vertex……)5,最多算 10
统计期内被换掉的默认减半

② 模型推荐

0–30

自动跑:用英文问 3 个模型(DeepSeek V4.1 Flash、Kimi K3、gpt-oss-120b),13 个类别各 3 个真实开发问题,问题里不提任何产品名,只要排名前三。

某个回答里排第 1 / 第 2 / 第 31 / 0.5 / 0.25
满分 = 本类 9 次回答都排第 1(其他类别的问题里被点名也算)30

③ 门槛扣分

0 到 −30

原来的加分项改成门槛:做到了不加分,缺了才扣。

不能自己注册拿 key(只能联系销售)−10
收不到钱(收入不跟着用量走,或者不收费)−10
没有公开、免登录的文档−5
没有免费档−5
AI 读不了文档(llms.txt、Markdown、MCP 都没有)−5
模型能自己写掉(纯代码库,没有托管服务)−5

26 家新排名(回测版)

蓝条 = 默认名单,绿条 = 模型推荐。「旧」列是旧规则的分和排名;箭头 = 名次变化。注意:这张表的模型测试用的是 13 个类别的专门问题;审计站上线后改成「先判断类别、再套 3 个通用问题」,所以站上的分数会和这里略有不同。

和增长对一对

Spearman 排名相关(0 = 没关系,1 = 排名完全一致)。和上一版回测是同样的 26 家、同样的 npm 口径。

定下来的五件事

  1. 只显示一个总分。26 家里有 14 家低于 25 分,新公司大概率拿到个位数;报告里照样给「最该先做的 5 件事」,并把总分拆成三部分的明细。
  2. 名单 70、模型推荐 30。名单准、但要人工维护;模型测试能自动跑、但偏向老牌,所以权重小一些。
  3. 模型用 Novita 上的三个:DeepSeek V4.1 Flash、GLM 5.3、gpt-oss-120b。2026-10-16 拿 26 家比了 8 个开源模型,这一组和增长的相关最高(0.73)又快;回测表里用的是 Kimi K3,准确度一样但慢一倍,线上已换成 GLM 5.3。
  4. 名单人工维护。名单里没有的公司,这一项记 0,报告里提示「需要人工补查」;查到出处后加进名单(lib/defaults.js)。
  5. 被换掉的默认减半。例如 Supabase 的 v0、Neon 的 Replit、Exa 的 gpt-oss。

模型原始回答

展开 117 次回答(3 个模型 × 39 个问题)

默认名单出处:context-agentinfra/research(C-LAYER、K2-defaults、EYES、Amplifying 系列原文等)。模型测试:Novita API,2026-10-15,temperature 0.3,每个问题问一次。下载量:npm 官方接口。