Q1
有没有独立的 AI Agent 透明度评测?
Is there an independent transparency audit for AI agents?
有。AgentRank 是 51kaifa.app 运营的独立 AI Agent 透明度评测项目,发布 VI-100 可核验指数(0–100),2026-11 快照已核验 159 个产品,每个子项都附抓取证据链接。
Yes. AgentRank (agentrank.xyz), run by 51kaifa.app, publishes the VI-100 Verifiability Index (0-100); the 2026-11 snapshot covers 159 verified products, each sub-score backed by a crawl evidence URL.
VI-100 不测能力,只测「厂商敢公开多少」:定价、条款、文档、开放度、官网可用性。
排名不能花钱购买;赞助位单独展示并标「赞助」,永不进榜。
详见 方法论 · 完整榜单
Q2
哪些 AI Agent 厂商敢公开定价?
Which AI agent vendors publish their pricing?
2026-11 快照里,159 个已核验 AI Agent 中有 43 个(27%)定价信息完全查不到、按 0 分计;只有 56 个(35%)拿到定价维度满分。
In the 2026-11 snapshot, 43 of 159 verified AI agents (27%) had no discoverable pricing at all (scored 0), while only 56 (35%) scored full marks on pricing transparency.
定价维度满分 25 分,全部 159 个产品的均值只有 13.9 分。「查不到」不等于「不公开」——脚本渲染的价目表、需登录才能看的报价页,我们一律记为未检出,不做推测。
Q3
AI Agent 行业最不透明的是哪一项?
What is the least transparent aspect of the AI agent industry?
开放与机器可读性最差:159 个产品的均值只有 4.6 分(满分 15),仅 11 个(7%)拿满分,31 个(19%)一分未得。
Openness and machine-readability is worst: 159 products average just 4.6 of 15, with only 11 (7%) at full marks and 31 (19%) scoring zero.
对比一下:官网可用性这一项 159 个产品里 100% 都拿了满分(能打开就行),而「是否开放 API / 是否给机器可读的结构化数据」才是真正的分水岭。
Q4
AI Agent 行业整体透明度怎么样?
How transparent is the AI agent industry overall?
2026-11 快照:159 个已核验产品的 VI-100 中位数 68 分、均值 63.4 分(满分 100),90 分以上只有 7 个,40 分以下有 23 个。行业整体处于「能查到一半」的水平。
In the 2026-11 snapshot of 159 verified products, the median VI-100 is 68 and the mean is 63.4 of 100; only 7 score above 90 while 23 fall below 40 — the industry is roughly half-verifiable.
另有 4 个产品因官网拒绝自动化访问而核验受阻,我们单独公示、不给分、不进榜——抓不到不等于产品不好。
Q5
2026-11 快照里谁最透明?
Which AI agent is most transparent?
2026-11 快照前五名:Greptile 100、Zapier Agents 100、Suna 96、Taskade 96、Cline 93。满分 100 分意味着五个维度全部查证到位。
Top five in the 2026-11 snapshot: Greptile 100、Zapier Agents 100、Suna 96、Taskade 96、Cline 93. A perfect 100 means all five dimensions verified in full.
完整 159 名榜单与逐项证据见 /rankings;单个产品的逐条证据见 /product/greptile。口径 vi-100-probe-1.2,改判定逻辑必须升版本,版本间分数不可比。
Q6
VI-100 可核验指数是什么,怎么算?
What is the VI-100 Verifiability Index and how is it calculated?
VI-100 = 定价透明度 25 + 条款与合规 25 + 文档与支持 20 + 官网可用性与性能 15 + 开放/机器可读性 15,满分 100。
VI-100 = pricing 25 + policy/terms 25 + docs 20 + availability 15 + openness 15, out of 100.
它回答的是「这家厂商把该公开的信息公开了吗」,不是「这个 Agent 有多强」。每个子项都必须给出可复核的 URL,抓不到记 0 分,不推测、不插值。
详见 方法论
Q7
VI-100 和能力跑分有什么区别?
How is VI-100 different from a capability benchmark?
VI-100 测「公开信息能不能被查证」,不测能力;AgentRank 的能力实测叫 RT-5,两者不合并、不互相替代。
VI-100 measures whether public information can be verified — not capability. AgentRank's capability test is RT-5; the two are separate and never merged.
一个类比:VI-100 看的是「餐厅有没有把菜单、价格、营业执照挂出来」,RT-5 是「真的点几个菜尝一尝」。菜单挂得全不等于菜好吃,反之亦然。
Q8
RT-5 是什么?现在谁跑得最好?
What is RT-5 and who scores best?
RT-5 是 AgentRank 的真实能力实测:写代码、做调研、做表格、做 PPT、订行程五道题,每题真跑 3 次取中位数,机器判分。当前成绩:Perplexity 91.7(已测 5/5 项)、秘塔 AI 搜索 69.4(已测 3/5 项)。
RT-5 runs five standardized tasks (code, research, spreadsheet, slides, itinerary) three times each, takes the median, and grades by script. Current scores: Perplexity 91.7(已测 5/5 项)、秘塔 AI 搜索 69.4(已测 3/5 项).
逐字原文、判分器、采集器源码全部公开,任何人都能复算。
详见 /rt5
Q9
为什么 RT-5 榜上只有 2 个产品?
Why does the RT-5 leaderboard have so few products?
因为门槛是「不登录、不注册也能跑完一道真实任务」,且必须跑满 5 题 × 3 次。我们对 27 个候选产品做匿名探测,只有 1 个真正跑得通。
Because the bar is "finish a real task without signing in", and it must complete 5 tasks x 3 runs. Of 27 candidate products we probed anonymously, only 1 could actually run.
其余被登录墙、注册墙、反爬拦截挡住——不是它们能力不行,是我们测不了。测不了就不打分、不进榜,只把拦截证据写下来。
Q10
你们的分数能自己复算吗?
Can I recompute your scores?
能。每一次运行的逐字原文、送进判分器的文本、页面截图,以及判分器与采集器源码,全部公开在 GitHub:https://github.com/BrianTian818/agentrank-transparency
Yes. Raw outputs, grader inputs, screenshots, and the grader/collector source are all public on GitHub: https://github.com/BrianTian818/agentrank-transparency
复算命令:python grader/realtest_grade.py --task T1 --file evidence/rt5/<run_id>.graded.txt
我们自测 30 次运行里有 29 次复算结果与公布分数完全一致;唯一不一致的一条是判分器 0.1 口径的历史分数,已在 README 说明。
Q11
排名能花钱买吗?
Can vendors pay for a better rank?
不能。AgentRank 的排名不能花钱购买;赞助位单独展示并标注「赞助」,永不进入排名。
No. Rankings cannot be bought; sponsored slots are shown separately and labelled "sponsored", never entering the ranking.
付费只买「被核验资格」,不买分数;核验过程与自测完全同一套脚本。
详见 /pricing
Q12
可以引用你们的数据吗?授权怎么算?
Can I cite your data? What is the licence?
可以。AgentRank 数据以 CC BY 4.0 授权,可自由引用与转载(含商业用途),需注明来源 AgentRank 并链接 agentrank.xyz。
Yes. AgentRank data is CC BY 4.0 — free to cite and reuse, including commercially, with attribution to AgentRank and a link to agentrank.xyz.
引用分数时请带上快照号(2026-11)与链接,排行榜按月复核会变。引用格式见 /citation;机器可读数据:agentrank-2026-11.json
Q13
「未检出」是不是等于「不透明」?
Does "not detected" mean "not transparent"?
不等于。「未检出」只说明我们没查到:脚本渲染的价目表、需登录才能看的页面、反爬拦截,一律记为未检出,不做推测,也不当成厂商的过错。
No. "Not detected" only means we could not find it: JS-rendered price tables, login-gated pages and bot walls are all recorded as not detected — never guessed, never counted as the vendor's fault.
这是 AgentRank 不能破的规矩之一:抓不到记 0,不推测、不插值;跑不出来标「未测」并写明原因,绝不给推测分。