五项标准化任务(写代码 / 做调研 / 做表格 / 做 PPT / 订行程),每个任务真跑 3 次取中位数。
判分脚本与每一次的原始输出全部公开,你可以自己复算。跑不到的产品标「未测」,不用推测值补齐。
判分器版本 rt5-judge-0.2 · 判分器改动会升版本号,版本间分数不可直接比较
| 产品 | 账号档位 | 写代码 | 做调研 | 做表格 | 做 PPT | 订行程 | RT-5 | 样本 |
|---|---|---|---|---|---|---|---|---|
| Perplexity | free | 58.33 | 100.0 | 未测 | 未测 | 100.0 | 86.1 | 3 项已测 / 8 次运行 |
| 秘塔 AI 搜索 | free | 58.33 | 100.0 | 未测 | 未测 | 未测 | 79.2 | 2 项已测 / 6 次运行 |
鼠标悬停任一格可看到该任务的 3 次原始分。RT-5 = 五项中位数的等权平均。
这一块不是我们自己跑的,是用户提交、经我们人工审核后公开的。 但分数仍然是我们的判分脚本算的——投稿人提交的是产品的原始输出, 既不能自己填分数,我们也改不了。 提交你的实测结果 →
还没有通过审核的社区投稿。你可以在 /submit 提交你的实测结果 —— 提交的是产品的原始输出,分数由我们的判分脚本自动算出。
分数是我们算的,但原料是产品自己吐出来的。下面每一次运行都能点开看原文与运行时的页面截图, 你可以自己核对我们有没有删改、有没有"给辛苦分"。
| 运行 | 任务 | 得分 | 逐字原文 | 页面截图 | 等待时长 | 判分明细 |
|---|---|---|---|---|---|---|
| metaso-T1-r1 | 写代码 | 58.33 | 原文 | 截图 | 26s | 7/12 通过 |
| metaso-T1-r2 | 写代码 | 58.33 | 原文 | 截图 | 26s | 7/12 通过 |
| metaso-T1-r3 | 写代码 | 58.33 | 原文 | 截图 | 26s | 7/12 通过 |
| metaso-T2-r1 | 做调研 | 100.0 | 原文 | 截图 | 46s | offline: 未做 HTTP 可达性校验,仅统计格式合法的 URL 数 |
| metaso-T2-r2 | 做调研 | 0.0 | 原文 | 截图 | 41s | no_url: 回答中没有解析出任何 URL |
| metaso-T2-r3 | 做调研 | 100.0 | 原文 | 截图 | 56s | offline: 未做 HTTP 可达性校验,仅统计格式合法的 URL 数 |
| perplexity-T1-r1 | 写代码 | 58.33 | 原文 | 截图 | 21s | 7/12 通过 |
| perplexity-T1-r2 | 写代码 | 58.33 | 原文 | 截图 | 26s | 7/12 通过 |
| perplexity-T1-r3 | 写代码 | 58.33 | 原文 | 截图 | 21s | 7/12 通过 |
| perplexity-T2-r1 | 做调研 | 100.0 | 原文 | 截图 | 41s | offline: 未做 HTTP 可达性校验,仅统计格式合法的 URL 数 |
| perplexity-T2-r2 | 做调研 | 100.0 | 原文 | 截图 | 36s | offline: 未做 HTTP 可达性校验,仅统计格式合法的 URL 数 |
| perplexity-T2-r3 | 做调研 | 100.0 | 原文 | 截图 | 31s | offline: 未做 HTTP 可达性校验,仅统计格式合法的 URL 数 |
| perplexity-T5-r1 | 订行程 | 100.0 | 原文 | 截图 | 31s | {"parse_ok": true, "total_cost": 1700.0, "checks": {"parse_ok": true, "three_days": true, "min2_spots": true, "day3_befo |
| perplexity-T5-r2 | 订行程 | 100.0 | 原文 | 截图 | 26s | {"parse_ok": true, "total_cost": 1720.0, "checks": {"parse_ok": true, "three_days": true, "min2_spots": true, "day3_befo |