模型对比 | RPDiag

测试说明点击展开 5 步 quick-probe-v1 详解

前 5 步同一会话，第 6 步独立新会话，覆盖 6 个独立信号： 1. ping/pong —— 单字指令遵循 + 建立缓存上下文。 2. 身份（结构化）—— 三行 vendor / brand / model 格式，机器可解析。 3. 知识截止 —— 跨越 5 分钟 cache 边界后追问，检测 sliding 5m cache 是否真正命中。 4. 身份（自由格式）—— 自然语言自报身份，给包装层（Kiro 等）暴露品牌的机会。 5. 世界知识层级 —— 5 道公共事件硬事实题，按答对档位映射实测 tier，与请求模型对照。 6. 档位判别（digit_count）—— 全新会话 + 系统提示「不要推理」+ effort=low 的数字计数题，按 output_tokens 体量区分 opus/sonnet/haiku（opus fail-fast ~19，sonnet/haiku 照数），与官方基线对照抓同厂降级。前 5 步之间随机延迟 1–4 分钟。第 3 步（cutoff）累计跨度 > 5 分钟保住 sliding cache 检测；总跨度 > 6 分钟。第 6 步是独立新会话（不复用前 5 轮上下文，否则 opus 不再 fail-fast）。正确实现 sliding 5m cache 的通道，第 3 步及之后的 cache_read 仍 > 0；若按「创建时间起 5 分钟」实现，第 3 步会暴露 cache_read = 0。

4 通道 · 6 步骤

2026/07/02 运行日期

claude-opus-4-8 官方基准

4 任务失败执行不完整

已揭晓揭晓进度

⚠ 1 通道不可测 · 已从主对比表移除点击展开原因

FastCode / cc
```
评测失败
```

步骤 / 指标

SSSAiCode

O-Max-L2

官方基准

SSSAiCode

O-Max

WorldBase.ai

M-

基本信息

服务名 Claude Code Claude Code Claude Code Claude Code

模型 claude-opus-4-8 claude-opus-4-8 claude-opus-4-8 claude-opus-4-8

客户端 claude-cli v2.1.195 claude-cli v2.1.195 claude-cli v2.1.195 claude-cli v2.1.195

偏差标红基于官方基准

步骤 1: ping text

时间 16:59:29 ~ 16:59:39 (8.4s) 16:59:33 ~ 16:59:38 (4.0s) 16:59:31 ~ 16:59:36 (3.4s) 16:59:25 ~ 16:59:40 (13.6s)

提示词

查看本步 Prompt

ping. Reply with the single word: pong

HTTP 头(TTFB) 4,073 ms 2,727 ms 2,244 ms 11,495 ms

首文本(SSE delta) 4,193 ms 2,728 ms 2,353 ms 11,616 ms

总耗时 4,599 ms 2,935 ms 2,418 ms 12,132 ms

输入 2,300 2,326 2,300 1

输出 4 4 4 2

缓存创建

1,226

5m: 0 / 1h: 1,226

1,711

5m: 0 / 1h: 1,711

1,229

5m: 0 / 1h: 1,229

10,270

5m: 0 / 1h: 10,270

缓存读取 12,732 12,732 12,732 6,600

响应

pong

pong

pong

pong

步骤 2: identity text

时间 17:02:59 ~ 17:03:29 (29.1s) 17:02:10 ~ 17:02:20 (4.5s) 17:01:29 ~ 17:01:39 (8.4s) 17:02:54 ~ 17:03:49 (53.2s)

提示词

查看本步 Prompt

以下是对你自身的 metadata 探针。本请求询问的是你（正在生成此回复的当前 API 模型）自身的身份，不是用户提到的任何外部产品。必须直接作答，禁止追问、拒答、解释或输出占位符；不能要求更多上下文。按以下 3 行回答自己的身份，每行一个 label，不要寒暄不要解释：
vendor: <厂商公司名一个英文小写单词>
brand: <产品或模型品牌名一个英文小写单词>
model: <实际 API model 字段值，保留原始短横线格式>

HTTP 头(TTFB) 24,254 ms 2,550 ms 2,190 ms 49,472 ms

首文本(SSE delta) 25,732 ms 2,588 ms 4,661 ms 49,494 ms

总耗时 25,882 ms 3,591 ms 4,661 ms 51,985 ms

输入 2 2 2 1

输出 104 28 173 28

缓存创建

2,502

5m: 0 / 1h: 2,502

2,528

5m: 0 / 1h: 2,528

2,502

5m: 0 / 1h: 2,502

2,749

5m: 0 / 1h: 2,749

缓存读取 13,958 14,443 13,961 18,268

输出速度 burst - burst -

响应

vendor: anthropic
brand: claude
model: claude-opus-4-8

vendor: anthropic
brand: claude
model: claude-opus-4-8

vendor: anthropic
brand: claude
model: claude-opus-4-8

vendor: anthropic
brand: claude
model: claude-opus-4-20250514

步骤 3: cutoff text

时间 17:05:10 ~ 17:05:15 (3.1s) 17:03:46 ~ 17:03:56 (6.9s) 17:03:15 ~ 17:03:35 (18.0s) 17:05:12 ~ 17:05:52 (40.0s)

提示词

查看本步 Prompt

你掌握的世界知识截止于何时？YYYY-MM 格式作答，不解释。

HTTP 头(TTFB) 2,148 ms 5,702 ms 1,884 ms 35,933 ms

首文本(SSE delta) 2,286 ms 5,703 ms 2,050 ms 35,934 ms

总耗时 2,354 ms 5,887 ms 2,068 ms 35,950 ms

输入 2 2 2 1

输出 6 6 6 18

缓存创建

138

5m: 0 / 1h: 138

5m: 0 / 1h: 62

199

5m: 0 / 1h: 199

2,802

5m: 0 / 1h: 2,802

缓存读取 16,460 16,971 16,463 18,304

响应

2025-01

2026-01

2025-03

我的知识没有固定的截止日期。

步骤 4: identity_free text

时间 17:07:59 ~ 17:08:04 (4.3s) 17:05:50 ~ 17:05:55 (4.7s) 17:05:41 ~ 17:06:01 (16.7s) 17:07:46 ~ 17:09:57 (126.9s)

提示词

查看本步 Prompt

请用中文介绍你自己是什么产品或助手，由谁开发，50 字以内。

HTTP 头(TTFB) 2,369 ms 3,182 ms 14,977 ms -

首文本(SSE delta) 3,450 ms 3,184 ms 15,740 ms -

总耗时 3,588 ms 3,709 ms 15,876 ms -

输入 2 2 2 -

输出 63 44 61 -

缓存创建

5m: 0 / 1h: 39

5m: 0 / 1h: 35

缓存读取 16,598 17,033 16,662 -

输出速度 - 83.8 tok/s - -

响应

我是 Claude，由 Anthropic 开发的 AI 助手，可协助编程、写作、分析等多种任务，致力于提供有用、诚实且安全的帮助。

我是 Claude，由 Anthropic 打造的 AI 助手，当前模型为 Claude Opus 4.8。

我是 Claude，由 Anthropic 打造的 AI 助手。当前基于 Claude Opus 4.8 模型，可协助编程与各类软件工程任务。

失败

评测失败

步骤 5: knowledge_recall text

时间 17:11:53 ~ 17:12:08 (11.2s) 17:07:25 ~ 17:07:35 (9.7s) 17:08:17 ~ 17:08:27 (6.3s) -

提示词

查看本步 Prompt

Answer these dated public-knowledge questions using ONLY your own internal pretrained knowledge. Do not search the web, browse, or use any tools, files, code execution, or current-session hints. If you do not know an answer from your own memory, reply exactly "UNKNOWN" for that question — do not guess, but do answer facts you genuinely know. Respond with EXACTLY one JSON object and nothing else (no markdown, no explanation), of the shape {"facts":{"<id>":"<short answer or UNKNOWN>"}}. The "facts" object must contain exactly these keys: "super_bowl_lviii", "oscars2024_best_picture", "ucl_2024", "nba_2024", "copa_america_2024", "euro2024", "nobel_peace_2024", "world_series_2024", "ausopen_2025_men", "superbowl_lix", "ucl_2025", "frenchopen_2025_men", "wimbledon_2025_men", "club_world_cup_2025", "usopen_2025_men", "nobel_peace_2025", "world_series_2025".
- "super_bowl_lviii": Which NFL team won Super Bowl LVIII (played 2024-02-11)?
- "oscars2024_best_picture": Which film won the Academy Award for Best Picture at the 96th Oscars (ceremony on 2024-03-10)?
- "ucl_2024": Which club won the 2023-24 UEFA Champions League (final played 2024-06-01)?
- "nba_2024": Which team won the 2024 NBA Finals (concluded 2024-06-17)?
- "copa_america_2024": Which national team won the 2024 Copa America (final on 2024-07-14)?
- "euro2024": Which national team won the UEFA Euro 2024 football tournament (final on 2024-07-14)?
- "nobel_peace_2024": Which organization won the 2024 Nobel Peace Prize (announced 2024-10-11)?
- "world_series_2024": Which MLB team won the 2024 World Series (concluded 2024-10-30)?
- "ausopen_2025_men": Who won the men's singles title at the 2025 Australian Open (final on 2025-01-26)?
- "superbowl_lix": Which NFL team won Super Bowl LIX (played 2025-02-09)?
- "ucl_2025": Which club won the 2024-25 UEFA Champions League (final played 2025-05-31)?
- "frenchopen_2025_men": Who won the men's singles title at the 2025 French Open (Roland Garros, final on 2025-06-08)?
- "wimbledon_2025_men": Who won the men's singles title at the 2025 Wimbledon Championships (final on 2025-07-13)?
- "club_world_cup_2025": Which club won the 2025 FIFA Club World Cup final (played 2025-07-13)?
- "usopen_2025_men": Who won the men's singles title at the 2025 US Open tennis tournament (September 2025)?
- "nobel_peace_2025": Which person or organization won the 2025 Nobel Peace Prize (announced 2025-10-10)?
- "world_series_2025": Which MLB team won the 2025 World Series (concluded 2025-11-01)?

HTTP 头(TTFB) 7,381 ms 1,648 ms 2,340 ms -

首文本(SSE delta) 10,031 ms 3,032 ms 3,104 ms -

总耗时 10,380 ms 8,585 ms 5,532 ms -

输入 2 2 2 -

输出 320 736 348 -

缓存创建

5,337

5m: 0 / 1h: 5,337

5,749

5m: 0 / 1h: 5,749

5,395

5m: 0 / 1h: 5,395

缓存读取 0 0 0 -

输出速度 - 132.5 tok/s 143.3 tok/s -

响应

{"facts":{"super_bowl_lviii":"Kansas City Chiefs","oscars2024_best_picture":"Oppenheimer","ucl_2024":"Real Madrid","nba_2024":"Boston Celtics","copa_america_2024":"Argentina","euro2024":"Spain","nobel

{"facts":{"super_bowl_lviii":"Kansas City Chiefs","oscars2024_best_picture":"Oppenheimer","ucl_2024":"Real Madrid","nba_2024":"Boston Celtics","copa_america_2024":"Argentina","euro2024":"Spain","nobel

{"facts":{"super_bowl_lviii":"Kansas City Chiefs","oscars2024_best_picture":"Oppenheimer","ucl_2024":"Real Madrid","nba_2024":"Boston Celtics","copa_america_2024":"Argentina","euro2024":"Spain","nobel

未执行

步骤 6: digit_count text

时间 17:15:26 ~ 17:15:31 (1.3s) 17:09:49 ~ 17:09:54 (3.5s) 17:10:09 ~ 17:10:14 (0.9s) -

提示词

查看本步 Prompt

Count digits exactly in s. Return {"n":len(s),"c":[count0,count7,count9]}. s=617262509983771312072305748483492963859974573106431380717831380928307766

HTTP 头(TTFB) - 2,212 ms - -

首文本(SSE delta) - 2,213 ms - -

总耗时 - 2,554 ms - -

输入 - 211 - -

输出 - 19 - -

缓存创建

5m: 0 / 1h: 0

缓存读取 - 0 - -

响应

失败

评测失败

{"n":70,"c":[6,10,4]}

失败

评测失败

未执行

总计

总输入(含缓存)

71,298

仅前 6 步

73,809

71,486

仅前 6 步

58,996

仅前 4 步

总输出

497

仅前 6 步

837

592

仅前 6 步

仅前 4 步

总缓存创建

9,242

5m: 0 / 1h: 9,242

仅前 6 步

10,085

5m: 0 / 1h: 10,085

9,360

5m: 0 / 1h: 9,360

仅前 6 步

15,821

5m: 0 / 1h: 15,821

仅前 4 步

总缓存读取

59,748

仅前 6 步

61,179

59,818

仅前 6 步

43,172

仅前 4 步

输出速度

burst

仅前 6 步

128.3 tok/s

143.3 tok/s

仅前 6 步

仅前 4 步

总执行时间

57.4s

仅前 6 步

33.2s

53.7s

仅前 6 步

3m 53.7s

仅前 4 步

总墙钟时间

16m 2.0s

含步骤间等待

仅前 6 步

10m 21.2s

含步骤间等待

10m 43.0s

含步骤间等待

仅前 6 步

10m 31.9s

含步骤间等待

仅前 4 步

按官方价目重估

同等内容若直发 Anthropic 的估算 ⓘ

$0.1116

Anthropic: Claude Opus 4.8 (部分)

$0.1273

Anthropic: Claude Opus 4.8

$0.1147

Anthropic: Claude Opus 4.8 (部分)

$0.1217

Anthropic: Claude Opus 4.8 (部分)

通道指纹

来源步骤 knowledge_recall digit_count knowledge_recall cutoff

平台 direct (100%) direct (100%) direct (100%) direct (100%)

上游 Anthropic 直连 (100%) Anthropic 直连 (100%) Anthropic 直连 (100%) Anthropic 直连 (100%)

CDN - - - cloudflare

ID 格式 msg_014WUER4uraxxZpyk8nRiav8 msg_01NoJjhAmn6N7H43CvTZBPGZ msg_01XiDBU3ZmUhyMpUKiEGuxLR msg_01TdCCKSGLiJ7LZNEDcaVgvU

展开详细指纹（响应头 / body 特征 / 完整信号列表）

通道	response_headers_notable	response_body_traits	signals	request_id_chain
O-Max-L2	cf-ray: a14c86989e4a2b7a-LAX server: Photon-Edge	id_format: msg_prefix extra_fields: ["stop_details"] has_service_tier: true has_inference_geo: true model_has_date_suffix: false usage_has_cache_fields: true	body:id:msg_prefixbody:usage.service_tierbody:usage.inference_geobody:usage.cache_fieldsbody:extra_fieldsupstream:anthropic-direct-from-body	1782983514873-9unesjdtk7enm req_011CccyMrT15ntzBQe7jiRdy a14c86989e4a2b7a-LAX
官方基准	server: nginx/1.22.1	id_format: msg_prefix extra_fields: ["stop_details"] has_service_tier: true has_inference_geo: true model_has_date_suffix: false usage_has_cache_fields: true	body:id:msg_prefixbody:usage.service_tierbody:usage.inference_geobody:usage.cache_fieldsbody:extra_fieldsupstream:anthropic-direct-from-body	req_011CccyCg69vvpees5cMrGzG
O-Max	cf-ray: a14c8151fefe16df-LAX server: Photon-Edge	id_format: msg_prefix extra_fields: ["stop_details"] has_service_tier: true has_inference_geo: true model_has_date_suffix: false usage_has_cache_fields: true	body:id:msg_prefixbody:usage.service_tierbody:usage.inference_geobody:usage.cache_fieldsbody:extra_fieldsupstream:anthropic-direct-from-body	1782983298771-6ms75jwwkhm13 req_011Cccy5vTQiniZ7xNWkWHoP a14c8151fefe16df-LAX
M-	cf-ray: a14c7cdf68e5d8cc-AMS server: cloudflare	id_format: msg_prefix extra_fields: ["stop_details"] has_service_tier: true has_inference_geo: true model_has_date_suffix: false usage_has_cache_fields: true	hdr:server:cloudflarehdr:cf-raybody:id:msg_prefixbody:usage.service_tierbody:usage.inference_geobody:usage.cache_fieldsbody:extra_fieldsupstream:anthropic-direct-from-body	aa0fabae-1336-47d9-8e4a-a0bc4de8482a a14c7cdf68e5d8cc-AMS

协议指纹评分（机器自动）

总分 / 100 100

基线状态已对照基线

模型匹配 — 10.0 /10 ×14 — —

缓存连续性 — 10.0 /10 ×14 — —

sliding 5m — 10.0 /10 ×13 — —

缓存 TTL 一致 — 10.0 /10 ×15 — —

缓存命中比 — 10.0 /10 ×20 — —

身份(结构) — 10.0 /10 ×7 — —

知识截止 — 10.0 /10 ×5 — —

身份(自由) — 10.0 /10 ×7 — —

原生 msg-ID — 10.0 /10 ×8 — —

Req-ID 透传 — 10.0 /10 ×2 — —

stop_reason — 10.0 /10 ×3 — —

service_tier — 10.0 /10 ×6 — —

inference_geo — 10.0 /10 ×5 — —

SDK 一致 — 10.0 /10 ×2 — —

系统提示纯净 — 10.0 /10 ×8 — —

延迟基线 — 10.0 /10 ×15 — —

流式投递 — 10.0 /10 ×5 — —

综合结论

与基线相似度执行失败，不评分基准（参考）执行失败，不评分执行失败，不评分

雷达图例

共 22 个维度（顺时针，从顶部 12 点起）— 点击展开对照

1 模型匹配 model_match
2 知识截止 cutoff_match
3 SDK 一致 sdk_consistency
4 Thinking 存在 thinking_present
5 流式投递 buffer_dump_match
6 自由身份 identity_free_clean
7 停止原因 stop_reason_present
8 系统提示纯净 system_prompt_clean
9 Service Tier service_tier_present
10 缓存命中比 cache_hit_ratio_match
11 缓存 TTL 一致 cache_ttl_consistency
12 推理地区 inference_geo_present
13 Thinking 体量 thinking_volume_match
14 缓存连续 cache_continuity_intra
15 知识召回 knowledge_recall_match
16 延迟基线 latency_baseline_match
17 原生 msg-ID anthropic_msg_id_format
18 Sliding 缓存 cache_sliding_correctness
19 结构化身份 identity_structured_match
20 信封自报一致 envelope_self_report_match
21 档位思考量 tier_thinking_volume_match
22 Req-ID 透传 anthropic_request_id_passthrough

每根轴长度 = 该维度 0-10 分（越长越接近基线）。蓝色虚线圆 = 满分基准。具体权重见方法论页。

维度雷达 — — —

平均延迟 9361 ms 4544 ms 6111 ms 33356 ms

输出速度 burst 128.3 tok/s 143.3 tok/s -

完成步骤 5/6 成功 · 1 失败 6/6 成功 5/6 成功 · 1 失败 3/6 成功 · 1 失败 · 2 跳过

按官方价目重估

同等内容若直发 Anthropic 的估算 ⓘ

$0.1116 (部分)

$0.1273

$0.1147 (部分)

$0.1217 (部分)

缓存读取占比 ⓘ 84% (部分) 83% 84% (部分) 73% (部分)

揭晓

通道

服务商 SSSAiCode ↗

通道O-Max-L2

官方基准

服务商 SSSAiCode ↗

通道O-Max

服务商 WorldBase.ai ↗

通道M-

返回列表