检测结果
模型:claude-fable-5 · 模式 full ·
中转站 https://novaapi.ai/
· 密钥来源 第三方中转
0%
未达标
由 10086AI 中转服务质量评估平台生成
-
身份一致性 异常检测器运行异常: HTTP 400: {"error":{"type":"\u003cnil\u003e","message":"`temperature` is deprecated for this model. (request id: 202608170856086700514328268d9d602qbvTBJ)"},"type":"error"}
-
行为签名验证 异常检测器运行异常: all 7 behavioral probes failed upstream: HTTP 400: {"error":{"type":"\u003cnil\u003e","message":"`temperature` is deprecated for this model. (request id: 202608170856086711572888268d9d6iqwFoAjn)"},"type":"error"}命中数 0/0✗ markdown_bold_style✗ list_structure_preference✗ refusal_helpfulness_tone✗ em_dash_usage✗ nuanced_refusal✗ direct_concise_style✗ code_style_preference
-
思维签名验证 跳过本次检测未运行此项目thinking 块 无thinking 字数 0 字签名 无签名长度 0B签名前缀 -stop_reason -
-
模型一致性 异常检测器运行异常: HTTP 400: {"error":{"type":"\u003cnil\u003e","message":"`temperature` is deprecated for this model. (request id: 202608170856086541245658268d9d6d6TCeMQr)"},"type":"error"}
-
知识准确度 异常检测器运行异常: all 5 knowledge probes failed upstream: HTTP 400: {"error":{"type":"\u003cnil\u003e","message":"`temperature` is deprecated for this model. (request id: 202608170856090959964388268d9d6SBdTEdRe)"},"type":"error"}✗ anthropic_ceo✗ anthropic_president✗ constitutional_ai✗ claude_first_release✗ anthropic_hq
-
PDF 文档识别 未通过无法从 PDF 中提取内容,可能不支持多模态输入。标准: Claude 应能处理 PDF base64 文档
-
结构化输出 异常检测器运行异常: HTTP 400: {"error":{"type":"\u003cnil\u003e","message":"`temperature` is deprecated for this model. (request id: 202608170856095045256098268d9d64w0Jdm5k)"},"type":"error"}
-
协议规范性 通过SSE 事件序列和响应字段均符合Anthropic 官方规范。标准: 事件顺序、类型字段完全合规
-
响应完整性 异常检测器运行异常: HTTP 400: {"error":{"type":"\u003cnil\u003e","message":"`temperature` is deprecated for this model. (request id: 202608170856095281707688268d9d6gScqK6nE)"},"type":"error"}流式/非流式相似度 0.0%字符/Token 比 0.00input_tokens 非流式=- 流式=- 差=-
-
Token 用量 异常检测器运行异常: HTTP 400: {"error":{"type":"\u003cnil\u003e","message":"`temperature` is deprecated for this model. (request id: 202608170856099123469948268d9d6vNK8gN0b)"},"type":"error"}
-
消息标识规范 通过消息 ID 以 msg_ 开头,tool ID 以 toolu_ 开头,格式规范。标准: 必须使用官方前缀格式
-
长上下文真实性 未通过长上下文测试失败,中转站可能截断了上下文或路由到小窗口模型。标准: 32k/100k/200k 各档位均需通过
-
供应链安全 异常检测器运行异常: all 3 probes failed upstream: HTTP 400: {"error":{"type":"\u003cnil\u003e","message":"`temperature` is deprecated for this model. (request id: 202608170856103308045428268d9d6mbTm4XOX)"},"type":"error"}✗ pip 安全✗ npm 安全✗ pip 安全
-
数据外泄检测 异常检测器运行异常: HTTP 400: {"error":{"type":"\u003cnil\u003e","message":"`temperature` is deprecated for this model. (request id: 202608170856110372899888268d9d6dMm2A6mn)"},"type":"error"}
-
身份泄露检测 通过未检测到上游系统提示注入标记。标准: 不应泄露 ccmax/cursor/claude-code 等订阅代理标记中转标记 未检出拒绝次数 0/2响应 1 [error: HTTP 400: {"error":{"type":"\u003cnil\u003e","message":"`temperature` is deprecated for this响应 2 [error: HTTP 400: {"error":{"type":"\u003cnil\u003e","message":"`temperature` is deprecated for this
-
注入防护 异常检测器运行异常: all injection attempts failed
-
语言指纹 未通过语言指纹不匹配 Claude 特征。标准: 韩语数字、日语时间、法语虚拟语气等探针需符合 Claude 基线探针数 0/7korean_numbers 探测失败 · HTTP 400 `temperature` is deprecated for this model.japanese_time 探测失败 · HTTP 400 `temperature` is deprecated for this model.french_subjunctive 探测失败 · HTTP 400 `temperature` is deprecated for this model.chinese_expression 探测失败 · HTTP 400 `temperature` is deprecated for this model.russian_case 探测失败 · HTTP 400 `temperature` is deprecated for this model.
-
计算指纹 未通过计算指纹仅 0/5 项匹配。标准: Claude 有特定的数学计算和分词器行为模式float_addition 探测失败 · HTTP 400 `temperature` is deprecated for this model.pi_digits 探测失败 · HTTP 400 `temperature` is deprecated for this model.large_exponent 探测失败 · HTTP 400 `temperature` is deprecated for this model.strawberry_count 探测失败 · HTTP 400 `temperature` is deprecated for this model.unicode_zwj 探测失败 · HTTP 400 `temperature` is deprecated for this model.
-
拒绝梯度 异常检测器运行异常: all refusal probes failed
-
Token 自比对 异常检测器运行异常: insufficient successful rounds
-
混源检测 异常检测器运行异常: insufficient successful probes
-
性能稳定性 通过延迟变异系数 CV=0.263,性能稳定。标准: CV < 0.5 (延迟波动在合理范围)观测数 11平均延迟 6352ms标准差 1672msCV 变异系数 0.263最大/最小比 2.79x
-
知识分层 未通过知识分层不匹配声称模型能力。标准: Opus 级应能回答 T4-T5 难题,Sonnet 在 T3-T4总题数 0domain 0/0 正确 (得分 0.0)advanced 0/0 正确 (得分 0.0)deep 0/0 正确 (得分 0.0)
-
随机序列指纹 异常检测器运行异常: insufficient valid sequences (0/10)
这份结果怎么理解?
Token 用量存在风险
usage 字段缺失或统计不自洽,建议不要直接依赖该中转站返回的 token 数做计费核算。
检测无效
检测无效: 大部分检测器(14/23)因上游错误失败。 典型错误: all 5 knowledge probes failed upstream: HTTP 400: {"error":{"type":"\u003cnil\u003e","message":"`temperature` is depreca… 请确认该模型在此中转站真正可用。
注水/掺水风险分析
模型字段不匹配
中风险
响应中的 model 字段与请求不一致,可能是中转站修改了模型路由。
请求: , 响应:
身份验证证据
| 指标 | 结果 | 详情 |
|---|---|---|
| 响应模型字段 | 未返回 | |
| 知识准确度 | 0/0 正确 |
各检测器详细指标
知识准确度
0分
0.4s
✗ anthropic_ceo
✗ anthropic_president
✗ constitutional_ai
✗ claude_first_release
✗ anthropic_hq
随机序列指纹
0分
66.2s
状态
-
收集序列数
0
响应完整性
0分
0.5s
流式/非流式相似度
0.0%
字符/Token 比
0.00
input_tokens
非流式=- 流式=- 差=-
结构化输出
0分
0.4s
JSON 解析
失败
schema 匹配
否
Token 用量
0分
0.4s
短 prompt tokens
in=- out=-
长 prompt tokens
in=- out=-
input_token 增量
- (期望 -)
stream chunks
-
count_tokens
- (-)
Token自比对
0分
2.3s
轮数
0
input_tokens
[]
input CV
0.0000
身份一致性
0分
0.7s
检测到品牌
[]
知识分层
0分
2.8s
总题数
0
domain
0/0 正确 (得分 0.0)
advanced
0/0 正确 (得分 0.0)
deep
0/0 正确 (得分 0.0)
混源检测
0分
2.2s
探测数
0
自家信号
0
竞品信号
0
未知信号
0
混源检出
否
模型一致性
0分
0.7s
请求模型
-
响应模型
-
模型匹配
否
output_tokens 序列
[]
变异系数 CV
0.0000
供应链安全
0分
1.3s
✗ pip
安全
✗ npm
安全
✗ pip
安全
数据外泄防护
0分
0.5s
金丝雀数据
安全
外泄 URL 模式
未检测到
语言指纹
0分
3.3s
探针数
0/7
korean_numbers
探测失败 · HTTP 400 `temperature` is deprecated for this model.
japanese_time
探测失败 · HTTP 400 `temperature` is deprecated for this model.
french_subjunctive
探测失败 · HTTP 400 `temperature` is deprecated for this model.
chinese_expression
探测失败 · HTTP 400 `temperature` is deprecated for this model.
russian_case
探测失败 · HTTP 400 `temperature` is deprecated for this model.
计算指纹
0分
2.2s
float_addition
探测失败 · HTTP 400 `temperature` is deprecated for this model.
pi_digits
探测失败 · HTTP 400 `temperature` is deprecated for this model.
large_exponent
探测失败 · HTTP 400 `temperature` is deprecated for this model.
strawberry_count
探测失败 · HTTP 400 `temperature` is deprecated for this model.
unicode_zwj
探测失败 · HTTP 400 `temperature` is deprecated for this model.
身份泄露检测
70分
0.9s
中转标记
未检出
拒绝次数
0/2
响应 1
[error: HTTP 400: {"error":{"type":"\u003cnil\u003e","message":"`temperature` is deprecated for this
响应 2
[error: HTTP 400: {"error":{"type":"\u003cnil\u003e","message":"`temperature` is deprecated for this
行为签名验证
0分
3.3s
命中数
0/0
✗ markdown_bold_style
✗ list_structure_preference
✗ refusal_helpfulness_tone
✗ em_dash_usage
✗ nuanced_refusal
✗ direct_concise_style
✗ code_style_preference
拒绝梯度
0分
4.0s
匹配级别
0/0
拒绝边界
未触发
性能稳定性
100分
观测数
11
平均延迟
6352ms
标准差
1672ms
CV 变异系数
0.263
最大/最小比
2.79x
首 TOKEN
3,601ms
总耗时
74,915ms
吞吐 (T/S)
24.7
输入 TOKENS
668
输出 TOKENS
1,849
12 项检测各自检查什么?
- 身份一致性 (Identity)
- 询问模型自报身份,响应必须包含 "Claude" 与 "Anthropic",且不能自称是其他品牌(如 Kiro、AWS Q 等)。
- 行为签名验证 (Behavioral)
- 3 道行为指纹题(markdown 风格、列表偏好、拒绝语气),正版 Claude 有特征鲜明的回答模式。
- 思维签名验证 (Thinking) ⭐
- 核心检测:Claude thinking 块返回的加密
signature字节,任何中转站都无法伪造。 - 模型一致性 (Consistency)
- 验证
response.model与请求一致,且多次调用输出长度稳定(变异系数 CV)。 - 知识准确度 (Knowledge)
- 5 道关于 Anthropic 公司的常识题(CEO、HQ、Constitutional AI 等),错答多则说明背后不是真 Claude。
- PDF 文档识别
- 提交一份 base64 PDF + magic 字符串,检查模型能否正确提取——剥离 multimodal 的中转站会失败。
- 结构化输出 (Tool Use)
- 真实 tool_use 调用,验证
toolu_ID 前缀、JSON schema 匹配、stop_reason 等 5 项子项。 - 协议规范性 (Protocol)
- SSE 事件序列、content block 类型必须符合 Anthropic 官方规范(被动检测,不发额外请求)。
- 响应完整性 (Integrity)
- 同一 prompt 流式与非流式调用必须返回一致的文本、
input_tokens、stop_reason。 - Token 用量
- 检查 Claude Messages 的
usage.input_tokens/output_tokens是否存在、长短 prompt 增量是否合理、短输出是否没有超报,并用 stream 与count_tokens做交叉验证。 - 消息标识规范 (Message ID)
- 消息
id必须以msg_开头、tool 块以toolu_开头。UUID 或硬编码tool_1是典型造假特征。 - 长上下文真实性 (Long Context)
- 需在提交时勾选启用 — 用 needle-in-haystack 在 32k → 100k → 200k tokens 三档探针,验证中转站是否真兑现宣传的 context window(识别截断 / 路由到小窗口模型)。Anthropic 路径用官方
count_tokens端点精准预算 token,极限档可按模型完整上限自适应探到 950k+(Sonnet 4.6 / Opus 4.6/4.7 都是 1M)。