关于明镜Test:我们怎样检验一家 AI API 中转站?
明镜Test(mjaitest.com) 是一个用真实请求证据说话的 AI API 中转站验真与评估平台。我们把单次深度协议探针、24 小时按分组独立监测、固定题社区众测(糖果推理与鹈鹕骑行)以及用户口碑与退款政策名录四类证据分开采集、交叉对照,不接受任何赞助排序。
一、三大协议的分级验证原理
不同厂商的 API 协议暴露的技术证据强度不同,明镜Test 严格按证据等级如实标注,绝不夸大结论:
- Claude(加密级 + 协议级验证):核心核查 Anthropic Messages 协议结构、
thinking signature服务端加密思维签名(约 500~2000 字符)存在性与多轮回传校验、tool_useID 前缀、PDF 多模态识别以及流式一致性。 - OpenAI(行为与协议指纹验证):核查 Chat Completions 响应顶层标识、Function Calling 参数 JSON Schema 合规性、流式与非流式输出一致性,并专门扫描
usage计费对象中是否夹带claude_*、thoughts_token_count或usage_source等跨协议套壳残留。 - Gemini(OpenAI 兼容协议验证):针对第三方中转站普遍暴露的
/v1/chat/completions兼容路径,适配默认开启思考的模型,逐项验证工具调用、结构化输出与用量字段规范。
二、API Key 隐私与安全边界
开发者最关心“把 Key 填进检测工具安不安全”,明镜Test 在架构层做了严格隔离:
- 单次检测与众测零落盘:你提交的 API Key 仅在当次服务端请求协程内存中使用,用于向你指定的 Base URL 发送测试探针;公开报告 JSON 与分享长图中仅保留脱敏掩码(如
sk-abcd••••••ef),完整密钥不写盘、不入日志。 - 定时分组监测仅驻留内存:在「站点监测」中开启 15 分钟或 60 分钟定时探测时,分组 Key 仅保存在当前运行进程内存中;一旦点击暂停或服务器重启,内存密钥立即清空。
- 最佳实践建议:即便如此,我们仍强烈建议你始终在目标中转站后台创建专用的临时限额测试 Key进行检测,测完即可在后台随手销毁。
三、公开排行与收录规则(杜绝刷榜与噪声)
为了避免单次偶然满分霸榜或恶意刷分,/leaderboard 采用贝叶斯加权评分(中性先验 50 分,先验权重 5),只有积累多次公开报告的站点才会向真实中位数收敛并进入正式排名;用户主观星级评价与机器探针得分严格分栏展示,互不掺杂。