docs

常见问题

什么是模型验证? | 模型验证通过与官方指纹进行比对,检查第三方 API 端点是否如其宣称的模型那样工作,同时不泄露受保护的验证资产。

← 返回文档目录

ModelVerify.ai 如何检查模型身份? | 平台对端点运行诊断探针,并将响应与从已知真实端点收集的官方模型指纹进行比对。结论应与延迟、稳定性和漂移信号一起理解。

我的 API Key 安全吗? | 安全。你的 API Key 仅在 Redis 中临时存储,仅用于当前运行,运行完成后立即删除。绝不会写入 PostgreSQL 或文件存储。

可以检查哪些模型? | 任何通过 OpenAI 兼容或 Anthropic 兼容 API 端点可访问、且平台有官方指纹的模型。官方指纹模型列表可在验证表单上查看。

验证有多准确? | 验证准确性取决于指纹覆盖范围、端点稳定性和模型行为。结果应与风险等级、漂移分数和稳定性指标一起参考,而非简单的是非判断。

基准分数代表什么? | 基准分数反映模型在 baseline_150 测试集上的能力(0.00-1.00)。分数越高表示在推理、数学、代码和问答方面的表现越好。分数分为强(≥0.85)、中(≥0.70)、弱(<0.70)三个等级。

可以信任第三方 API 提供商吗? | 模型验证提供了端点行为是否符合宣称的证据,但不是绝对保证。应将验证结果与提供商声誉、延迟和您自己的测试结合起来判断。

如何解读不匹配的结论? | 不匹配结论表示端点行为与官方指纹存在显著差异。请同时查看风险等级、漂移分数和稳定性指标。单次不匹配不一定意味着提供商有欺诈行为——可能表示模型版本差异或配置问题。