本站为 ISSP「证据实验室」规划原型文案落地页:示意 / 规划 / 默认阈值 / 结构示例均已标注;不展示虚构实验结果。

OUTLIVE

Credibility System

把评审会问的问题,做成默认产出。

可信度不是海报上的形容词,而是文件、阈值与隔离规则。本页展开七步闭环、COU 模板要点、默认验收阈值、审计字段与报告必含项。

§ 1

七步闭环(可切换详解)

与首页一致的工作流,此处作为评审入口的完整展开。

01 · COU

用途声明

适用范围、预测目标、不适用范围、假设、风险与验证要求写入 cou.yaml。

结构示例cou.yaml

结构示例

cou.yaml

scope: 科研演示 / 教学 / 早期机制验证
targets: [T_clear, AUC, TGI@dayX]
out_of_scope: [个体化临床预测, 用药建议]
validation: { L1: required, L2: encouraged }

§ 2

COU 必填块

COU(Context of Use)是一切验证强度的标尺。没有 COU,覆盖率数字没有意义。

  • 用途与读者
  • 预测目标(端点列表)
  • 不适用范围(含非医疗 / 非个体预测)
  • 关键假设与机制缺口
  • 验证要求与可调整阈值引用

§ 3

观测模型要点

对齐实验列名,而不是模型内部自定义量。

结构示例

measurement_model.yaml

observable: inflammation_proxy
g: "integrate(field.IFN over ROI) / volume"
units: "arbitrary_units_declared"
lod: null
epsilon_model: "declared_noise_model"

§ 4

默认验收阈值(可在 COU 调整)

默认验收阈值
指标默认目标说明
UQ 覆盖率(训练/公开点)≥ 70%可配置
验证点 90% 区间覆盖率≥ 60%与 sharpness 同时看
sharpness 相对宽度≤ 2.0或报告 WIS/CRPS
Verification-lite 端点变化≤ 20%dt/2 与网格加倍
可校准参数数量≤ 10 / 场景强制分层披露

设计目标,不是本站实测通过结论。

§ 5

审计字段(摘要)

结构示例
字段用途
run_id / seed复现定位
param_set_id / hashes参数与数据完整性
model_version / scenario_version / commit代码与场景对齐
train_task_id / validate_task_ids隔离证明
replay_ref报告跳转回放

§ 6

报告必含项

报告至少包含:COU 摘要、观测模型版本、校准设置、UQ(coverage+sharpness)、L1/L2 定义、V-lite 摘要、审计链与 replay_ref。

§ 7

校准 / 验证隔离

验证条件不得进入校准目标函数;L2 条件不得用于调参。数字化误差带必须进入审计,而不是事后口头说明。