4. 验证目标与假设定义

多中心医学影像模型验证最容易失败的地方,不是统计方法选错,而是目标没有在验证开始前被定义清楚。一个模型在单中心回顾性数据上 AUC 达到 0.92,并不自动意味着它在三家医院的前瞻性数据上“可用”。验证目标要回答的是:这个模型要替代或辅助哪个临床决策?在什么人群、什么场景、什么阈值下,达到什么水平的性能才算成功?这些问题必须转化为可计算、可检验的统计假设,否则后续的样本量、终点和结论都会失去依据。

从临床问题到可检验假设

临床问题通常是模糊的,例如“这个肺结节模型能不能帮放射科医生减少漏诊”。转化为验证目标时,需要明确四个要素:目标人群(如 8–30 mm 实性肺结节、低剂量 CT 筛查人群)、目标场景(如作为初筛分诊工具,而非独立诊断)、对照标准(如资深放射科医生阅片或现有临床路径)、成功标准(如敏感度不低于 90%,且非劣于医生组)。只有这四要素确定后,才能写出零假设与备择假设。

以“模型辅助分诊不劣于医生常规阅片”为例,设模型辅助组的敏感度为 p₁,医生常规组为 p₂,非劣效界值为 Δ=5%。则假设为:H₀: p₁ − p₂ ≤ −Δ(模型劣于医生超过 5%),H₁: p₁ − p₂ > −Δ。若采用优效设计,则 H₀: p₁ − p₂ ≤ 0,H₁: p₁ − p₂ > 0。注意:非劣效与优效的零假设方向不同,样本量差异可能很大,必须在方案中预先锁定。

主要终点与次要终点

主要终点是决定验证成败的唯一指标,通常只设一个,且必须与临床获益直接相关。影像模型验证中常见的主要终点包括:敏感度(筛查场景)、特异度(避免过度召回)、AUC(整体判别能力)、阳性预测值(高患病率场景)。次要终点用于支持性分析,如阴性预测值、F1 分数、校准斜率、决策曲线净收益、阅片时间缩短等。主要终点必须在多中心数据上按预设的合并规则计算,不能因为某个中心结果好就单独报告。

常见错误:把多个指标都写成“主要终点”,导致多重比较膨胀,假阳性风险上升。若确实需要多个主要终点,应预先分配 α 或采用分层检验策略。

非劣效、优效与等效设计的选择

三种设计对应不同的临床意图。非劣效设计适用于“新方法不比现有方法差太多,但更便宜、更快、更易推广”的场景,例如 AI 分诊替代部分医生初筛。优效设计适用于“新方法确实更好”的场景,例如多模态融合模型优于单模态。等效设计则用于验证两种方法可互换,影像领域较少使用。选择时还要考虑界值 Δ 的临床合理性:Δ 不能由统计功效反推,而应由临床专家判断“差多少仍然可以接受”。

样本量估算的实际做法

样本量取决于主要终点类型、效应量、显著性水平 α、把握度 1−β、脱落率以及多中心设计效应。以两个独立比例的优效检验为例,双侧 α=0.05,把握度 80%,预期模型组敏感度 0.92,对照组 0.85,则每组约需 260 例阳性病例。若阳性率约 15%,则总筛查人数约 260/0.15×2≈3467 例。若为非劣效设计,Δ=5%,同样参数下每组约需 420 例阳性病例,总人数约 5600 例。可见界值越宽松,样本量越小,但临床说服力也越弱。

多中心验证还需考虑中心间异质性。若各中心患病率、设备型号、扫描协议差异大,应使用分层随机或按中心分层分析,并在样本量中乘以设计效应(通常 1.1–1.3)。此外,影像数据存在“同一患者多病灶”或“同一病灶多时点”的聚类结构,样本量应按患者数而非病灶数计算,或使用聚类调整。

验证目标与假设定义:从临床问题到样本量 临床问题转化 目标人群 8–30 mm 实性肺结节 低剂量 CT 筛查人群 目标场景 初筛分诊,非独立诊断 对照标准 资深放射科医生阅片 假设与设计选择 非劣效设计 H₀: p₁ − p₂ ≤ −Δ H₁: p₁ − p₂ > −Δ Δ = 5%(临床可接受界值) 优效设计 H₀: p₁ − p₂ ≤ 0 H₁: p₁ − p₂ > 0 终点定义 主要终点(唯一) 敏感度 ≥ 90% 或 AUC 非劣于医生 次要终点 特异度、NPV、校准斜率 决策曲线净收益 阅片时间缩短 样本量估算:参数关系与多中心调整 输入参数 α = 0.05(双侧) 把握度 = 80% p₁ = 0.92(模型) p₂ = 0.85(对照) Δ = 5%(非劣效) 计算过程 优效:n ≈ 260 例/组 非劣效:n ≈ 420 例/组 阳性率 ≈ 15% 总筛查 ≈ 3467–5600 例 设计效应 ×1.1–1.3 多中心调整 中心间异质性 分层随机/分析 聚类结构校正 按患者数计算 脱落率 10–15% 最终样本量 总入组 ≈ 4000–6500 例 阳性病例 ≥ 420 例 中心数 ≥ 3 家 每中心 ≥ 100 例 注:以上数值为教学示例,实际样本量需根据预期效应量、脱落率和中心间变异重新计算

可执行的验证目标定义清单

为避免目标漂移,建议在方案阶段填写一份简表,锁定以下字段:

字段示例填写
临床决策肺结节是否进入 3 个月随访
目标人群50–75 岁、LDCT 筛查、8–30 mm 实性结节
对照两名资深放射科医生独立阅片
主要终点敏感度,非劣效界值 Δ=5%
次要终点特异度、AUC、校准斜率、阅片时间
α 与把握度双侧 0.05,80%
预期效应量模型 0.92 vs 医生 0.85
样本量阳性病例 ≥ 420 例,总入组 ≥ 5600 例
中心数≥ 3 家,每中心 ≥ 100 例阳性
分析集全分析集 + 符合方案集

最后强调:验证目标与假设必须在数据锁定前完成,任何事后修改都会破坏 I 类错误控制。多中心验证的统计方案应像临床试验一样预先注册,包括主要终点、非劣效界值、样本量、中心间异质性处理方法和缺失数据处理规则。只有目标清晰、假设可检验、样本量有据,多中心验证的结论才具备可解释性和可推广性。