精读笔记

Problem Setting

这篇论文真正解决的是病理 foundation model 的可靠性评估问题，而不是提出新的 PFM。它关心的是：在常规 benchmark 上看似强的表征，遇到临床部署中常见的染色、扫描、压缩、模糊、裁剪以及跨中心/跨人群分布差异时，是否仍然稳定。

困难点在于 histopathology 的泛化失败通常不是简单 OOD 分类，而是低层成像统计、组织组成、采样策略和标注协议共同造成的隐性 shift。随机 train/test split 很容易保留 WSI、patient、site 或 patch-neighborhood 层面的相似性，从而高估模型能力。以前方法卡在用单一 held-out AUC 或有限外部验证来代表泛化，无法区分“语义鲁棒”与“相似样本记忆/风格匹配”。关键矛盾是：PFM 的高 transferability 可能真实存在，但 clinical reliability 要求它在相似性被破坏后仍然有效。

Motivation

已有 PFM 路线默认更大数据、更大模型、更强 SSL objective 会带来更好的泛化，但病理场景里这个假设不充分。因为很多性能提升可能来自预训练数据覆盖了相似染色/组织/中心分布，而不是模型学到了稳定的形态学因果特征。

作者的核心观察是：鲁棒性需要拆成两层看。一层是 controlled perturbation，即图像层面的 stain、noise、blur、compression 等；另一层是 latent distribution shift，即训练和测试在 feature space 中不再互为近邻。关键缺口是现有 benchmark 往往只测平均性能，不测性能曲线、不测相似性依赖，也不问 scaling 是否已经进入收益递减区间。

Core Idea

核心思想是把 PFM benchmark 从“谁在标准 split 上 AUC 高”改成“谁在扰动连续加大和训练—测试相似性被主动打破后仍然稳定”。PPI 用扰动预算上的性能积分来衡量 robustness，不再依赖某个任意扰动强度；NR-Kfold 用 embedding clustering 构造非冗余 fold，让测试集尽量落在训练表征邻域之外。

这引入的 inductive bias 是评估层面的：真正有价值的病理表征应该对 acquisition-level nuisance 稳定，同时在 feature-space domain separation 下保留类别可分性。和 prior 的本质区别不在模型结构，而在评估假设：传统评估接受数据集给定的随机性，本文主动破坏这种随机性中的冗余结构。因此它更能暴露 PFM 是否依赖 dataset-specific shortcuts，也更适合检验 scaling narrative 是否成立。

Method

第一，冻结所有 encoder，只训练线性分类头。这是在隔离 representation quality：如果 frozen features 在扰动和 NR split 下仍然稳定，说明预训练表征本身有鲁棒性；如果掉点明显，不能靠下游训练 recipe 掩盖。但这也意味着论文测的是表征线性可用性，不是端到端临床系统上限。

第二，用 REET 对不同扰动做 constraint sweep，并用 PPI 汇总曲线。它解决的问题是单点鲁棒性指标太脆弱：同一个模型可能在轻扰动下很好、强扰动下崩溃。PPI 的核心变化是把鲁棒性视为 degradation profile，而不是一个离散测试点。

第三，用 NR-Kfold 做分布偏移评估。它通过按类在 embedding 空间聚类、整簇分配到 fold，减少 train/test 的 feature redundancy。这个机制的必要性在于病理 patch 数据中相似性泄漏非常常见，尤其当 WSI/patient/site 结构没有被严格控制时。它带来的核心变化是把泛化评估从 IID 抽样变成 dissimilarity-aware split。

第四，分析参数量与 PPI/NR-AUC 的关系。这部分不是核心方法，而是用来检验“更大是否更鲁棒”。结论依赖模型族之间的混杂因素，因此更适合作为现象观察，而不是因果证明。

Key Insight / Why It Works

最有价值的 insight 是：PFM 的鲁棒性不是随参数量单调增长，而是更像由数据覆盖、预训练任务、颜色/纹理不变性和表征对齐共同决定。中等规模模型达到甚至超过十亿参数模型，说明 pathology PFM 可能已经进入 capacity 不是主要瓶颈的阶段。继续 scaling 如果没有更好的 domain coverage 和 alignment，只是在放大已有数据分布。

PPI 有效是因为它捕捉了模型对 nuisance transformation 的稳定区间，而不是只看 clean AUC。对于临床成像变化，曲线形状比某个点更有信息：快速下降意味着模型依赖低层统计；缓慢下降才说明有一定 invariance。这里最可能的核心贡献是评估范式，而非 PPI 公式本身；PPI 本质上是 robustness curve 的 AUC，概念并不新，但放在病理 PFM 横向比较中有实际价值。

NR-Kfold 有效是因为它攻击了病理 benchmark 的一个常见软肋：随机划分下样本之间高度相似，模型可能学的是局部数据流形上的插值。通过打破 feature-space proximity，测试更接近跨站点/跨组织分布迁移。这里的能力更像 representation alignment 与 data coverage 的检验，而不是 reasoning 或高级语义理解。

需要直接指出：论文中的 scaling plateau 判断有启发性，但增益来源不清。不同 PFM 的参数量、预训练数据规模、数据来源、SSL objective、patch resolution、tokenization、去重策略都不一致，不能把“中等模型更鲁棒”简单归因于 scale saturation。也不能排除 benchmark overlap 或隐式数据覆盖带来的优势。所谓泛化更可能是“预训练分布覆盖了更多病理风格并学到更稳的局部形态表征”，而不是模型形成了真正跨机构的因果不变特征。

Relation To Prior Work

这篇工作最接近三条路线：病理 foundation model 横向评测、robustness/perturbation benchmark、domain generalization split design。它不是 PFM 建模论文，而是可靠性诊断论文。

相对已有 PFM comparison，它的不同点是把 clean transfer accuracy 降级为不充分证据，并引入 perturbation sweep 与 NR split 来暴露 brittleness。相对传统 robustness benchmark，它的差异是扰动族更贴近 histopathology acquisition，而不是通用 CV 的 ImageNet-C 式 corruption。相对 domain generalization 工作，它的新意在于用 feature-space non-redundancy 构造系统性 harder split，而不是只依赖已有 hospital/site metadata。

看似新的部分中，PPI 本身是已有 robustness AUC 思想的领域化重组；NR-Kfold 也延续了 non-IID / cluster-based validation 的谱系。实质创新在于把两者合并到 pathology PFM 的 scaling question 上，并明确挑战“更大模型自然更可靠”的默认叙事。

Dataset / Evaluation

评估覆盖了多个 patch-level 二分类任务，包含肠癌组织、前列腺、核实例来源的肿瘤检测和淋巴结转移等，任务范围足以检验不同组织/数据源下的表征稳定性。但它仍主要是 patch-level classification，不是 slide-level diagnosis、grading workflow 或临床报告级任务，因此只能支持 representation robustness 的 claim，不能直接支持 clinical deployment readiness。

扰动评估确实支持“PFM 比 CNN 更鲁棒但仍脆弱”的结论，也支持不同 perturbation family 有不同失效模式。NR-Kfold 支持“随机划分高估泛化”的判断，尤其当性能下降和 fold 方差上升同时出现时，这个证据比较有力。

但 benchmark 对 scaling plateau 的支持较弱。因为模型不是在统一数据、统一 objective、统一输入配置下训练的，参数量只是混杂变量之一。另一个 limitation 是 NR-Kfold 是否等价于真实中心/扫描仪/人群 shift 文中未充分说明；如果没有 metadata 对齐验证，它更像 feature-space stress test，而不是真实 external validation。

Limitation

方法成立依赖几个前提。第一，所选扰动族必须覆盖真实临床变异；但真实病理 pipeline 中的 batch effect、切片厚度、组织处理、scanner-specific artifact、rare morphology 和标注策略差异远复杂于这些 parametric perturbations。PPI 只能说明模型对预定义 nuisance 的稳定性，不能外推到所有 OOD。

第二，NR-Kfold 假设 embedding-space dissimilarity 可以近似 domain shift。这个假设有用但不充分：feature distance 可能反映类别难度、组织结构、patch composition，而不一定对应真实 site/domain。更严重的是，如果用某个 PFM 的 embedding 来构造 fold，可能会偏向该模型的表征几何；文中未充分说明这种构造对所有模型的公平性。

第三，frozen linear probe 限制了解释范围。它避免 fine-tuning 混淆，但也低估了可适配模型的部署表现。临床系统通常会使用 slide-level aggregation、domain adaptation、stain normalization、test-time augmentation 或再训练策略，这些都不在评估中。

第四，scaling 结论存在归因问题。所谓大模型没有继续提升，可能主要来自预训练数据质量、去重、domain composition、任务目标或 patch 分辨率差异，而不是参数量本身失效。核心能力可能主要来自数据覆盖和 representation alignment。论文没有足够 ablation 来区分 architecture、data 和 scale。

第五，benchmark leakage 不能完全排除。病理 foundation models 的预训练数据来源广，公开数据集或相似机构数据可能进入预训练语料。若存在 overlap，某些模型在特定数据集上的鲁棒性可能反映 implicit memorization 或 domain familiarity，而不是真正泛化。

Takeaway

• 第一，病理 PFM 的下一阶段不应只追参数量，而应追 domain coverage、数据去冗余、染色/扫描对齐和跨中心 representation invariance。
• 第二，robustness benchmark 应该从单点 clean AUC 转向 degradation curve；曲线形状比平均分更能暴露 shortcut reliance。
• 第三，非冗余划分是病理数据评估中值得迁移的 insight：只要样本之间存在强相似性结构，随机 split 都可能严重高估泛化。
• 第四，这篇论文真正推动的是评价标准，而不是模型能力本身；它提醒后续 PFM 论文必须证明在相似性被破坏后仍然有效，否则高分很可能只是 data coverage 和 benchmark overlap。

一句话总结

这篇论文是病理基础模型从“规模与迁移性能竞赛”转向“扰动鲁棒性与非冗余泛化诊断”的 benchmark 型工作，真正贡献在于揭示当前 PFM 的可靠性瓶颈更可能来自数据覆盖和表征对齐，而不是参数量不足。