精读笔记

Problem Setting

论文标题：Neural Architectures as Functional Priors in Physics-Informed Control Problems（arXiv preprint / 2026-06-19）。这篇论文实际解决的是 physics-informed control 中的“解选择”问题：当动力学、边界条件、loss 和训练设置都固定时，不同神经架构是否会把优化推向不同的 admissible control。真正困难点不是 RLC 或 Duffing 本身，而是控制问题通常存在多个可行控制，PINN loss 只是软约束，架构的隐式偏置会参与决定最终控制律。以前 PINN/KAN 工作多问“谁近似得更准”，这里问“谁会选择什么样的控制”。关键矛盾是：物理方程要求可行性，优化目标要求低能量/平滑，但神经架构又在无显式建模的情况下引入额外 functional prior。

Motivation

已有路线不够的地方在于，它们默认 neural architecture 是数值求解器的实现细节，最多影响收敛和误差；但在控制问题里，架构可能改变实际控制策略，这比误差差异更重要。作者的核心观察是，MLP 的 spectral bias 和 Fourier-based 表示的高频表达能力，会在 PINN 控制中转化为不同的控制信号族。关键缺口是缺少一个足够简单、可解释、可控的实验设置来隔离这种架构依赖效应。论文选择低维 ODE 不是为了 benchmark 难度，而是为了把复杂系统、数据覆盖和任务规模这些噪声尽量拿掉。

Core Idea

核心思想是把神经架构当成 implicit functional prior，而不是中性的 universal approximator。给定同一个 ODE control problem，PINN 训练并不是在抽象函数空间里均匀搜索可行控制，而是在某个架构参数化诱导的函数族和优化路径中搜索；因此不同架构会偏向不同频谱、平滑性和能量分布的控制。与 prior 的本质区别在于，论文不强调 KAN/Fourier 是否更准，而强调它们改变了 admissible solution selection。分离 state network 与 control network 后，信息流也被重新组织：状态表示负责拟合物理轨迹，控制表示负责生成作用信号，两者可以带有不同 inductive bias。这使得“Fourier 表示动力学振荡、MLP 生成平滑控制”的 specialization 成为可观察对象。

Method

方法的必要机制有三层。第一，经典最优控制基线用于确认问题本身可控，并提供一个非神经参考；在线性 RLC 中有 Gramian 最小能量解，Duffing 中用离散控制优化作为数值基线。第二，PINN loss 同时约束 ODE residual、初末状态、控制能量和平滑性；这保证所有解都在相同物理与正则框架下比较，架构差异不会被简单解释为任务没解好。第三，state/control 分离架构是核心实验设计：MLP/MLP、MLP/Fourier、Fourier/MLP、Fourier/Fourier 的组合让作者能观察偏置主要来自状态表示还是控制生成。具体超参数、epoch 数和 collocation 数更多是 engineering，不是论文的机制贡献。

Key Insight / Why It Works

这篇最重要的 insight 是：在 physics-informed control 中，PINN loss 往往不足以唯一指定控制律；此时架构的频谱偏置会变成实际的控制选择偏置。MLP 的低频优先和 tanh 平滑性使其更容易落到平滑、低频、能量较规则的控制；Fourier feature/KAN-like 架构把高频基函数显式放进表示空间，因此优化不需要“艰难学习”振荡成分，更容易保留高频控制结构。真正有效的部分是 representation-induced bias 与 soft constrained optimization 的耦合，而不是 KAN 名义本身。论文中的 functional specialization 有一定可信度：振荡动力学由 Fourier-like state 表示更自然，平滑控制由 MLP-like control 表示更自然。但文中未充分说明这种 specialization 是否在统计意义上稳定，也未排除参数化规模、初始化、优化路径、Fourier mode 数量和正则权重共同造成的结果。增益来源不清；这里的“prior”更多是经验性 functional bias，而不是已被严格刻画的 variational prior。

Relation To Prior Work

它最接近三条线：PINN 控制、KAN/Fourier-based PINN benchmark、spectral bias / implicit regularization 理论。看似新的是把 MLP 与 FourierKAN 放进控制任务比较，但这本身是已有思想重组；实质新增的信息是把架构差异从 approximation metric 推进到 control law selection 和 phase-space behavior。与标准 PINN 工作不同，它不把物理约束满足度作为唯一目标；与 KAN benchmark 不同，它不主张某架构普遍更准；与 spectral bias 理论不同，它把频率偏置连接到控制信号的能量、平滑性和相空间轨迹。技术谱系上，它属于 scientific ML 中的 implicit bias analysis，而不是新的 optimal control algorithm。

Dataset / Evaluation

评估覆盖两个低维 ODE 系统：线性 RLC 和非线性 Duffing。覆盖范围窄，但选择合理，因为目标是隔离机制而非证明工程性能。没有真实世界系统、没有闭环部署、没有高维/PDE/随机动力学，也没有多任务泛化。实验确实支持一个弱 claim：在这些设置中，架构会系统性影响 learned control 的频谱和轨迹形态。它不充分支持强 claim：该现象普遍存在、可预测、可用于复杂控制系统设计。最大评估问题是缺少多 seed、超参扫描、正则强度消融、Fourier mode 数量消融和参数量匹配分析，因此 benchmark 更像 phenomenon demonstration，而不是严谨机制识别。

Limitation

方法成立依赖几个隐含前提：控制问题存在多个近似可行解；PINN loss 是软约束而非严格求解最优控制；正则项足够弱，允许架构偏置显现；系统低维且训练可充分收敛。scalability 上限明显：在高维 PDE 控制或复杂约束下，架构偏置可能被优化失败、采样误差、loss balancing 和 stiffness 淹没。泛化也未被真正验证，因为只在两个小系统上展示趋势。所谓 functional prior 目前没有可计算的先验形式，也没有理论保证能选择更优控制；它可能只是把控制设计问题转移为架构和频谱基选择问题。文中未充分说明 FourierKAN 的优势/差异是否来自 Fourier features 本身，而非 KAN-like 架构。

Takeaway

• 第一，控制任务里 architecture choice 应被视为 modeling decision，而不是实现细节；它会影响最终物理可行解的类型。
• 第二，评估 physics-informed control 不能只看 residual 和 terminal error，还要看控制频谱、能量、平滑性和相空间路径，否则会错过实质不同的策略。
• 第三，未来更有价值的方向不是继续比较 MLP vs KAN 谁误差低，而是把频谱先验、结构先验和控制目标显式耦合，设计可解释的 architecture-control co-design。
• 第四，这篇论文最可迁移的 insight 是：在多解物理约束问题中，神经表示的隐式偏置会成为解选择机制。

一句话总结

这篇论文把 PINN/KAN 架构比较从“数值逼近性能”推进到“物理控制解选择偏置”，贡献是用简单 ODE 控制系统展示 neural architecture 可作为 implicit functional prior 影响最终 admissible control。