精读笔记

Problem Setting

CineMobile: On-Device Image-to-Video Diffusion for Cinematic Camera Motion Generation（arXiv preprint / 2026）。这篇论文表面上是 mobile I2V，实际问题更窄：如何把 Wan 系 DiT I2V 的 cinematic camera motion 能力压缩到手机端，同时保住 identity、背景一致性和相机运动连续性。真正困难不在生成“会动的视频”，而在少步数、小模型、低显存条件下不破坏视频 DiT 已经学到的时空表征。以前路线卡在两端：大模型 DiT 质量好但多步推理不可部署；mobile video 方法多依赖 U-Net、VAE/temporal trick 或较弱 backbone，对 DiT 的结构压缩和 few-step 视频 distillation 缺少系统方案。关键矛盾是质量所需的 redundancy 与部署所需的 compression 之间冲突，尤其视频任务中任何表征扰动都会放大成 temporal drift、identity shift 或 camera trajectory jitter。

Motivation

作者没有试图解决开放域 I2V 的全部语义和运动生成问题，而是选择 cinematic effects 作为可压缩目标空间。这个选择很关键：bullet time、dolly zoom、slow motion 的运动模式相对结构化，评价维度也更接近 foreground-background consistency、camera path smoothness、temporal interpolation，而不是任意文本语义组合。核心缺口是：已有 acceleration 可以减少步骤或压缩模型，但 aggressive compression 往往破坏 I2V conditioning；已有 mobile generation 可以跑在端上，但对 DiT-style video backbone 和 cinematic camera control 的能力保留不足。作者的观察是，如果把任务先限制在 teacher 已能稳定生成、且具有明确 motion prior 的分布上，压缩和蒸馏就不再需要保持完整通用生成能力，而只需保持目标 motion manifold 附近的局部生成能力。

Core Idea

核心思想不是“剪枝 + 蒸馏 + 量化”的简单串联，而是把大 DiT 的能力沿两个维度重新组织：结构上保持 hidden feature space 不变，只减少层深；时间上把多步 teacher 的 denoising trajectory 压缩成 4-step student；任务上用 effect-specific LoRA 和数据把分布收窄到少数 cinematic motion。这样做的隐含 inductive bias 是：视频 DiT 的宽度/通道空间承载了 identity、appearance 和时空对齐的关键坐标系，深度里存在可替代的冗余变换；因此 depth pruning 比 width pruning 更不容易造成表示错位。与 prior 的本质区别在于，它不是直接设计一个 mobile-native video model，而是把已有强 teacher 的局部分布能力迁移到一个保持表征兼容的小 student 上。它的 scalability 来自 reuse teacher distribution 和 LoRA-defined motion priors，而不是从头学习一个通用端侧视频生成器。

Method

方法层面只需要抓住三个机制。第一，structured depth pruning：它解决的是 DiT block 计算冗余，而不是重新设计 backbone；保持 hidden dimension 不变的意义是维持 teacher/student feature geometry 对齐，降低 identity 和细节崩坏风险。第二，SFT warm-up + adversarial distribution matching：warm-up 先把 pruned model 拉回可用的视频生成区域，避免少步 distillation 在坏初始化上 collapse；随后 DMD/AdvDMD 用 teacher real score 与 online fake score 的差异压缩生成分布，GRPO/判别器奖励更像在补 perceptual realism。第三，hybrid PTQ：它主要解决手机端 memory footprint，尤其 FFN 参数占比高，所以对 FFN 做低比特权重量化是工程上最高收益的位置；但它不是质量机制，只是让模型能装进设备。

Key Insight / Why It Works

最可能的核心贡献是“保持表征宽度的深度裁剪 + 任务分布收窄后的 few-step distillation”。视频 DiT 对 width pruning 敏感并不意外：改变 hidden dimension 等于重写 attention/FFN 的内部坐标系，容易破坏 pretrained temporal representation；而 depth pruning 只是在已有坐标系里跳过部分变换，更适合用 surrogate block 做局部对齐。这本质上是 representation alignment，而不是单纯 compression。4-step 能成立，很大程度来自 teacher-defined local manifold：输入是 portrait / motion images，输出是少数 cinematic effects，teacher LoRA 已把 motion pattern 编码进监督信号。也就是说 student 学到的可能不是通用相机规划，而是对特定 motion distribution 的快速近似。GRPO 的作用从表中看更像 perceptual polish，主要抬 aesthetic / imaging quality，对 consistency 和 motion 没有决定性改变；它可能是辅助项，不是核心机制。量化带来的质量保持也主要依赖前面 student 已足够稳，且 activation 仍保留较高精度。整体增益最大来源显然是 step reduction，pruning 只是中等加速，quantization 主要是内存工程。若要直接判断：这篇真正有效的原因是任务约束足够强、teacher 足够强、student 表征空间尽量不被破坏，而不是提出了新的视频生成原理。

Relation To Prior Work

它最接近三条线：PPCL/DiT pruning、DMD/AdvDMD few-step diffusion distillation、mobile video generation。看似新颖的部分多数是已有思想在视频 DiT + cinematic I2V 场景下的重组：连续层检测与替换来自 PPCL，few-step distribution matching 来自 DMD 系，adversarial/reward refinement 来自 low-step diffusion 加速，hybrid quantization 也偏部署工程。实质新增信息在于：对视频 DiT 来说，保宽度的 depth pruning 比 width pruning 更适合 preserve identity/detail；以及 cinematic camera effects 是一个适合端侧 I2V 的中间任务形态，比开放域视频生成更可压缩。它属于“teacher-centric compressed generator”谱系，不是 mobile-native architecture innovation。与 SnapGen-V、Taming DiT 等相比，它的差异在于更强调 effect-specific camera motion 和 Wan-style DiT 的端侧闭环部署，而不是提出通用高效视频 backbone。

Dataset / Evaluation

评估覆盖三个 cinematic effects，且包含真机 latency / memory，这一点比只报 GPU FLOPs 更有说服力。任务覆盖仍然很窄：portrait-centric bullet time / dolly zoom，加上 motion-oriented slow motion；这能验证特定应用场景，不验证开放域 I2V 泛化。VBench 指标能反映 subject/background consistency、motion smoothness 和画质，但对相机几何、视角合理性、dolly zoom 的 foreground-background 透视关系并不充分；作者也承认 camera-control automatic metric 不适合直接用。人评比较商业模型有价值，但样本量有限，且只重点展示 bullet time，不能证明所有 effect 都优于商业系统。FILM 对比慢动作有启发，但它把生成模型与插帧模型放在大 temporal gap 下比较，结论更多说明“生成式先验优于纯插帧”，不一定说明 CineMobile 的端侧 DiT 架构本身更强。

Limitation

方法成立依赖几个强前提：teacher 已经会目标 effect；effect-specific LoRA 能提供稳定 motion prior；训练/测试图像分布足够接近；目标 motion 空间结构化且低多样性。扩展到开放域 prompt、复杂交互、多主体、非人像、长视频或自由相机轨迹时，4-step student 可能迅速退化。核心能力可能主要来自数据覆盖和 teacher supervision，而不是 student 学到了可组合的相机控制。增益归因不清：论文没有充分隔离 teacher LoRA、数据清洗、SFT、DMD、GAN、GRPO、量化各自对最终质量的贡献，尤其 GRPO 的作用更像局部美学优化。部署 claim 也要谨慎：手机端 per-step 20s，4 step 意味着端侧生成仍是分钟级附近体验；它证明可运行和低内存，不等于实时或交互式。另一个隐含问题是 teacher-generated data 可能让评估更接近蒸馏分布，benchmark overlap 或 implicit memorization 的风险文中未充分说明。

Takeaway

• 第一，端侧视频生成短期更现实的路径不是通用开放域，而是选择结构化 motion niche，然后围绕 teacher distribution 做强约束压缩。
• 第二，视频 DiT 压缩时保持 hidden representation geometry 可能比追求更高参数压缩率更重要，depth pruning 的可迁移 insight 值得用于其他时空生成模型。
• 第三，few-step video diffusion 的质量瓶颈不只是 sampler，而是 compressed student 是否先被拉回正确的生成 manifold；warm-up/curriculum 可能比复杂 reward 更关键。
• 第四，未来真正值得做的是可组合 camera-control 表征和更可靠的 effect-specific evaluation，而不是继续只报告 VBench 总分和单设备 latency。

一句话总结

CineMobile 是一篇把强 teacher 的局部 cinematic I2V 能力通过表征保持式剪枝、few-step distillation 和部署量化迁移到手机端的系统型工作，贡献主要在任务约束下的 DiT 压缩闭环，而不是新的通用视频生成范式。