Motion Smoothness

Motion Smoothness 在帧插值先验下衡量生成视频的时序可插值性。VFIMamba 由相邻偶数帧重建被丢弃的奇数帧；重建误差越低表示运动越平滑连续，而非语义或幅度正确。

对窗口 $k$ ， $\hat{I}_{2k+1} = \Phi(I_{2k}, I_{2k+2})$ 与真实奇数帧 $I_{2k+1}$ 通过 MSE、SSIM、LPIPS 比较。原始分量对 $K$ 个窗口取均值：

E_{\mathrm{mse}} = \frac{1}{K}\sum_k \mathrm{MSE}(\hat{I}_{2k+1}, I_{2k+1}),\quad S_{\mathrm{ssim}} = \frac{1}{K}\sum_k \mathrm{SSIM}(\hat{I}_{2k+1}, I_{2k+1}),\quad E_{\mathrm{lpips}} = \frac{1}{K}\sum_k \mathrm{LPIPS}(\hat{I}_{2k+1}, I_{2k+1}) \tag{1}

计算 MSE 前会先把解码得到的 uint8 帧转换为 float32，避免负像素差在减法和平方时按模 256 回绕。

各分量独立归一化后取算术均值。 $S_{\mathrm{smooth}}$ 越高表示生成运动越平滑。计算成功时为 official，无需参考视频。

当前配置中的 MSE 经验边界早于 v2_float32_mse。修复后的原始报告会带版本标记，但在用修正后的 benchmark 全量样本重新标定该边界之前，其归一化分数仍应视为临时值。

已核验的同输入案例

以下案例的高分侧均有明显运动。Motion Magnitude 只用来排除几乎静止的视频；展示的分数来自 Motion Smoothness 正式报告，归一化边界仍待重新标定。 Audit manifest: docs/assets/metric_examples/curated_same_case_manifest.json.

输入已核验 · 同一 benchmark case · gap 0.5793

`image_dynamic_photorealistic_articulated_0136`

套件: image_dynamic场景: photorealistic / articulated

案例中的可见运动

猎豹在草原上奔跑；整个片段里腿部和身体都持续改变位置。

案例观察

高分侧也有明显运动。Motion Magnitude 仅用于筛选可见运动；所示分数仍为 Motion Smoothness。两侧首帧均已与同一输入图进行几何匹配。

Model result videos will be available with the ModelScope release. / 模型推理视频将在 ModelScope 方案上线后提供。

较高指标分分数 0.8239

Model result videos will be available with the ModelScope release. / 模型推理视频将在 ModelScope 方案上线后提供。

较低指标分分数 0.2446

输入已核验 · 同一 benchmark case · gap 0.4492

`image_dynamic_photorealistic_rigid_0049`

套件: image_dynamic场景: photorealistic / rigid

案例中的可见运动

飞机和机场景象在画面中明显移动。

案例观察

高分侧也有明显运动。Motion Magnitude 仅用于筛选可见运动；所示分数仍为 Motion Smoothness。两侧首帧均已与同一输入图进行几何匹配。

Model result videos will be available with the ModelScope release. / 模型推理视频将在 ModelScope 方案上线后提供。

较高指标分分数 0.8947

Model result videos will be available with the ModelScope release. / 模型推理视频将在 ModelScope 方案上线后提供。

较低指标分分数 0.4455

输入已核验 · 同一 benchmark case · gap 0.7375

`image_dynamic_photorealistic_fluid_0069`

套件: image_dynamic场景: photorealistic / fluid

案例中的可见运动

瀑布持续流动，镜头向落水处靠近。

案例观察

高分侧也有明显运动。Motion Magnitude 仅用于筛选可见运动；所示分数仍为 Motion Smoothness。两侧首帧均已与同一输入图进行几何匹配。

Model result videos will be available with the ModelScope release. / 模型推理视频将在 ModelScope 方案上线后提供。

较高指标分分数 0.7818

Model result videos will be available with the ModelScope release. / 模型推理视频将在 ModelScope 方案上线后提供。

较低指标分分数 0.0443

Motion Smoothness

已核验的同输入案例

image_dynamic_photorealistic_articulated_0136

image_dynamic_photorealistic_rigid_0049

image_dynamic_photorealistic_fluid_0069

参考文献

`image_dynamic_photorealistic_articulated_0136`

`image_dynamic_photorealistic_rigid_0049`

`image_dynamic_photorealistic_fluid_0069`