相机视频文件格式由上下叠加的两层构成,几乎所有令人困惑的播放故障都源于混淆这两层。 .MP4 和 .MOV 都是容器——用于存放视频轨道、音频轨道和索引的盒子。H.264、HEVC、ProRes、BRAW 和 R3D 是编解码器,即把传感器数据转换成比特的压缩方案。两个片段可能具有相同的扩展名,内部结构却截然不同。动手处理前,先确定哪一层出了问题:容器问题通常可以在几分钟内修复,而编解码器不匹配通常根本不是文件损坏。
了解这两层的区别有助于诊断问题。文件无法打开时,要问的不是它是否损坏,而是哪一层出了问题,以及帧数据是否仍然完好。本页介绍主要容器、实际工作中常见的编解码器、决定片段能否播放的 moov 原子,以及运动相机至今仍将录制内容切分成约 4 GB 片段的原因。
容器和编解码器解决的是两个不同的问题
容器就像一个文件管理系统。它描述视频流和音频流从哪里开始、有多少帧、每帧持续多久,以及显示什么时间码。容器遵循标准:MP4 和 MOV 都基于 ISO 基础媒体文件格式(ISO BMFF),MXF 是 SMPTE 标准,而 AVI 基于较早的 RIFF 结构。
编解码器解决的是数学问题。它定义如何将一帧 3840 × 2160 像素的画面压缩到几百 KB,以及解码器如何将这些字节还原成画面。一个容器几乎可以容纳任何编解码格式,而大多数编解码格式也可以封装在多种容器中。
这种分离带来了三种截然不同的故障表现:
- 文件完全无法打开。 容器或其索引已损坏。帧数据可能仍然完好无损。
- 文件可以打开,但显示黑屏或没有视频轨道。 容器丢失了轨道信息,或者设备缺少相应的编解码器。
- 文件可以打开并播放一部分,随后画面出现破损。 容器完好;压缩码流已损坏。
大多数声称可以“修复损坏视频”的软件,实际上是在修补容器。这解释了为什么它们经常有效,也解释了为什么面对发生物理损坏的码流数据时,它们会完全失效。
容器层:MP4、MOV、MXF 和 AVI
相机文件的扩展名表明其所属的容器类型,而容器类型可以帮助判断可能出现哪种故障。
| 容器 | 扩展名 | 常见来源 | 结构 | 典型故障表现 |
|---|---|---|---|---|
| MP4 | .mp4 | 大多数无反相机、无人机、运动相机和手机 | ISO BMFF 盒子结构;索引存储在 moov 原子中 | 录制中断后无法打开,或打开后时长显示为 0:00 |
| QuickTime | .mov | Canon、Nikon、Fujifilm、Blackmagic,以及 ProRes 工作流程 | 与 MP4 同属 ISO BMFF 格式族,带有额外的元数据盒子 | 当 MP4 副本无法打开时,通常仍可在 QuickTime 或 VLC 中打开 |
| MXF | .mxf | Sony XDCAM、Panasonic P2、ARRI、广播录制设备 | SMPTE 操作模式封装,具有独立的媒体数据轨道和索引表 | NLE 显示“媒体脱机”或“找不到片段”,而文件本身看起来正常 |
| AVI | .avi | 老款数码单反相机、行车记录仪、较早的消费级设备以及部分采集设备 | RIFF 结构,简单的 32 位索引 | 只能播放到最后一个完整数据块;录制中断的文件没有可用索引 |
这张表中有两点常常令人意外。首先,MP4 和 MOV 的底层格式相同:两者都源自 Apple 的 QuickTime 容器,也都采用基于原子的 ISO BMFF 结构。将 .mov 扩展名改为 .mp4 ,经常能让文件在拒绝原扩展名的软件中播放,因为软件是根据扩展名而不是读取文件头来判断的。其次,AVI 将索引写在文件末尾,这对中断的录制来说是最不利的位置。行车记录仪在循环录制途中断电时,可能已经写入数百 MB 的有效帧,却没有写入索引。数据还在,指引位置的索引却不在。
MXF 是最容易在实际未损坏时看起来像出了问题的容器。MXF 文件采用一种操作模式,旨在广播工作流程中取代录像带,并有意将索引与媒体数据分开。丢失索引表的 MXF 无法在严格遵循规范的 NLE 中加载,但仍可由直接解析媒体数据的取证工具读取。 电影摄影机存储概览 介绍了这些制作媒体在存储卡上的布局。
编解码器层:究竟什么决定画面能否显示
编解码器分为两类,这一区别决定了文件部分损坏时会出现什么情况。
帧间编解码器 (也称为长 GOP)存储少量完整的参考帧,然后只存储其间各帧的差异。H.264(高级视频编码,AVC)、HEVC(高效视频编码,H.265)以及大多数消费级相机的视频都采用这种方式。它的效率很高,因此一张容量不大的存储卡也能容纳两小时的录制内容。
帧内编解码器 独立压缩每一帧。Apple ProRes、Avid DNxHR 和 Blackmagic RAW 都采用这种方式,部分 RAW 格式则介于两者之间。
由此带来了相机视频中最违反直觉的一点: 产生较大文件的编解码器比产生较小文件的编解码器更能抵抗损坏。 码率为 500 Mbps 的 ProRes 文件大小约为画质相近的 50 Mbps H.264 文件的十倍。当存储介质返回坏块时,ProRes 片段会丢失一帧或连续的少量帧,而 H.264 片段可能丢失数秒,因为画面组中所有依赖该帧的帧都失去了参考。
| 编解码器 | 类型 | 码率特点 | 损坏表现 |
|---|---|---|---|
| H.264 (AVC) | 帧间编码 | 低至中等 | 损坏会在画面组中向后传播 |
| HEVC (H.265) | 帧间编码 | 相同画质下码率更低 | 损坏同样会传播,解码更困难;旧设备可能完全无法播放 |
| ProRes 422 / 4444 | 帧内编码 | 高 | 损坏局限于局部;无法读取的帧通常可以跳过 |
| DNxHR | 帧内编码 | 高 | 与 ProRes 相同,常见于 Avid 和 Windows 剪辑工作流程 |
| Blackmagic RAW | 压缩 RAW | 可配置为恒定码率或恒定质量 | 包含内部校验和,因此可以识别损坏区域,而无需猜测 |
| REDCODE (R3D) | 小波 RAW | 可变 | 内部采用分段结构;一个片段由多个分段组成 |
| ARRIRAW | 未压缩或轻度压缩的 RAW | 极高 | 以带编号的独立帧序列存储,而非以流的形式存储 |
ARRIRAW 并非通常意义上的视频文件。它是一个文件夹,其中包含独立的帧文件以及描述序列的 XML 附属文件。2,000 帧中即使丢失第 1,200 帧,仍有 1,999 帧完好无损:既没有可能丢失的索引,也没有可能断裂的参考链。代价是文件体积极大。
moov 原子决定片段能否打开
MP4 或 MOV 文件由一系列原子(也称为盒)组成。其中有两个对恢复很重要:
mdat——媒体数据原子,保存实际的压缩帧。moov——影片原子,保存样本表:包含多少帧、每帧的大小、起始字节偏移量以及持续时间。
播放器首先读取 moov ,然后跳转到其中列出的偏移位置。如果没有 moov,播放器就无法找到任何一帧,即使所有帧都保存在 mdat中。文件看起来无法播放,实际上却几乎完整无损。 moov 在文件中的位置并非随意安排:
| 布局 | 所在 moov 的位置 | 写入设备或工具 | 中断后的表现 |
|---|---|---|---|
| 快速启动 | 位于其前 mdat | 网页编码器、流媒体工具、部分手机 | 文件可以打开,并播放到数据结束的位置 |
| 标准相机布局 | 位于其后 mdat | 大多数相机、无人机和运动相机 | 文件完全无法打开;索引未能写入 |
相机最后写入 moov ,因为只有录制结束后才能确定样本表。因此,相机会先写入录制内容,再追加索引,最后关闭文件。如果在文件关闭前断电,就会得到一个已完整写入的 mdat ,但其中没有 moov.
理解录制中断时,最重要的一点是: 素材通常没有损坏,只是缺少索引。 每一帧的数据都在卡上,缺少的是目录。正确的修复方式是重建索引,而不是重新扫描丢失的簇;相关方法见 修复缺少 moov 原子的视频。由于 moov 位于文件末尾,即使帧数据完好,靠近末尾的一个无法读取的块也会破坏索引。因此,对于存在读取错误的卡,应一次性制作镜像,而不是反复复制。
专业存储介质:SxS、P2 与以文件夹为格式的设计理念
在消费级存储卡上,一个片段就是一个文件。在专业存储介质上,一个片段通常是一棵目录树,这种设计改变了“恢复”的含义。
Sony SxS 卡是 XDCAM 录像设备使用的 ExpressCard 存储介质。卡中的文件可以直接读取,位于以 XDROOT为根目录的结构中。完整复制整个目录树即可正常使用;如果只复制文件,某些软件仍会拒绝导入。
Panasonic P2 将这种设计更进一步。P2 卡包含一个 CONTENTS 目录,其中有多个并列文件夹: VIDEO 用于存放媒体内容,另有 AUDIO, PROXY, ICON, VOICE和 CLIP 用于存放 XML 元数据。 CLIP 元数据记录片段名称、关联其组成部分并定义入点和出点。如果片段的 CLIP 条目缺失,媒体就会成为孤立素材:MXF 媒体文件仍然存在,但非线性编辑软件无法识别出片段。
AVCHD 摄像机 将相同的理念应用于消费级产品。素材以 PRIVATE/AVCHD/BDMV/STREAM 文件的形式存放在 .MTS 中,目录树其他位置的播放列表文件则定义播放顺序和章节。如果恢复结果只有单独的 .MTS 文件而没有相应结构,视频虽然可以观看,却不易编辑。这个问题在 摄像机视频恢复指南.
在结构化存储介质上,文件夹布局是格式的一部分,因此恢复时必须还原一组相互依赖的文件,而不是一个大文件。
为什么运动相机将录制内容分割成约 4 GB 的文件
GoPro 和其他几个运动相机品牌会将长时间录制的内容分成约 4 GB 的章节。文件名包含顺序信息:一组文件可能以 GOPR0042.MP4 作为第一章,后面依次是 GX010042.MP4 和 GX020042.MP4,其中 01 和 02 是章节编号,而 0042 是共用的录制编号。
一个显而易见的解释是 FAT32 的文件大小上限为 4 GB 减 1 字节;对于旧款 SDHC 卡,这个解释完全正确。但现在已不再适用。容量为 64 GB 及以上的卡都是 SDXC,SDXC 规范要求使用 exFAT,而它支持容量以艾字节计的文件。分章之所以保留下来,是因为它是 一种限制意外中断影响范围的策略,并非受文件系统限制所迫。
道理很简单:一段连续录制 90 分钟的内容只有一个索引。如果在第 89 分钟断电,整段录制内容都会缺少索引而无法播放。将同一段录制内容分成二十章,最坏情况下只会丢失最后一章,仍可保留十九个能够播放的文件。
| 项目 | 单个长文件 | 分章录制 |
|---|---|---|
| 断电后的文件 | 一个文件,缺少索引且无法播放 | 所有已完成的章节均可播放 |
| 最坏情况下的损失 | 整段录制内容 | 仅最后一章 |
| 恢复工作 | 为一个超大文件重建索引 | 按顺序拼接,然后重建一个索引 |
| 剪辑 | 直接导入 | 导入后按顺序拼接 |
由此可得出三个实际结论。第一,如果扫描返回的是一个包含编号片段的文件夹,而不是一个长视频,那是分章录制,并非文件损坏;需要做的是排序和拼接,具体步骤见 重新拼接分章视频文件 。第二,如果一组章节中缺少一章,即使现有的每个文件都能正常播放,录制内容中间仍会出现缺口。第三,中断的章节很容易辨认:它的文件大小比同组其他章节小。
根据症状找出出问题的层
在尝试任何操作之前,请用下表确定故障文件的问题所在层。判断错误是导致可恢复素材被破坏的主要原因:对完好的文件进行容器修复不会造成损害,但反复向出现故障的存储卡写入数据则会。
| 症状 | 故障层 | 可能的结果 |
|---|---|---|
| 无法在任何播放器中打开,文件大小看起来正常 | 容器; moov 缺失或损坏 | 可能性高:重建索引后即可播放画面 |
| 打开后显示时长为 0:00 | 容器;样本表不完整 | 可能性高:采用相同的修复方法 |
| 打开后有声音但没有画面 | 容器轨道表损坏,或缺少编解码器 | 可能性高:重新封装到新容器中 |
| 在相机上可以播放,在电脑上无法播放 | 编解码器支持问题,并非文件损坏 | 可以解决:安装解码器或使用支持该格式的非线性编辑软件 |
| 播放到一半出现绿色画面或画面撕裂 | 压缩码流损坏 | 部分可恢复:损坏处之前完好的素材可以恢复 |
| 在文件管理器中显示为 0 KB | 目录条目损坏 | 可能性中等:根据文件特征签名提取文件 |
| 文件夹中有一系列编号片段 | 并非故障 | 可以解决:按顺序拼接各个分段 |
前两行与第五行的区别,决定了问题是十分钟就能修好,还是会造成数据丢失。画面数据完好但索引缺失的视频片段可以完整恢复;码流发生物理损坏的视频片段只能恢复到损坏处。
HEVC 是最常被误认为文件损坏的编解码格式,因为它已成为大多数新款手机、无人机和无反相机的默认格式。不支持 HEVC 的设备会出现有声音但画面全黑的情况,用户自然会以为文件损坏了。 HEVC 修复指南 介绍了如何区分解码限制和真正的文件损坏。
如果您使用 Windows,且电脑仍能识别存储卡,XRecovery (xappset.com) 等专用恢复工具可以扫描 SD、microSD 和其他存储卡,查找已删除或格式化的照片和视频。与使用任何恢复工具一样,请先停止向存储卡写入数据,并始终将恢复的文件保存到其他驱动器。未被覆盖的文件可以完整恢复;已被覆盖的文件无论营销宣传如何,都无法用任何工具恢复。
如果一张卡上既有损坏的片段,也有完好的片段, 视频恢复指南 介绍了操作顺序,而 相机如何写入文件 则解释了造成大多数此类故障的写入方式。
常见问题
如果 moov atom 缺失,视频文件还能修复吗?
通常可以,只要 mdat atom 中的画面数据仍然完好。修复方法是从压缩码流中重建有效的样本表:可以解析每一帧的帧头,也可以参考使用相同相机设置录制的完好片段。丢失的只是索引,素材本身并未丢失。
为什么相机会把一次录制拆分成多个文件?
因为分段可以限制单次断电造成的损失。一个分段关闭后就已完整保存并受到保护,因此在录制下一分段时断电,损失的只是该分段,而不是整次录制。4 GB 的大小源于历史上 FAT32 的限制,但即使在现代 exFAT 卡上,这种做法仍被有意保留。
MOV 和 MP4 是同一种格式吗?
它们属于同一个容器格式家族,即 ISO 基础媒体文件格式,因此将一种扩展名改成另一种有时就能让文件播放。两者并不完全相同:MOV 允许使用额外的元数据框,但能播放其中一种格式的播放器通常也能播放另一种。
为什么文件更小的格式损坏后后果更严重?
因为大多数较小的相机文件使用 H.264 和 HEVC 等帧间编解码格式,其中大多数帧只保存与参考帧的差异。参考帧一旦损坏,所有依赖它的帧都会受到影响。ProRes 等帧内编解码格式则独立压缩每一帧,因此损坏只会局限于实际丢失的帧。