hyperframes 这个词最近半年在所有跟影像沾边的社区里出现得越来越勤。有人用它指相机里那种高帧率升格拍摄有人拿它讨论视频编码里更长更聪明的帧组结构还有人用它描述播放端通过插帧把 24 帧素材硬生生撑到 120 帧的观看体验。说到底它就是 hyper frames 的合成词字面意思是超帧但真正值得聊的是它背后三个环节同时踩中同一个趋势帧正在从一张一张孤立处理变成一批一批成组处理。这篇文章我打算把 hyperframes 拆成三条线来展开——拍摄端的高帧率采集、编码端的超帧压缩、播放端的补帧重建每一条都给出可以直接用的参数、公式和避坑经验。无论你是拍视频的、写播放器的还是只想搞清楚为啥电视上看电影总有一种奇特的顺滑感都可以在下面找到答案。1. 先拆清楚hyperframes 到底指的是什么1.1 hyperframes 的词根拆解hyper 这个前缀到底在强调什么先说词义。frame 在影像领域指一帧画面hyper 是超级、超出的意思合起来就是超越单帧或者说超帧。但这个词不是某个组织定义的正式术语它更像一个从多个技术方向里自然长出来的统称描述一个共同趋势过去我们处理视频默认一帧一帧独立编码、独立传输、独立显示现在为了更高的帧率、更低的码率、更流畅的体验大家都开始把连续的多帧打包成更大的结构来统一处理。这个打包体现在三个层面。第一是采集层面相机在单位时间内捕捉的帧数大幅提升120fps、240fps 已经稀松平常1000fps 的高速机也不是什么稀罕货一秒钟产生的画面数量是以前的好几倍。第二是编码层面视频压缩标准从一开始就在做拿前后帧做参考这件事GOP一组画面本质上就是一种超帧结构近几年机器学习编码更是直接把一长段相邻帧塞进神经网络一次性预测整段运动变化。第三是显示和播放层面电视的 MEMC 运动补偿、播放器里的光流补帧本质上是在已有的关键帧之间无中生有出更多帧把低帧率内容伪装成高帧率内容。这三条线都在处理同一件事帧与帧之间的关系比单帧本身的内容更重要。理解了这一点再看各种和 hyperframes 相关的新闻、参数、争论脉络就清楚了。1.2 为什么偏偏是最近热起来三股力量同时到位hyperframes 成为热词不是某一个技术单点突破而是三股力量在近两年同时到位。第一股力量是硬件录制能力的下放。以前拍高帧率是专业高速摄影机的专利现在一台三千块的微单就能拍 4K 120fps手机的运动模式也能稳定输出 1080p 240fps。硬件把高帧率素材的获取成本打到了普通人能随手拍的水平素材量上来了讨论自然就多了。第二股力量是显示端的高刷新率普及。120Hz、144Hz 屏幕已经成为手机和显示器的标配但绝大多数内容源还是 24 帧或 30 帧。屏幕能显示 120 帧内容没有 120 帧于是补帧、插帧、MEMC 这些技术从可选项变成了必需项围绕补出来的帧算不算真帧的讨论也越来越多。第三股力量是 AI 插帧和超帧编码的工程化落地。剪映、Topaz Video AI、DAVINCI 里的光流补帧已经能让普通用户一键把 24 帧视频变成 60 帧甚至 120 帧新的视频编码方案也在尝试让神经网络直接处理整段帧组。工具一旦变得好用概念就会迅速出圈。所以回头看hyperframes 热起来的原因不复杂素材端帧率在涨显示端刷新率在涨中间缺失的那一块——帧率转换和超帧处理——正好被新工具填上了。2. 拍摄端高帧率参数选型和计算2.1 帧率选择的第一步先想清楚这段画面要干什么我见过太多人拿到支持高帧率的相机二话不说直接切到 120fps 拍完所有素材后期打开一看整段视频都是慢动作正常叙事反而没得用。高帧率的第一原则是帧率是手段不是目的。你选多少帧取决于这段画面最终在时间线上扮演什么角色。如果你要的是平滑的慢动作也就是升格那核心逻辑是拍摄帧率除以时间线帧率等于你的慢动作倍率。比如时间线是 24fps你用 120fps 拍摄后期放慢 5 倍120/24画面就是 20% 速度用 60fps 拍摄只能放慢 2.5 倍。这里有个常见的偷懒做法直接按120fps 适合 5 倍慢放240fps 适合 10 倍慢放来记基本没错但前提是你的时间线确实是 24fps。如果时间线是 30fps 或 25fps倍率就得重新算别想当然。如果你拍的是正常速度叙事只是希望后期有裁剪空间、或者要跟高刷新率屏幕对齐那高帧率的价值就不是慢动作而是让画面更顺滑。这种情况下一般选 48fps 或 60fps 就够了再高收益递减存储和电量的代价反而直线上升。我自己的习惯是没有明确的慢动作需求就不轻易碰 120fps省下的存储空间可以换更好的码率。还要警惕一类特殊场景拍带有规律运动的目标比如电风扇、直升机旋翼、车轮辐条。高帧率反而容易拍出一种频闪感因为采样率跟运动频率之间会产生差拍效应。这类画面宁可降低帧率或者刻意调高快门别无脑往高了升。2.2 从 180 度快门规则到码率公式四个必须算清楚的数确定帧率之后紧接着是快门、码率、存储、卡速四个数少算一个现场就得抓瞎。快门速度。电影拍摄里最经典的 180 度快门规则快门速度 1 / (帧率 × 2)。拍 24fps 用 1/50s拍 120fps 用 1/250s约等于 1/240s相机一般给 1/250s。这样每一帧的运动模糊量正好符合人眼对连续运动的认知。很多人升格拍完觉得画面一顿一顿就是快门设得太快帧与帧之间完全没有运动模糊动作反而变卡。但反过来如果光线很强没有 ND 滤镜你又必须用更快的快门这时候就要接受卡顿感变强的事实。码率公式。录制的数据率可以按这个公式估算码率(bps) ≈ 宽 × 高 × 每像素平均比特数 × 帧率 ÷ 压缩比举例1080p、10bit 4:2:2 色度采样平均每像素约 20bit亮度 10bit 两个色度通道合计 10bit4:2:2 下每像素平均两个样本。120fps 的未压缩数据率 1920 × 1080 × 20 × 120 ≈ 49.8Gbps。ProRes 422 HQ 这类编码的压缩比大约在 4:1 到 6:1 之间实际码率落在 8 到 12Gbps也就是每秒 1GB 到 1.5GB 左右。看到这个数你就明白为什么高帧率拍摄存储卡经常几分钟就写满。存储容量。以 10bit 4:2:2 ProRes 422 HQ 标称值算120fps 约等于 30fps 码率的 4 倍一段 10 分钟的升格素材可能吃掉上百 GB。预算不变的前提下我宁可把分辨率从 4K 降到 1080p也要保住 10bit 和更高码率后期调色和抠像的余地比分辨率重要得多。卡速。连续写入速度必须高于实际录制码率。V60 卡标称最低 60MB/sV90 卡标称最低 90MB/s录上面那个 ProRes 422 HQ 120fps 场景V90 只能是起步最好用 CFexpress 卡。这里有个隐藏坑很多卡标的是读取速度不是写入速度买卡一定认准 V 标和写入实测。我建议你拍任何高帧率项目前先把这四个数填进一张表里现场就不会慌参数120fps 升格示例60fps 常规示例快门1/250s1/125s30fps 时间线编码ProRes 422 HQH.265 10bit码率约 8–12Gbps约 200Mbps卡速要求V90 或 CFexpressV60 即可3. 编码端超帧的压缩逻辑和 AI 新玩法3.1 帧组 GOP 与高帧率带来的码率压力视频编码能压到那么小靠的根本不是单帧压缩而是帧与帧之间的重复。一个固定镜头里背景几乎不变变化的只是人的一小块区域。传统编码把这套逻辑做成了 GOPGroup of Pictures画面组一组由关键帧、预测帧、双向预测帧构成的结构。关键帧I 帧是完整的参考画面不依赖其他帧预测帧P 帧只需记录它跟前面参考帧的差异双向预测帧B 帧同时参考前后的帧压缩效率最高。一个典型的 GOP 结构可以写成 IBBPBBPBB长度几个到几十个不等。你的播放器每秒钟真正需要完整解码的画面其实很少大部分帧只是补间出来的残差和运动矢量。这套机制放到高帧率下就很有意思同样是 10 秒内容120fps 比 30fps 多了 900 帧如果这些多出来的帧只是临时变化冗余极高。理论上高帧率素材经过良好的 GOP 编码码率不该涨太多——因为运动信息的总量没变只是采样变密了。但现实里的编码器往往力不从心运动估计在帧间隔极短时反而容易出错导致码率不降反升。这也是高帧率视频对编码器提出的新挑战不是简单把帧率乘上去就行而是要在时间维度上做更聪明的预测。3.2 神经网络超帧把一组帧当成一个整体传统编码再聪明也是人为定义 I/P/B 帧和运动矢量。近几年的一个方向是直接用神经网络把一整段相邻帧当作超帧来编码。网络自己去学帧之间的运动规律把高维的时间冗余压缩成潜在的表示解码端再一次性重建出整段帧序列。这类思路和 audio 里的端到端神经编解码器是一脉相承的。好处是压缩率理论上能达到传统方法的数倍尤其对高帧率、高分辨率素材效果显著代价是计算量暴涨实时解码目前仍然困难。你在网上下载的一些所谓AI 修复/超分视频其实底层就可能用到了超帧级的时间融合——把相邻多帧的信息合并到一帧里去提升画质这已经不是逐帧处理能解释的了。对于普通创作者和开发者现阶段能实操的其实是另一类超帧工具帧插值模型。它们接收两帧输入预测中间帧连续做几次就能把帧率翻倍。拍摄端、编码端、播放端三者的关系在这个方向上彻底打通了低帧率素材拍下来神经网络猜出中间帧再喂给高刷新率屏幕体验上就等于拥有了一个虚拟的高帧率采集系统。当然猜出来的帧不等于真实拍到的帧这个原教旨主义争论我们在下一节展开。4. 播放端补帧、MEMC 与伪高帧率4.1 显示端的 MEMC 为什么要挨骂肥皂剧效应如果你家电视有运动补偿或者流畅度增强之类的选项打开以后看任何电影都会产生一种太顺滑了顺滑到像电视剧的感觉。这就是著名的肥皂剧效应Soap Opera Effect也是播放端超帧最典型的案例。电视的做法叫 MEMCMotion Estimation and Motion Compensation运动估计和运动补偿。原理不复杂两帧画面之间芯片估算每个像素块往哪移动了然后按移动路径插一帧新画面出来。24fps 的电影插到 60fps 甚至 120fps电视面板每秒钟能显示更多帧流畅度的确提升了。那为什么那么多人讨厌它因为电影之所以是 24fps不是因为那时候技术只能做到 24fps而是因为 24fps 配合 180 度快门拍出来的每帧都带着适当的运动模糊这种模糊本身是电影感的一部分也是大脑理解和接受这是电影的视觉线索。MEMC 把运动轨迹算出来以后插出的帧没有真实的运动模糊画面变得过于清晰锐利反而暴露出拍摄时的瑕疵也摧毁了24帧特有的节奏感。所以前几年李安的《双子杀手》用 120fps 拍完很多人评价像高清电视直播原因就在这里——真实的高帧率素材观众大脑还没有建立起对应的审美范式。如果你是内容创作者我建议你明确区分两个场景体育直播、游戏画面高帧率补帧几乎全是优点信息量的提升肉眼可见叙事电影、剧情短片、人物访谈开補帧要非常克制否则你的作品会失去那种胶片呼吸感。4.2 后期用光流法补帧到底应该用 60fps 还是 120fps后期软件里最常见的补帧手段是光流法。光流的直觉理解是亮度随时间变化是由像素点在移动造成的算法给每个像素算出运动矢量再用这些矢量在时间轴上外推或内插帧。剪映里那个光流法补帧、Premiere 的时间插值光流法、DAVINCI 的 Retime and Scaling 里的 Optical Flow都是同一个思路。实操参数我踩过不少坑给你几个直接能用的经验目标帧率不用盲目拉到 120fps。如果你的显示器是 60Hz导出 60fps 就是极限导出 120fps 只会白占码率播放端还未必扛得住。先确认最终分发平台的帧率要求短视频平台长期以 60fps 为主。素材运动幅度越小光流越准。大范围摇镜、前景快速运动、人物挥手这类场景光流会算出错误矢量画面出现溶解和鬼影。遇到这种情况别硬刚局部用帧采样回退反而更干净。两步式补帧比一步式更稳。24fps 想变 120fps不要直接从 24 算到 120先补到 60再从 60 补到 120每次的位移距离小了算法出错率指数级下降。补帧的本质是猜测猜测就会出错。我自己的原则是补帧只用来做锦上添花比如给客户看一个 HF 版本让他感受流畅度真正交付的正片始终保留一个没有补帧的版本。这不是技术保守是在给自己的素材留后路。5. 实战一条 hyperframes 素材从拍摄到输出5.1 拍摄前方案设计用一页纸定参数我用一个最近实际完成的案例来完整走一遍流程。需求是给一款运动饮料拍 15 秒的短视频核心画面是饮料罐被踢飞、在空中旋转、最后砸进水里的慢动作。目标分辨率 1080p交付到短视频平台横版 16:9。拍摄前我定了几件事使用 120fps 升格快门 1/250s本段素材不需要声音所以不需要考虑音频采样率对齐的问题。照明全部用户外自然光避免 LED 灯频闪同步拍摄 24fps 的常规画面用于剪辑时的正常速度段落。这台机器在 120fps 下有 1.1 倍裁切所以镜头焦段多留了 10% 的余量避免构图被裁得措手不及。5.2 后期处理混帧率时间线的正确姿势打开剪辑软件以后我先建一条 24fps 的时间线再把升格素材放上去。这里有个关键点不要直接在时间线上对高帧率素材做速度变慢处理除非你已经确认剪辑软件正确地读懂了帧率。Premiere 里更稳妥的做法是先对素材做修改 解释素材把 120fps 素材解释为 24fps这样素材相当于被原生放慢 5 倍播放时长变成原来的 5 倍而且不经过插值只是把多余帧丢掉重排。然后才是混合剪辑慢动作段落直接用解释好的素材正常速度段落用 24fps 的常规素材。如果你需要 5 倍慢放之外的倍率比如想放慢 3 倍我的习惯是用时间重映射调整百分比并把插值方式选为光流法而不是帧采样。理由很简单帧采样只抽帧在 3 倍慢放下会出现顿挫光流能补出中间帧观感更顺滑但代价是可能算错。安全起见光流只用在运动相对简单的段落复杂的动作镜头宁可顿挫也不要鬼影。5.3 导出设置参数码率怎么才算够导出这步很多新手栽在码率太低导致 120fps 白拍上。高帧率素材在空间上有更多细节在时间上有更多变化低码率会让画面出现大量块状模糊和边缘闪烁尤其是快速运动的罐身。我的导出基准表分辨率帧率编码建议码率1080p24fpsH.26416–20Mbps1080p60fpsH.26525–35Mbps1080p120fpsH.26550–80Mbps4K60fpsH.26560–100MbpsH.265 在高帧率下优势明显同样画质比 H.264 省 40% 码率代价是解码压力大。如果最终平台是剪辑回放我会用 ProRes 422如果直接上传平台H.265 即可。注意短视频平台会二次转码你上传 120fps 的素材平台也可能压回 60fps 甚至 30fps所以交付片和上传片是两套文件我一般多导出一版 60fps 的平台专用版避免平台转码时画质二次劣化。5.4 一个完整的可复现参数卡片为了方便你照着抄我把上面整个流程收敛成一张参数卡片下次做升格项目直接对着填拍摄帧率120fps快门 1/250sISO 尽可能低素材解释在剪辑软件中将 120fps 解释为 24fps获得原生 5 倍慢动作若需其它倍率使用时间重映射插值方式选光流法复杂动作回退帧采样时间线帧率24fps调色完成后另存一版 60fps 用于在线交付导出H.265 10bit码率按上表关闭所有二次补帧没必要喂一个补帧过的素材再编码一遍6. 常见问题与排查技巧实录6.1 果冻效应和灯光频闪高帧率最容易翻车的两个现场果冻效应是卷帘快门的固有问题CMOS 传感器从上到下逐行读取拍摄高速运动或快速摇镜时画面里的竖直线条会倾斜变形。高帧率模式下果冻效应会减轻但不会消失因为读取速度没变只是每帧间隔变短了。我的经验是高帧率升格拍高速运动物体时尽量缩小摇镜速度或者干脆用稳定器沿着运动方向跟着走避免画面中出现大量垂直线条。灯光频闪更隐蔽。室内 LED 灯用的是交流电频率常见 50Hz灯光亮度其实在 100 次/秒左右波动。你把帧率调到 120、180、240 这类 50 的倍数时刚好压住频闪但调到 60、100 这类非整数倍关系画面就会出现慢慢滚动的亮暗条纹。到了现场发现屏幕上有条纹先别怀疑相机坏了把帧率微调成 120 或 240同时把快门尽量控制在 1/100s 以上九成情况能解决。6.2 卡速、续航与发热录制中断的真凶高帧率录制中断十有八九是存储卡写入速度跟不上剩下两成是过热保护。我之前用一张 V60 卡录 4K 120fps录了大概一分钟就提示写入失败卡退出来摸一下烫得吓人。后来测了卡的实际写入才 55MB/s离 V60 标称的 60MB/s 还有距离而相机在 4K 120fps 10bit 下实际需要 90MB/s 以上。解决办法有两个降成 1080p 120fps或者换 CFexpress 卡。千万别迷信卡面标称用ATTO Disk Benchmark或者相机自带的卡速度测试功能实际跑一遍才是真话。发热导致录制中断在夏天的户外几乎无解。我能给的建议是把屏幕亮度调低、关闭蓝牙/WiFi、主动避开阳光直射、备一块风扇夹在扩展接口上。高帧率录制是相机内部最难散热的工况之一任何品牌都一样别指望固件能把物理散热解决掉。6.3 补帧鬼影与插帧瑕疵后期救不回的几种情况补帧生成的帧如果出现鬼影就是指运动物体的边缘有拖影半透明地叠在原位置和新位置之间。出现鬼影的地方通常也是光流算法最自信其实最错误的地方——大面积同色背景前的小物体快速移动、风吹头发、水面涟漪这些都能让光流产生幻觉。遇到鬼影我的排查顺序是先降低补帧倍率120 改 60看问题是否减轻如果没减轻就手动给这段贴一个帧采样的插值方式还不行就考虑用 roto 把问题区域单独抠出来只对背景补帧。总之补帧是概率性正确别对一个镜头反复调参死磕局部妥协是剪辑常态。实时播放端也一样。电视 MEMC 遇到字幕、台标这种静止在画面上的元素常常在字幕边缘出现奇怪的抖动因为芯片以为字幕也在动拼命往旁边补帧。所以你看很多电视产品会把字幕区域作为保护区域检测到稳定文本就跳过处理。知道自己电视的 MEMC 在什么菜单里比永远开着自动流畅度更有意义。结尾最后分享一个我做升格项目多年的习惯不管素材拍得多爽导出前我一定会问自己一句——这些多出来的帧是让内容更好看了还是纯粹让画面更顺了顺滑不等于好看高帧率是工具不是目的。很多时候我反而会主动把补帧关掉保留胶片时代那种一帧一帧跳动的呼吸感。hyperframes 的每一种形态从高速采集到超帧编码再到播放端插帧都在逼我们重新回答同一个问题人眼到底需要多少真相最少需要多少帧才能讲好一个故事。这个问题的答案目前没有人能给死但每一次尝试都在把视频体验往前推一步。我个人的态度是技术可以激进交付要保守自己动手把帧率和码率的账算清楚比追着热词跑更重要。