跳到正文

如何剪辑 AI 生成的视频:选条、节奏、字幕与口型同步

先把想法拼起来再精修,在注意力转移的地方剪切,有意识地构图竖屏版本,让屏幕文字清楚且准时,并在修复之前先诊断语音的时间问题。附真实制作项目、实测录音和一个可以拖动的裁切框。

更新于

剪辑 AI 视频依然是剪辑:选择表演、决定注意力往哪里走、让文字清楚可读、让声音连贯。生成的素材会带来一些额外的活儿(要剪掉的引子、会漂移的录音、丢了动作的裁切),但要问的问题,还是剪辑师一直在问的那些。在改动任何东西之前,先弄清这一段必须传达什么、哪个时刻出了问题;一次小小的修剪,并不需要重做整个制作项目。

1. 怎么把生成的片段剪成一支完整的视频?

先把想法拼起来,再精修剪辑。把有用的段落收集起来,并注明每段贡献了什么,排好顺序,在加任何转场或动画之前,先判断顺序、意义和表演是否成立。当语音撑起整支作品时,先按顺序听一遍选好的段落,再挑选能补充证据、动作或回应的画面。

选表演,而不是选字对得上的那条。选一条录音,要看它的想法是否完整、表达、神情,以及和前后是否衔接。最新的一条可能改对了一个事实,却丢了劲头;干净地重来一遍,往往比修补一处口误更好;一次有意的迟疑也可能撑起一场戏。“最后一条为准”“最短的一条为准”“删掉所有静音”都不是规则。要听入点和出点前后:第一个辅音、最后一口气或一只手落定的动作,都可能落在转写时间段之外。

剪掉模型多加的东西。生成的片段经常以一个空镜头或缓慢的引子开头。它打断动作时就剪掉,并移动依赖旧时间点的字幕和图形。还要检查剪掉了什么:如果一个角色在上一个镜头结尾还在洞里,下一个镜头开头却已经在洞外,把两个镜头都剪短也补不上那次缺失的出洞。要么选择能交代这一点的镜头,要么让时间跳跃显得是有意为之,要么去补拍缺失的动作。

2. 剪切应该多快?

信息变化多快就剪多快,不要更快。在观众应该得知某件事、看到某个回应或停留在某个动作上的地方剪切。列举、揭晓或笑点可以快切;艰深的讲解或安静的反应则需要镜头停留。不同的场景之间,不存在正确的镜头时长、每分钟剪切次数或静音阈值。

画面和语音不必同时切换。当回应才是重点时,让台词延续到倾听者的画面上(L 型剪辑);或者让下一个声音先于它的画面进入,把观众往前带(J 型剪辑)。把语音保持为一条连续的音轨,再围绕它选择画面。

选择转场要表达的意思:硬切转移注意力或压缩时间;叠化让一个画面让位给另一个,或暗示时间流逝;淡出则收束一个段落。Low Tide 正是在时间流逝的地方,用短叠化连接它的三段生成片段:从散步到休息,从最后一抹金光到黄昏。每一次叠化都要以正常速度检查:两张脸或两条地平线重叠,可能变成分散注意力的重影。

3. 怎么把横屏视频做成竖屏版本?

要重新构图,而不是简单居中。对横屏母版直接居中裁切,可能会丢掉演示内容或倾听者的反应。下面是一个生成场景里的双人镜头:先试试居中裁切,再让裁切框跟随对话移动。

同一个场景,两个竖屏版本

横屏母版(16:9)

也可以拖动裁切框。

居中时,竖屏版本拍到的是两人之间的灶台和她半张脸。跟随对话时,它就变成了一次剪辑:她的提问,他的反应和回答,她无声的回应。这是在选择由谁的体验来主导,和剪切做的是同一种选择。当没有任何一个裁切框能同时容下两个人,而这个时刻又需要两个人都在时,竖屏版本需要的是不同的镜头,而不是更好的裁切。

4. 字幕要压进画面吗?

当视频会在静音状态下观看、文字又是设计的一部分时,就压进画面;当平台会显示自带字幕、视频要做成多种语言,或者文字可能需要修改时,就保存为单独的文件(SRT 或 VTT)。很多时候两者都要。无论哪种,都要给每段文字一个作用,让它对准所属的词或动作出现,并放在不会被应用自带的按钮和文案挡住的位置:

应用会在画面上叠加什么

画面下方最多三行字幕,英文在上、中文在下:中文那一行伸到了应用显示账号名和视频文案的区域。智能体还把字幕另存为可编辑的文件,这样显示自带字幕的平台就可以改用它。

这是一个通用布局,不对应任何一个具体的应用。每个平台按钮和文字的位置都不同:请在真实手机上用真实的应用检查。

甲骨文 · 画面下方最多三行字幕,英文在上、中文在下:中文那一行伸到了应用显示账号名和视频文案的区域。智能体还把字幕另存为可编辑的文件,这样显示自带字幕的平台就可以改用它。
机翼如何产生升力 · 同一下方区域里只有一行简短的逐词同步字幕,每个词说到时亮起,刚好在应用底部文字开始的位置之上。逐词动画适合短小的讲解片;用在长篇里会让眼睛疲劳。

在文字显示的整个时间段里,都要对照动态画面检查:文字出现时空着的角落,之后可能会出现一张脸或一个手势。让入场动画先播完,再开始计算阅读时间;在文字开始描述下一个镜头之前把它撤掉;并确保字幕不会在笑点说出口之前就把它剧透了。按实际选定的那条表演来校对字幕,而不是按脚本:如果某条录音改了一个词,字幕也要跟着改。

5. 怎么修复口型不同步或语音时间问题?

先诊断,再修复。在同一条时间轴上比较开头、中间的句子和结尾,判断你遇到的是以下三种问题中的哪一种:

  • 固定偏移:每个词都一样地提前或滞后。移动音轨,并检查两端。
  • 节奏变化:开头对得上,后面的词逐渐漂移,或者停顿落在了一句话的中间。整体移动音轨无法解决这个问题。
  • 用词不同:画面里的声音多说、漏说或改了词。在对齐任何东西之前,先决定以哪个版本的措辞为准。

下面是同一段 136 个词的英文旁白的两条真实录音,由两个不同的声音朗读。先把第二条整体移动,再改成按每个段落对齐:

同样的文字,两种表演
Michael Matilda
段落 1 · A loaded jumbo jet…
  1. A

    Michael
    0.14 秒
    Matilda
    0.08 秒
    时间差
    −0.1 秒
  2. loaded

    Michael
    0.24 秒
    Matilda
    0.32 秒
    时间差
    +0.1 秒
  3. jumbo

    Michael
    0.72 秒
    Matilda
    0.88 秒
    时间差
    +0.2 秒
  4. jet

    Michael
    1.12 秒
    Matilda
    1.36 秒
    时间差
    +0.2 秒
  5. can

    Michael
    1.44 秒
    Matilda
    1.60 秒
    时间差
    +0.2 秒
  6. weigh

    Michael
    1.60 秒
    Matilda
    1.76 秒
    时间差
    +0.2 秒
  7. around

    Michael
    1.76 秒
    Matilda
    2.08 秒
    时间差
    +0.3 秒
  8. four

    Michael
    2.24 秒
    Matilda
    2.40 秒
    时间差
    +0.2 秒
  9. hundred

    Michael
    2.56 秒
    Matilda
    2.72 秒
    时间差
    +0.2 秒
  10. tonnes.

    Michael
    2.96 秒
    Matilda
    3.12 秒
    时间差
    +0.2 秒
  11. So

    Michael
    4.08 秒
    Matilda
    4.16 秒
    时间差
    +0.1 秒
  12. what's

    Michael
    4.56 秒
    Matilda
    4.64 秒
    时间差
    +0.1 秒
  13. holding

    Michael
    4.84 秒
    Matilda
    5.00 秒
    时间差
    +0.2 秒
  14. it

    Michael
    5.04 秒
    Matilda
    5.20 秒
    时间差
    +0.2 秒
  15. up?

    Michael
    5.20 秒
    Matilda
    5.36 秒
    时间差
    +0.2 秒
段落 2 · The answer is right…
  1. The

    Michael
    5.92 秒
    Matilda
    6.16 秒
    时间差
    +0.2 秒
  2. answer

    Michael
    6.08 秒
    Matilda
    6.32 秒
    时间差
    +0.2 秒
  3. is

    Michael
    6.60 秒
    Matilda
    6.88 秒
    时间差
    +0.3 秒
  4. right

    Michael
    6.80 秒
    Matilda
    7.12 秒
    时间差
    +0.3 秒
  5. here,

    Michael
    7.04 秒
    Matilda
    7.44 秒
    时间差
    +0.4 秒
  6. in

    Michael
    7.60 秒
    Matilda
    8.04 秒
    时间差
    +0.4 秒
  7. the

    Michael
    7.76 秒
    Matilda
    8.16 秒
    时间差
    +0.4 秒
  8. shape

    Michael
    8.00 秒
    Matilda
    8.32 秒
    时间差
    +0.3 秒
  9. of

    Michael
    8.24 秒
    Matilda
    8.64 秒
    时间差
    +0.4 秒
  10. the

    Michael
    8.40 秒
    Matilda
    8.84 秒
    时间差
    +0.4 秒
  11. wing.

    Michael
    8.56 秒
    Matilda
    8.96 秒
    时间差
    +0.4 秒
段落 3 · A wing is curved,…
  1. A

    Michael
    9.36 秒
    Matilda
    9.92 秒
    时间差
    +0.6 秒
  2. wing

    Michael
    9.52 秒
    Matilda
    10.08 秒
    时间差
    +0.6 秒
  3. is

    Michael
    9.68 秒
    Matilda
    10.40 秒
    时间差
    +0.7 秒
  4. curved,

    Michael
    9.92 秒
    Matilda
    10.64 秒
    时间差
    +0.7 秒
  5. and

    Michael
    10.64 秒
    Matilda
    11.32 秒
    时间差
    +0.7 秒
  6. tilted

    Michael
    10.80 秒
    Matilda
    11.44 秒
    时间差
    +0.6 秒
  7. slightly

    Michael
    11.24 秒
    Matilda
    11.92 秒
    时间差
    +0.7 秒
  8. upward.

    Michael
    11.68 秒
    Matilda
    12.40 秒
    时间差
    +0.7 秒
  9. As

    Michael
    12.48 秒
    Matilda
    13.36 秒
    时间差
    +0.9 秒
  10. it

    Michael
    12.64 秒
    Matilda
    13.56 秒
    时间差
    +0.9 秒
  11. slices

    Michael
    12.76 秒
    Matilda
    13.76 秒
    时间差
    +1.0 秒
  12. through

    Michael
    13.20 秒
    Matilda
    14.24 秒
    时间差
    +1.0 秒
  13. the

    Michael
    13.36 秒
    Matilda
    14.44 秒
    时间差
    +1.1 秒
  14. air,

    Michael
    13.52 秒
    Matilda
    14.56 秒
    时间差
    +1.0 秒
  15. the

    Michael
    14.03 秒
    Matilda
    15.20 秒
    时间差
    +1.2 秒
  16. flow

    Michael
    14.20 秒
    Matilda
    15.36 秒
    时间差
    +1.2 秒
  17. over

    Michael
    14.40 秒
    Matilda
    15.76 秒
    时间差
    +1.4 秒
  18. the

    Michael
    14.64 秒
    Matilda
    15.96 秒
    时间差
    +1.3 秒
  19. top

    Michael
    14.88 秒
    Matilda
    16.16 秒
    时间差
    +1.3 秒
  20. speeds

    Michael
    15.12 秒
    Matilda
    16.56 秒
    时间差
    +1.4 秒
  21. up,

    Michael
    15.60 秒
    Matilda
    17.04 秒
    时间差
    +1.4 秒
  22. and

    Michael
    15.97 秒
    Matilda
    17.48 秒
    时间差
    +1.5 秒
  23. its

    Michael
    16.08 秒
    Matilda
    17.60 秒
    时间差
    +1.5 秒
  24. pressure

    Michael
    16.24 秒
    Matilda
    17.76 秒
    时间差
    +1.5 秒
  25. drops.

    Michael
    16.64 秒
    Matilda
    18.16 秒
    时间差
    +1.5 秒
段落 4 · Underneath, the air slows…
  1. Underneath,

    Michael
    17.65 秒
    Matilda
    19.20 秒
    时间差
    +1.5 秒
  2. the

    Michael
    18.29 秒
    Matilda
    20.16 秒
    时间差
    +1.9 秒
  3. air

    Michael
    18.40 秒
    Matilda
    20.32 秒
    时间差
    +1.9 秒
  4. slows

    Michael
    18.72 秒
    Matilda
    20.64 秒
    时间差
    +1.9 秒
  5. and

    Michael
    19.28 秒
    Matilda
    21.20 秒
    时间差
    +1.9 秒
  6. presses

    Michael
    19.44 秒
    Matilda
    21.48 秒
    时间差
    +2.0 秒
  7. harder.

    Michael
    19.96 秒
    Matilda
    21.84 秒
    时间差
    +1.9 秒
段落 5 · Low pressure above. Higher…
  1. Low

    Michael
    20.64 秒
    Matilda
    22.88 秒
    时间差
    +2.2 秒
  2. pressure

    Michael
    20.88 秒
    Matilda
    23.12 秒
    时间差
    +2.2 秒
  3. above.

    Michael
    21.20 秒
    Matilda
    23.44 秒
    时间差
    +2.2 秒
  4. Higher

    Michael
    22.00 秒
    Matilda
    24.40 秒
    时间差
    +2.4 秒
  5. pressure

    Michael
    22.32 秒
    Matilda
    24.72 秒
    时间差
    +2.4 秒
  6. below.

    Michael
    22.72 秒
    Matilda
    25.12 秒
    时间差
    +2.4 秒
  7. The

    Michael
    23.44 秒
    Matilda
    26.08 秒
    时间差
    +2.6 秒
  8. wing

    Michael
    23.60 秒
    Matilda
    26.24 秒
    时间差
    +2.6 秒
  9. gets

    Michael
    23.96 秒
    Matilda
    26.56 秒
    时间差
    +2.6 秒
  10. pushed

    Michael
    24.16 秒
    Matilda
    26.96 秒
    时间差
    +2.8 秒
  11. up.

    Michael
    24.56 秒
    Matilda
    27.28 秒
    时间差
    +2.7 秒
  12. That's

    Michael
    25.12 秒
    Matilda
    28.00 秒
    时间差
    +2.9 秒
  13. lift.

    Michael
    25.92 秒
    Matilda
    28.48 秒
    时间差
    +2.6 秒
段落 6 · Now look behind the…
  1. Now

    Michael
    26.40 秒
    Matilda
    29.52 秒
    时间差
    +3.1 秒
  2. look

    Michael
    26.64 秒
    Matilda
    29.76 秒
    时间差
    +3.1 秒
  3. behind

    Michael
    26.84 秒
    Matilda
    30.00 秒
    时间差
    +3.2 秒
  4. the

    Michael
    27.20 秒
    Matilda
    30.48 秒
    时间差
    +3.3 秒
  5. wing.

    Michael
    27.56 秒
    Matilda
    30.72 秒
    时间差
    +3.2 秒
  6. The

    Michael
    27.95 秒
    Matilda
    31.44 秒
    时间差
    +3.5 秒
  7. air

    Michael
    28.12 秒
    Matilda
    31.60 秒
    时间差
    +3.5 秒
  8. leaves

    Michael
    28.28 秒
    Matilda
    31.84 秒
    时间差
    +3.6 秒
  9. it

    Michael
    28.56 秒
    Matilda
    32.16 秒
    时间差
    +3.6 秒
  10. bent

    Michael
    28.72 秒
    Matilda
    32.32 秒
    时间差
    +3.6 秒
  11. downward.

    Michael
    29.12 秒
    Matilda
    32.64 秒
    时间差
    +3.5 秒
  12. Push

    Michael
    29.84 秒
    Matilda
    33.68 秒
    时间差
    +3.8 秒
  13. air

    Michael
    30.08 秒
    Matilda
    34.00 秒
    时间差
    +3.9 秒
  14. down,

    Michael
    30.60 秒
    Matilda
    34.24 秒
    时间差
    +3.6 秒
  15. and

    Michael
    30.93 秒
    Matilda
    34.76 秒
    时间差
    +3.8 秒
  16. the

    Michael
    31.04 秒
    Matilda
    34.88 秒
    时间差
    +3.8 秒
  17. air

    Michael
    31.20 秒
    Matilda
    35.04 秒
    时间差
    +3.8 秒
  18. pushes

    Michael
    31.44 秒
    Matilda
    35.44 秒
    时间差
    +4.0 秒
  19. the

    Michael
    31.76 秒
    Matilda
    35.84 秒
    时间差
    +4.1 秒
  20. wing

    Michael
    32.00 秒
    Matilda
    35.92 秒
    时间差
    +3.9 秒
  21. up.

    Michael
    32.24 秒
    Matilda
    36.32 秒
    时间差
    +4.1 秒
  22. Two

    Michael
    32.80 秒
    Matilda
    37.12 秒
    时间差
    +4.3 秒
  23. ways

    Michael
    33.08 秒
    Matilda
    37.36 秒
    时间差
    +4.3 秒
  24. of

    Michael
    33.24 秒
    Matilda
    37.68 秒
    时间差
    +4.4 秒
  25. describing

    Michael
    33.40 秒
    Matilda
    37.84 秒
    时间差
    +4.4 秒
  26. the

    Michael
    33.92 秒
    Matilda
    38.40 秒
    时间差
    +4.5 秒
  27. same

    Michael
    34.08 秒
    Matilda
    38.56 秒
    时间差
    +4.5 秒
  28. flow.

    Michael
    34.72 秒
    Matilda
    38.96 秒
    时间差
    +4.2 秒
段落 7 · And no, the air…
  1. And

    Michael
    35.12 秒
    Matilda
    39.76 秒
    时间差
    +4.6 秒
  2. no,

    Michael
    35.44 秒
    Matilda
    40.08 秒
    时间差
    +4.6 秒
  3. the

    Michael
    35.76 秒
    Matilda
    40.56 秒
    时间差
    +4.8 秒
  4. air

    Michael
    36.00 秒
    Matilda
    40.72 秒
    时间差
    +4.7 秒
  5. on

    Michael
    36.16 秒
    Matilda
    40.96 秒
    时间差
    +4.8 秒
  6. top

    Michael
    36.48 秒
    Matilda
    41.20 秒
    时间差
    +4.7 秒
  7. isn't

    Michael
    36.72 秒
    Matilda
    41.52 秒
    时间差
    +4.8 秒
  8. racing

    Michael
    37.08 秒
    Matilda
    41.88 秒
    时间差
    +4.8 秒
  9. to

    Michael
    37.56 秒
    Matilda
    42.32 秒
    时间差
    +4.8 秒
  10. "catch

    Michael
    37.79 秒
    Matilda
    42.60 秒
    时间差
    +4.8 秒
  11. up"

    Michael
    38.08 秒
    Matilda
    43.04 秒
    时间差
    +5.0 秒
  12. with

    Michael
    38.43 秒
    Matilda
    43.28 秒
    时间差
    +4.9 秒
  13. the

    Michael
    38.52 秒
    Matilda
    43.44 秒
    时间差
    +4.9 秒
  14. air

    Michael
    38.64 秒
    Matilda
    43.60 秒
    时间差
    +5.0 秒
  15. below.

    Michael
    39.12 秒
    Matilda
    43.76 秒
    时间差
    +4.6 秒
  16. It

    Michael
    39.52 秒
    Matilda
    44.64 秒
    时间差
    +5.1 秒
  17. actually

    Michael
    39.76 秒
    Matilda
    44.80 秒
    时间差
    +5.0 秒
  18. gets

    Michael
    40.00 秒
    Matilda
    45.24 秒
    时间差
    +5.2 秒
  19. there

    Michael
    40.16 秒
    Matilda
    45.48 秒
    时间差
    +5.3 秒
  20. first.

    Michael
    40.40 秒
    Matilda
    45.84 秒
    时间差
    +5.4 秒
段落 8 · More speed and more…
  1. More

    Michael
    41.12 秒
    Matilda
    46.64 秒
    时间差
    +5.5 秒
  2. speed

    Michael
    41.60 秒
    Matilda
    46.88 秒
    时间差
    +5.3 秒
  3. and

    Michael
    41.92 秒
    Matilda
    47.48 秒
    时间差
    +5.6 秒
  4. more

    Michael
    42.08 秒
    Matilda
    47.68 秒
    时间差
    +5.6 秒
  5. wing

    Michael
    42.52 秒
    Matilda
    47.92 秒
    时间差
    +5.4 秒
  6. mean

    Michael
    42.80 秒
    Matilda
    48.40 秒
    时间差
    +5.6 秒
  7. more

    Michael
    43.16 秒
    Matilda
    48.72 秒
    时间差
    +5.6 秒
  8. lift.

    Michael
    43.36 秒
    Matilda
    49.04 秒
    时间差
    +5.7 秒
  9. Enough

    Michael
    44.00 秒
    Matilda
    49.84 秒
    时间差
    +5.8 秒
  10. to

    Michael
    44.32 秒
    Matilda
    50.20 秒
    时间差
    +5.9 秒
  11. carry

    Michael
    44.60 秒
    Matilda
    50.32 秒
    时间差
    +5.7 秒
  12. four

    Michael
    44.88 秒
    Matilda
    50.84 秒
    时间差
    +6.0 秒
  13. hundred

    Michael
    45.16 秒
    Matilda
    51.12 秒
    时间差
    +6.0 秒
  14. tonnes

    Michael
    45.60 秒
    Matilda
    51.52 秒
    时间差
    +5.9 秒
  15. into

    Michael
    46.12 秒
    Matilda
    52.12 秒
    时间差
    +6.0 秒
  16. the

    Michael
    46.32 秒
    Matilda
    52.28 秒
    时间差
    +6.0 秒
  17. sky.

    Michael
    46.60 秒
    Matilda
    52.40 秒
    时间差
    +5.8 秒
第一个词处
−0.1 秒
最后一个词处
+5.8 秒
最大偏差
6.0 秒

两条录音同时开始,结束时却相差将近六秒。最佳的整体偏移只是把差距平分,两端仍各有大约三秒的误差:这是节奏变化,任何偏移都解决不了。按八个经核实的段落起点连续调整各区间的时长,保留音高和完整区间后,词语起点的最大偏差降至约半秒;剩余的是段落内部的节奏差异。真正的修复也是同样的做法:以你在实际音频中核实过的词为锚点(重复出现的词很容易配错对),移动表达已经合适的完整短语,只在必要的地方拉伸,并听一听结果。允许的拉伸比例只是一个上限,而不是质量证书。

如果要让声音对上画面,就得打乱节奏、把词拉得很长,或者让嘴在没有声音的情况下动,那就换镜头或者替换表演:用选定的声音重新录这句台词,或者重新生成这个镜头。也不要仅仅因为生成的说话人在那里停了一下,就在一个自然的短语中间加停顿;要么把那个时刻的画面和声音一起剪掉,要么用别的镜头盖住。

6. 修复过程中保持场景声音的连贯

在静音任何一个音源之前,先弄清它包含什么:生成的片段通常把对白、房间底噪、音效和音乐混在同一条音轨里,提取或分离人声并不能给你一个干净的背景。替换声音可能意味着要从干净的音源恢复环境声和音效。同一个连续的地点,用一条连续的背景声;场景移动时,让声学视角跟着变化;不要因为电平表发现了一段静音,就去填满一段有戏剧作用的沉默。替换视频的音轨时,先把完整的目标音轨做好:替换会把原来的音轨整个拿掉。

让相邻的人声段落在电平和质感上一致,但不要抹掉有意的变化:耳语不应该为了达到同样的读数而变成喊叫。

7. 先检查修改的段落,再检查整体

在修改处前后渲染足够长的内容,以便看到、听到两个衔接点。先用正常速度看,再仔细看:用词、发音、呼吸、说话人、嘴型时间、视线、动作、声音的空间感,以及反应变得可见的那个时刻。边界处的一帧对得上,并不能证明运动是流畅的;转写正确,也不能证明声音是自然的。任何修剪或时长改动之后,都要重新检查字幕、按词触发的图形和下一个场景。发布前审片清单讲解了最后一遍检查。