Luma Labs 推出 Ray2 中的 Camera Motion Concepts(相机运动概念)功能,一共20 多种经过精确调整的摄像机运动,让 AI 视频也能拍出专业电影级镜头运动,而且还可以随意组合。

“Camera Motion Concepts”提供了一套经过精确调校的摄像机运动选项,用户只需通过文本输入即可实现复杂的镜头控制。比如:

  • 推进、拉远(Zoom / Push)
  • 左右环绕(Orbit)
  • 升降镜头(Crane / Pedestal)
  • 左右平移(Truck / Pan)
  • 模拟手持抖动(Handheld)
  • 还有电影里很经典的“Dolly Zoom”(背景拉伸但人物不动那个)

每种运动方式都可以像“概念组件”一样相互组合,带来数百种全新的复杂动态镜头操作。比如先环绕再推进、再上下摇摆等等,这样可以拼出过去很难做到的镜头感。

这些相机运动可通过少量示例即可进行学习,并可作为模块嵌入工作流程,便于用户精确控制。比如控制转动角度、速度、镜头方向等等。

主要功能特点

1)20多种摄像机运动选项

  • Luma Labs提供了超过20种预设的摄像机运动,包括但不限于:

    • 平移(Pan):如向左平移(Pan Left)、向右平移(Pan Right),水平移动镜头以展示场景。
    • 旋转(Orbit):如向左旋转(Orbit Left)、向右旋转(Orbit Right),围绕主体进行环绕拍摄。
    • 升降(Crane):如向上提升(Crane Up)、向下降低(Crane Down),垂直移动镜头以增加深度。
    • 推拉(Push/Pull):如推近(Push In)、拉远(Pull Out),实现镜头的变焦效果。
    • 移动(Move):如向左移动(Move Left)、向上移动(Move Up),在场景中进行方向性平移。
    • 追踪(Track):跟随主体移动,保持其在画面中心。
  • 这些运动经过专门优化,确保平滑性和电影感,适用于从简单场景到复杂叙事的各种需求。

(2)自然语言控制

  • 用户只需在提示框中输入“Camera”关键字,即可激活运动控制选项,随后选择具体运动类型。例如,输入“Camera Pan Right”即可生成镜头向右平移的视频。
  • 支持将运动命令与场景描述结合,例如“Camera Orbit Left, a leopard walking through snow”,从而生成环绕雪中豹子移动的镜头。

(3)可组合性(Composable Workflows)

  • “Concepts”系统的独特之处在于其模块化设计,不同的摄像机运动可以组合使用,创造出“数百种原本不可能的镜头”。例如,用户可以尝试“Camera Pan Right + Crane Up”,实现同时水平移动并抬升的效果。
  • 这种组合能力极大扩展了创作的可能性,使视频更具动态感和层次感。

(4)高可靠性与一致性

  • Luma Labs强调,Camera Motion Concepts在不同风格和主题的视频中都能保持高质量和一致性。例如,无论生成的是现实主义场景还是抽象艺术风格,镜头运动都能精准执行。
  • 在内部测试中,这些运动表现出极高的平滑度和可靠性,避免了早期AI视频中常见的抖动或不连贯问题。

(5)基于少量样本学习

  • 该功能基于一种新型训练方法,仅需少量示例即可让模型掌握复杂的摄像机运动概念。

具体演示: