描述 #

视频智能剪辑算子，基于多模态大模型实现视频智能剪辑能力，帮助用户从长视频中快速提取有价值的内容片段。支持自然语言描述的剪辑需求理解、参考图像辅助识别（角色、物品、场景等）、多维度视频内容分析（视觉、字幕、剧情），并输出标准化的剪辑决策信息（时间戳、描述、标签等）。

使用限制 #

• 需要能访问视频源文件（公网、火山内网或 TOS）。
• 视频时长限制为最长 2 小时。
• 视频时长小于 1 秒不处理，直接返回错误信息。

核心功能 #

• 支持多种剪辑场景：角色片段提取、高光片段检测、产品片段检测、自定义剪辑等。
• 基于自然语言描述的灵活剪辑需求理解，支持用户自定义需求。
• 支持参考图像辅助识别（角色、物品、场景等）。
• 多维度视频内容分析（视觉、字幕、剧情）。
• 支持 ASR 增强的语义理解，适用于对话内容丰富、无字幕的视频，提升片段边界流畅性。
• 支持短剧三要素渲染（标题、提示语、角标），适合短剧竖屏场景。
• 支持精彩前置功能，自动提取 10-15 秒具有吸引力的片段作为开场。
• 标准化的剪辑决策输出（时间戳、描述、标签等）。
• 自动生成视频片段文件并上传至 TOS。

性能说明 #

• 总耗时与视频时长、处理模式、网络环境相关。
• 建议在火山内网环境下访问 TOS 源与写入 TOS 结果以获得更稳定的网络性能。
• 不同处理模式的性能与成本平衡：
  • 简单模式：速度快、成本低
  • 标准模式：平衡性能与质量
  • 精细模式：高质量、成本较高

submit #

接口说明 #

调用视频智能剪辑算子提交剪辑任务，支持对公网、火山内网或 TOS 视频源文件进行智能剪辑，得到剪辑后的视频片段列表。

请求参数 #

返回数据 #

请求示例 #

curl --location "https://operator.las.cn-beijing.volces.com/api/v1/submit" \
--header "Content-Type: application/json" \
--header "Authorization: Bearer $LAS_API_KEY" \
--data '{
    "operator_id": "las_video_edit",
    "operator_version": "v1",
    "data": {
        "video_url": "https://las-ai-cn-beijing-baseline.tos-cn-beijing.volces.com/operator_cards_serving/public/baseline/shared_video_dataset/A_Quiet_Place_movie_clip.mp4.mp4",
        "task_description": "提取戴帽子的小男孩的所有片段，包含台词",
        "output_tos_path": "tos://las-ai-cn-beijing-baseline/operator_cards_serving/public/baseline/las_video_edit/v1",
        "segment_duration": 60,
        "mode": "normal"
    }
}'

返回示例 #

{
    "metadata": {
        "task_id": "task-20251125163544-abc123",
        "task_status": "PENDING",
        "business_code": "0",
        "error_msg": ""
    }
}

Poll #

接口说明 #

查询视频剪辑任务的执行状态和结果。

请求参数 #

返回数据 #

请求示例 #

curl --location "https://operator.las.cn-beijing.volces.com//api/v1/poll" \
--header "Content-Type: application/json" \
--header "Authorization: Bearer $LAS_API_KEY" \
--data '{
    "operator_id": "las_video_edit",
    "operator_version": "v1",
    "task_id": "task-20251125163544-abc123"
}'

返回示例 #

{
    "metadata": {
        "task_id": "task-20251125163544-abc123",
        "task_status": "COMPLETED",
        "business_code": "0",
        "error_msg": ""
    },
    "data": {
        "total_segments": 8,
        "clips": [
            {
                "clip_id": "clip_001",
                "start_time": "00:02:05.000",
                "end_time": "00:02:14.000",
                "duration": 9,
                "description": "柜台后出现戴帽子的小男孩，画面下方显示台词 。 戴帽子的小男孩坐在货架旁的地面上",
                "dialogue": "Tak apa",
                "clip_url": "tos://las-ai-cn-beijing-baseline/operator_cards_serving/public/baseline/las_video_edit/v1/clip_001.mp4",
                "file_size": 1993083,
                "confidence": 1,
                "meta": null
            },
            {
                "clip_id": "clip_002",
                "start_time": "00:02:27.000",
                "end_time": "00:02:30.000",
                "duration": 3,
                "description": "戴帽子的小男孩坐在货架旁的地面上，面向画面左侧",
                "dialogue": null,
                "clip_url": "tos://las-ai-cn-beijing-baseline/operator_cards_serving/public/baseline/las_video_edit/v1/clip_002.mp4",
                "file_size": 419782,
                "confidence": 1,
                "meta": null
            },
            {
                "clip_id": "clip_003",
                "start_time": "00:02:52.000",
                "end_time": "00:03:17.000",
                "duration": 25,
                "description": "女人走向坐在地面上戴帽子的小男孩，与他互动，喂他东西并触碰他的帽子 。 戴花纹针织帽的小男孩靠墙坐着，一位女性递给他一个水壶，他接过水壶喝水，之后开口说话",
                "dialogue": null,
                "clip_url": "tos://las-ai-cn-beijing-baseline/operator_cards_serving/public/baseline/las_video_edit/v1/clip_003.mp4",
                "file_size": 4616337,
                "confidence": 1,
                "meta": null
            },
            {
                "clip_id": "clip_004",
                "start_time": "00:03:26.000",
                "end_time": "00:03:51.000",
                "duration": 25,
                "description": "戴深色帽子的小男孩在超市的地面上，和另一个女孩一起蹲在地上互动玩耍，做出类似发射火箭的手势",
                "dialogue": "Roket",
                "clip_url": "tos://las-ai-cn-beijing-baseline/operator_cards_serving/public/baseline/las_video_edit/v1/clip_004.mp4",
                "file_size": 5612855,
                "confidence": 1,
                "meta": null
            },
            {
                "clip_id": "clip_005",
                "start_time": "00:03:56.000",
                "end_time": "00:04:02.000",
                "duration": 6,
                "description": "戴带红白条针织帽的小男孩说话，表达要离开这个星球的想法 。 戴帽子的小男孩站在货架前，说出台词，同时举起一根手指",
                "dialogue": "Itulah caranya..... Kita pergi dari Planet ini",
                "clip_url": "tos://las-ai-cn-beijing-baseline/operator_cards_serving/public/baseline/las_video_edit/v1/clip_005.mp4",
                "file_size": 1037987,
                "confidence": 1,
                "meta": null
            },
            {
                "clip_id": "clip_006",
                "start_time": "00:04:09.000",
                "end_time": "00:04:11.000",
                "duration": 2,
                "description": "戴帽子的小男孩露出笑容，随后跑动起来离开画面",
                "dialogue": null,
                "clip_url": "tos://las-ai-cn-beijing-baseline/operator_cards_serving/public/baseline/las_video_edit/v1/clip_006.mp4",
                "file_size": 456489,
                "confidence": 1,
                "meta": null
            },
            {
                "clip_id": "clip_007",
                "start_time": "00:04:31.000",
                "end_time": "00:04:41.000",
                "duration": 10,
                "description": "戴帽子的小男孩踩着箱子爬到货架旁，伸手去拿货架上的物品",
                "dialogue": null,
                "clip_url": "tos://las-ai-cn-beijing-baseline/operator_cards_serving/public/baseline/las_video_edit/v1/clip_007.mp4",
                "file_size": 2120459,
                "confidence": 1,
                "meta": null
            },
            {
                "clip_id": "clip_008",
                "start_time": "00:04:46.000",
                "end_time": "00:04:58.000",
                "duration": 12,
                "description": "戴帽子的小男孩站在女孩身旁，女孩看向他，之后小男孩伸手去拿货架上的物品",
                "dialogue": null,
                "clip_url": "tos://las-ai-cn-beijing-baseline/operator_cards_serving/public/baseline/las_video_edit/v1/clip_008.mp4",
                "file_size": 2910307,
                "confidence": 0.95,
                "meta": null
            }
        ],
        "video_duration": 300.091458,
        "resolution": "1920x800"
    }
}