视频混剪
描述
视频混剪支持普通混剪、大字报、成片打包和口播等业务模式。普通混剪和成片打包既可使用 full 一次完成,也可按 script → scene → tts → match → formula → vgn 分阶段调用;已知文案时可从 scene 或 tts 阶段开始。
版本
1.0
图片要求
输入为多媒体文件,支持 wav、m4a、mp4、mp3、aac 等格式。不同阶段所需媒体如下:
script、match阶段输入原始视频;scene、tts阶段可不输入媒体。formula阶段同时输入match产出的视频片段和tts产出的音频,并携带对应时长;视频片段还需携带分组 ID。vgn阶段使用formula阶段返回的配方。
调用 URL
正式环境:https://openapi.meitu.com
任务提交接口:https://openapi.meitu.com/api/v1/sdk/sync/push
任务名称(task):/v1/video_mashup/482418
任务类型(task_type):formula调用方法
POST
Content-Type: application/json
权限
请求参数
| 是否必选 | 参数名 | 类型 | 参数说明 |
|---|---|---|---|
| 必选 | params | string | 算法参数(JSON 字符串) |
| 必选 | init_images | object[] | 多媒体文件列表;无媒体输入的阶段仍需传空数组 |
| 必选 | task | string | 固定 /v1/video_mashup/482418 |
| 必选 | task_type | string | 固定 formula |
| 可选 | sync_timeout | int | 默认 30,同步超时时间 |
init_images 多媒体文件参数,结构说明如下
| 是否必选 | 参数名 | 类型 | 参数说明 |
|---|---|---|---|
| 必选 | url | string | 多媒体 URL 或 base64 |
| 必选 | profile | object | 属性信息描述 |
profile 属性信息描述
| 是否必选 | 参数名 | 类型 | 参数说明 |
|---|---|---|---|
| 必选 | media_profiles | object | 媒体属性信息 |
| 必选 | version | string | 固定 v1 |
media_profiles 媒体属性信息
| 是否必选 | 参数名 | 类型 | 参数说明 |
|---|---|---|---|
| 必选 | media_data_type | string | url 表示 URL;jpg、png 等类型表示 base64 |
| 可选 | media_data_duration | int | 媒体时长,单位毫秒;tts、match、formula 阶段使用 |
| 可选 | media_data_group_id | int | 匹配分组 ID;match、formula 阶段用于将素材归入同一匹配组 |
params 推理参数是 JSON 字符串,其结构说明如下
| 是否必选 | 字段 | 类型 | 说明 |
|---|---|---|---|
| 可选 | rsp_media_type | string | 默认 url;jpg 表示 base64 |
| 必选 | parameter | object | 算法核心参数对象 |
parameter 算法参数详情
| 是否必选 | 参数名 | 类型 | 默认值 | 参数说明 |
|---|---|---|---|---|
| 可选 | mode | string | mashup | 业务模式:mashup、concat、package、narration |
| 可选 | task_type | string | full | 算法阶段:full、script、scene、tts、match、formula、vgn;注意该字段位于 parameter 内,与顶层固定为 formula 的 task_type 不同 |
| 可选 | script | string | - | 口播或脚本文案;普通混剪全流程中不传时根据视频内容生成文案 |
| 可选 | has_caption | bool | true | 是否显示字幕 |
| 可选 | uid | string | - | 用户 ID;使用克隆音色时须与 timbre_id 同时传入 |
| 可选 | timbre_id | string | - | 音色或克隆音色 ID |
| 可选 | voice_speed | float | 1.0 | 全流程音色变速倍数 |
| 可选 | voice_volume | float | 1.0 | 口播音量 |
| 可选 | voice_emotion | string | - | 音色情感 |
| 可选 | language | string | chinese | 语言类型 |
| 可选 | canvas_resolution | object | - | 成片分辨率,结构如 {"width":1080,"height":1920};不传时按素材推断 |
| 可选 | target_duration | int | 15 | 成片目标时长,单位秒 |
| 可选 | font_size | int | - | 待支持 |
| 可选 | video_volume | float | 0.0 | 视频原声音量 |
| 可选 | music_url | string | - | 背景音乐外链地址 |
| 可选 | music_id | string | - | 平台音乐 ID |
| 可选 | music_volume | float | 1.0 | 背景音乐音量 |
| 条件必选 | script_scenes | string[] | - | tts 和 formula 阶段必选,分镜脚本字符串列表 |
| 可选 | speed | float | 1.0 | tts 阶段合成语速 |
| 条件必选 | script_data | object[] | - | match 阶段必选;每项包含 scene 文案和 duration 毫秒时长 |
| 条件必选 | formula | string/object | - | vgn 阶段必选,使用 formula 阶段返回的配方 JSON 字符串或对象;长字符串应由代码序列化,不要手工转义拼接 |
| 可选 | overlay_text | string | - | concat 大字报模式的字幕文案 |
| 可选 | location_y | string | top | 大字报位置:top、middle、bottom |
各算法阶段说明
| parameter.task_type | 用途 | 关键入参或产出 |
|---|---|---|
full | 一键完成混剪或打包全流程 | 输入素材;输出混剪成片和封面图 |
script | 根据视频生成脚本文案 | 输入视频,可使用 target_duration、language、timbre_id、uid |
scene | 将文案拆分为分镜 | script 必选;可不传媒体;返回语言和 script_scenes |
tts | 分镜合成语音 | script_scenes、timbre_id 必选;克隆音色还需 uid;返回逐分镜音频 |
match | 分镜匹配素材 | script_data 和原始视频;返回按 media_data_group_id 分组的切分视频片段 |
formula | 综合片段与音频生成配方 | 输入分镜、匹配片段和语音;返回 parameters.result.formula,该值也会出现在 data.parameter.result.formula |
vgn | 根据配方渲染成片 | formula 必选;输出成片和封面图 |
concat 模式支持视频拼接和大字报字幕,推荐使用 full,也可使用 vgn。
输入值示例
以下示例使用普通混剪一键出片;script 未传时,服务端根据视频内容生成文案。
{
"task": "/v1/video_mashup/482418",
"task_type": "formula",
"init_images": [
{
"url": "https://xiuxiu-pro-pre.meitudata.com/test_0520/60b619534ba1164446e95132cd858859.mp4",
"profile": {
"media_profiles": {
"media_data_type": "url"
},
"version": "v1"
}
}
],
"params": "{\"rsp_media_type\":\"url\",\"parameter\":{\"mode\":\"mashup\",\"task_type\":\"full\",\"canvas_resolution\":{\"width\":1080,\"height\":1920},\"has_caption\":true,\"target_duration\":15}}",
"sync_timeout": 30
}大字报模式可将 parameter 改为:
{
"task": "/v1/video_mashup/482418",
"task_type": "formula",
"init_images": [
{
"url": "https://mt-deepnet-models-release.oss-cn-beijing.aliyuncs.com/deepnet/cloud/3d70da04-7f38-11f1-86df-6a248def2af9.mp4",
"profile": {
"media_profiles": {
"media_data_type": "url"
},
"version": "v1"
}
}
],
"params": "{\"rsp_media_type\":\"url\",\"parameter\":{\"mode\":\"concat\",\"task_type\":\"full\",\"overlay_text\":\"广东话真是太神奇了今天又听\",\"location_y\":\"top\",\"canvas_resolution\":{\"width\":1080,\"height\":1920}}}",
"sync_timeout": 30
}返回值说明
注意,生成的结果,会定期清理,请及时下载保存| 字段 | 类型 | 说明 |
|---|---|---|
| request_id | string | 请求标识 |
| trace_id | string | 链路追踪标识 |
| code | int | 业务状态码,0 表示请求受理成功 |
| error_code | int | 错误码,成功时为 0 |
| message | string | 业务信息 |
| tips | any | 补充提示,可为 null |
| data | object | 任务状态和算法结果 |
data 中单个元素的字段说明
| 字段 | 类型 | 说明 |
|---|---|---|
| status | int | 状态码:-1 未找到任务;0 创建成功;1 执行中;2 失败;9 超时,使用查询接口查询;10 成功 |
| result | object | 算法结果 |
| progress | number | 任务进度,例如 0.1、0.85、1 |
| predict_elapsed | int | 预计耗时,毫秒 |
| create_time | int64 | 创建时间戳,毫秒 |
| task_id | string | 任务 ID |
| custom_task_id | string | 客户自定义任务 ID |
| trace_id | string | 链路追踪标识 |
| client_info | string | 客户端信息 |
| init_images | object[]/null | 输入媒体回显 |
result 中单个元素的字段说明
| 字段 | 类型 | 说明 |
|---|---|---|
| id | string | 任务 ID,与 data.task_id 相同 |
| urls | string[] | 成片、封面、音频或匹配片段等媒体 URL 列表,仅相应成功阶段存在 |
| images | string[] | 成片与封面等 URL 列表,与 urls 镜像 |
| msg | string | 结果描述,如 success 或错误信息 |
| msg_id | string | 消息 ID |
| parameters | object | 阶段标识及阶段结果;stage 可为 full、scene、tts、match、formula、vgn 等;scene 可返回 result.language 和 result.script_scenes,formula 返回 result.formula |
| parameter | object | 阶段详细结果,随算法阶段变化 |
| data | object | 结果详情 |
| mtlab_res | object | mtlab 结果,含 ErrorCode、ErrorMsg、error_code、error_msg、media_info_list、msg_id、parameter |
| media_info_list | object[]/null | 媒体信息列表,与 result.data.media_info_list 镜像 |
result.data 字段说明
| 字段 | 类型 | 说明 |
|---|---|---|
| duration | object | 算法处理和等待等耗时信息 |
| error_code | int | 算法错误码,0 表示无错误 |
| error_msg | string | 算法错误信息 |
| extra | object | 扩展信息,通常为空 |
| media_info_list | object[] | 媒体信息列表;空数组表示无媒体信息 |
| msg_id | string | 消息 ID |
| parameter | object | 阶段详细返回参数;formula 阶段的 result.formula 与 result.parameters.result.formula 相同 |
duration 字段说明
| 字段 | 类型 | 说明 |
|---|---|---|
| alg_process_time | int | 算法处理时间,毫秒 |
| created_timestamp | int | 创建时间戳,Unix 时间 |
| pull_timestamp | int | 拉取时间戳,Unix 时间 |
| repost_time | int | 重发时间,秒 |
| upload_time | int | 上传时间,秒 |
| waiting_time | int | 等待时间,秒 |
media_info_list 中单个元素的字段说明
| 字段 | 类型 | 说明 |
|---|---|---|
| media_data | string | 媒体 URL 或媒体数据 |
| media_extra | object | 媒体额外信息,可包含原媒体类型、媒体时长、匹配分组 ID 和分镜文案 |
| media_profiles | object | 输出媒体描述;URL 返回时 media_data_type 为 url |
返回值示例
请求成功返回示例
{
"request_id": "",
"trace_id": "",
"code": 0,
"error_code": 0,
"message": "success",
"tips": null,
"data": {
"status": 10,
"result": {
"id": "t_mt1a3i5n7b8918965f-189d-49f8-9272-58ef9a915763",
"urls": [
"https://mt-vgen-public-release.meitudata.com/stash/fomula_video_merge/2026-07-22/hkmazv2zjdapv7iq.mp4",
"https://mt-deepnet-models-release.oss-cn-beijing.aliyuncs.com/deepnet/cloud/f34bb8de-8579-11f1-800c-c6f4cabfa4a7.jpg"
],
"parameters": {
"stage": "full"
},
"data": {
"duration": {
"alg_process_time": 248844,
"created_timestamp": 1784689178,
"pull_timestamp": 1784689178,
"repost_time": 0,
"upload_time": 0,
"waiting_time": 64
},
"error_code": 0,
"error_msg": "success",
"extra": {},
"media_info_list": [
{
"media_data": "https://mt-vgen-public-release.meitudata.com/stash/fomula_video_merge/2026-07-22/hkmazv2zjdapv7iq.mp4",
"media_extra": {
"media_profiles": {
"media_data_type": "MP4"
}
},
"media_profiles": {
"media_data_type": "url"
}
},
{
"media_data": "https://mt-deepnet-models-release.oss-cn-beijing.aliyuncs.com/deepnet/cloud/f34bb8de-8579-11f1-800c-c6f4cabfa4a7.jpg",
"media_extra": {
"media_profiles": {
"media_data_type": "PNG"
}
},
"media_profiles": {
"media_data_type": "url"
}
}
],
"msg_id": "8267aeb5-c5a7-4078-6c4a-r009f30b78dc",
"parameter": {
"stage": "full"
}
},
"msg": "success",
"msg_id": "8267aeb5-c5a7-4078-6c4a-r009f30b78dc",
"images": [
"https://mt-vgen-public-release.meitudata.com/stash/fomula_video_merge/2026-07-22/hkmazv2zjdapv7iq.mp4",
"https://mt-deepnet-models-release.oss-cn-beijing.aliyuncs.com/deepnet/cloud/f34bb8de-8579-11f1-800c-c6f4cabfa4a7.jpg"
],
"mtlab_res": {
"ErrorCode": 0,
"ErrorMsg": "",
"error_code": 0,
"error_msg": "",
"media_info_list": null,
"msg_id": "8267aeb5-c5a7-4078-6c4a-r009f30b78dc",
"parameter": null
},
"media_info_list": [
{
"media_data": "https://mt-vgen-public-release.meitudata.com/stash/fomula_video_merge/2026-07-22/hkmazv2zjdapv7iq.mp4",
"media_extra": {
"media_profiles": {
"media_data_type": "MP4"
}
},
"media_profiles": {
"media_data_type": "url"
}
},
{
"media_data": "https://mt-deepnet-models-release.oss-cn-beijing.aliyuncs.com/deepnet/cloud/f34bb8de-8579-11f1-800c-c6f4cabfa4a7.jpg",
"media_extra": {
"media_profiles": {
"media_data_type": "PNG"
}
},
"media_profiles": {
"media_data_type": "url"
}
}
]
},
"progress": 1,
"predict_elapsed": 10000,
"create_time": 1784689177801,
"task_id": "t_mt1a3i5n7b8918965f-189d-49f8-9272-58ef9a915763",
"custom_task_id": "",
"trace_id": "",
"client_info": "",
"init_images": null
}
}需要查询返回示例
使用 查询接口 接口查询
Response Status:200
content-type 为 application/json; charset=utf-8
{
"request_id": "",
"trace_id": "",
"code": 0,
"error_code": 0,
"message": "success",
"tips": null,
"data": {
"status": 9,
"result": {
"id": "t_mt1a3i5n7b8918965f-189d-49f8-9272-58ef9a915763"
},
"progress": 0,
"predict_elapsed": 10000,
"create_time": 1784689177801,
"task_id": "t_mt1a3i5n7b8918965f-189d-49f8-9272-58ef9a915763",
"custom_task_id": "",
"trace_id": "3fb7de72-d400-49b3-837b-162836173e5e",
"client_info": "",
"init_images": null
}
}请求失败返回示例
Response Status:400
content-type 为 application/json; charset=utf-8
{
"request_id": "",
"trace_id": "",
"code": 20001,
"error_code": 20001,
"message": "PROCESS_ERROR",
"tips": null,
"data": {
"status": 2,
"result": {
"id": "t_mt1a3i5n7b8918965f-189d-49f8-9272-58ef9a915763",
"error_code": 20001,
"error_msg": "PROCESS_ERROR",
"msg": "PROCESS_ERROR"
},
"progress": 1,
"predict_elapsed": 10000,
"create_time": 1784689177801,
"task_id": "t_mt1a3i5n7b8918965f-189d-49f8-9272-58ef9a915763",
"custom_task_id": "",
"trace_id": "",
"client_info": "",
"init_images": null
}
}通用的错误代码与信息
当前 API 特有错误:20001(PROCESS_ERROR),表示处理错误。
详见 API 错误码
SDK 调用示例
以下四种语言使用相同的一键普通混剪请求:mode=mashup、算法阶段 task_type=full、目标时长 15 秒并显示字幕。
Python
import json
import requests
from sign_sdk import sign
def api_call_example():
key = "your_api_key"
secret = "your_api_secret"
url = "https://openapi.meitu.com/api/v1/sdk/sync/push"
method = "POST"
headers = {
"Content-Type": "application/json",
sign.HeaderHost: "openapi.meitu.com",
}
inner_params = {
"rsp_media_type": "url",
"parameter": {
"mode": "mashup",
"task_type": "full",
"target_duration": 15,
"has_caption": True,
},
}
payload = {
"task": "/v1/video_mashup/482418",
"task_type": "formula",
"init_images": [
{
"url": "https://xiuxiu-pro-pre.meitudata.com/test_0520/60b619534ba1164446e95132cd858859.mp4",
"profile": {
"media_profiles": {"media_data_type": "url"},
"version": "v1",
},
}
],
"params": json.dumps(inner_params, ensure_ascii=False),
"sync_timeout": 30,
}
body = json.dumps(payload, ensure_ascii=False)
signer = sign.Signer(key, secret)
signed_request = signer.sign(url, method, headers, body)
response = requests.Session().send(signed_request)
print(f"Status: {response.status_code}")
print(f"Response: {response.text}")
if __name__ == "__main__":
api_call_example()Go
package main
import (
"fmt"
"io"
"net/http"
"github.com/mtlab/api/signer"
)
func main() {
key := "your_api_key"
secret := "your_api_secret"
signObj := signer.NewSigner(key, secret)
url := "https://openapi.meitu.com/api/v1/sdk/sync/push"
method := http.MethodPost
headers := make(http.Header)
headers.Set(signer.HeaderHost, "openapi.meitu.com")
headers.Set("Content-Type", "application/json")
body := `{
"task": "/v1/video_mashup/482418",
"task_type": "formula",
"init_images": [{
"url": "https://xiuxiu-pro-pre.meitudata.com/test_0520/60b619534ba1164446e95132cd858859.mp4",
"profile": {
"media_profiles": {"media_data_type": "url"},
"version": "v1"
}
}],
"params": "{\"rsp_media_type\":\"url\",\"parameter\":{\"mode\":\"mashup\",\"task_type\":\"full\",\"target_duration\":15,\"has_caption\":true}}",
"sync_timeout": 30
}`
req, err := signObj.Sign(url, method, headers, body)
if err != nil {
fmt.Println("Failed to sign request:", err)
return
}
resp, err := http.DefaultClient.Do(req)
if err != nil {
fmt.Println("Failed to send request:", err)
return
}
defer resp.Body.Close()
responseBody, err := io.ReadAll(resp.Body)
if err != nil {
fmt.Println("Read response failed:", err)
return
}
fmt.Println("Response:", resp.StatusCode, string(responseBody))
}PHP
<?php
require 'signer.php';
$key = 'your_api_key';
$secret = 'your_api_secret';
$signer = new Signer($key, $secret);
$url = 'https://openapi.meitu.com/api/v1/sdk/sync/push';
$method = 'POST';
$headers = ['Content-Type' => 'application/json'];
$innerParams = json_encode([
'rsp_media_type' => 'url',
'parameter' => [
'mode' => 'mashup',
'task_type' => 'full',
'target_duration' => 15,
'has_caption' => true,
],
]);
$body = json_encode([
'task' => '/v1/video_mashup/482418',
'task_type' => 'formula',
'init_images' => [
[
'url' => 'https://xiuxiu-pro-pre.meitudata.com/test_0520/60b619534ba1164446e95132cd858859.mp4',
'profile' => [
'media_profiles' => ['media_data_type' => 'url'],
'version' => 'v1',
],
],
],
'params' => $innerParams,
'sync_timeout' => 30,
]);
$curl = $signer->sign($url, $method, $headers, $body);
$response = curl_exec($curl);
$status = curl_getinfo($curl, CURLINFO_HTTP_CODE);
if ($status === 0) {
echo 'Error: ' . curl_error($curl);
} else {
echo "Status: {$status}\n";
echo "Response: {$response}\n";
}
curl_close($curl);
?>Java
package com.meitu.openai.common;
import java.io.BufferedReader;
import java.io.InputStream;
import java.io.InputStreamReader;
import java.net.HttpURLConnection;
import java.net.URL;
import java.nio.charset.StandardCharsets;
import java.util.HashMap;
import java.util.Map;
public class Main {
public static void main(String[] args) throws Exception {
Signer signer = new Signer("your_api_key", "your_api_secret");
String url = "https://openapi.meitu.com/api/v1/sdk/sync/push";
String method = "POST";
Map<String, String> headers = new HashMap<>();
headers.put("Content-Type", "application/json");
headers.put(Signer.HeaderHost, "openapi.meitu.com");
String body = "{\n" +
" \"task\": \"/v1/video_mashup/482418\",\n" +
" \"task_type\": \"formula\",\n" +
" \"init_images\": [{\n" +
" \"url\": \"https://xiuxiu-pro-pre.meitudata.com/test_0520/60b619534ba1164446e95132cd858859.mp4\",\n" +
" \"profile\": {\n" +
" \"media_profiles\": {\"media_data_type\": \"url\"},\n" +
" \"version\": \"v1\"\n" +
" }\n" +
" }],\n" +
" \"params\": \"{\\\"rsp_media_type\\\":\\\"url\\\",\\\"parameter\\\":{\\\"mode\\\":\\\"mashup\\\",\\\"task_type\\\":\\\"full\\\",\\\"target_duration\\\":15,\\\"has_caption\\\":true}}\",\n" +
" \"sync_timeout\": 30\n" +
"}";
Map<String, String> signedHeaders = signer.sign(url, method, headers, body);
HttpURLConnection connection = (HttpURLConnection) new URL(url).openConnection();
connection.setRequestMethod(method);
for (Map.Entry<String, String> entry : signedHeaders.entrySet()) {
connection.setRequestProperty(entry.getKey(), entry.getValue());
}
connection.setDoOutput(true);
connection.getOutputStream().write(body.getBytes(StandardCharsets.UTF_8));
int status = connection.getResponseCode();
InputStream stream = status >= 400
? connection.getErrorStream()
: connection.getInputStream();
try (BufferedReader reader = new BufferedReader(new InputStreamReader(stream))) {
StringBuilder response = new StringBuilder();
String line;
while ((line = reader.readLine()) != null) {
response.append(line);
}
System.out.println("Response: " + status + " " + response);
}
}
}