cerevox 3.0.0-alpha.2 → 3.0.0-alpha.21
This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
- package/dist/core/ai.d.ts +36 -26
- package/dist/core/ai.d.ts.map +1 -1
- package/dist/core/ai.js +172 -14
- package/dist/core/ai.js.map +1 -1
- package/dist/mcp/servers/prompts/rules/anim.md +72 -0
- package/dist/mcp/servers/prompts/rules/creative-ad.md +2 -2
- package/dist/mcp/servers/prompts/rules/expert.md +2 -2
- package/dist/mcp/servers/prompts/rules/freeform.md +2 -2
- package/dist/mcp/servers/prompts/rules/general-video.md +2 -2
- package/dist/mcp/servers/prompts/rules/story-telling.md +2 -2
- package/dist/mcp/servers/prompts/skills/workflows/general-video.md +2 -2
- package/dist/mcp/servers/prompts/skills/workflows/music-video.md +2 -2
- package/dist/mcp/servers/zerocut.d.ts.map +1 -1
- package/dist/mcp/servers/zerocut.js +133 -81
- package/dist/mcp/servers/zerocut.js.map +1 -1
- package/dist/utils/coze.d.ts +8 -0
- package/dist/utils/coze.d.ts.map +1 -1
- package/dist/utils/coze.js +20 -0
- package/dist/utils/coze.js.map +1 -1
- package/package.json +1 -1
- package/dist/mcp/servers/prompts/rules/music-video.md +0 -164
- package/dist/mcp/servers/prompts/rules/stage-play.md +0 -269
|
@@ -0,0 +1,72 @@
|
|
|
1
|
+
# 漫剧创作模式
|
|
2
|
+
|
|
3
|
+
在该模式下,你只负责根据用户指令为用户生成漫剧素材,请**严格**按照以下规则执行:
|
|
4
|
+
|
|
5
|
+
## 通用规则
|
|
6
|
+
1. **忽略**所有创建 storyboard 的阶段,除非用户主动要求,不主动创建或修改 storyboard
|
|
7
|
+
2. **忽略**所有创建 draft_content 及合成视频阶段,除非用户主动要求,不执行 `compile-and-run` 指令
|
|
8
|
+
3. 所有素材的生成一律**跳过一致性检查**
|
|
9
|
+
4. 除了 `compile-and-run` 指令严格禁止主动执行外,其他一切工具均可按照用户需求自由调用。
|
|
10
|
+
5. 严格遵循用户的指令,一次执行最小步骤满足用户当前需求即可。
|
|
11
|
+
6. 生成素材命名不按照分镜规范(因为不需要生成分镜脚本),直接用语义明确的文件名命名,优先使用`递增数字ID_中文`的命名规则命名文件。
|
|
12
|
+
- 例如:`001_介绍.mp4`、`002_主体.mp4`、`003_结尾.mp4`等
|
|
13
|
+
|
|
14
|
+
## 漫剧启动规则
|
|
15
|
+
1. 检查本地素材目录下是否存在 .txt、.csv 文件,读取这些文件了解漫剧设定
|
|
16
|
+
2. 检查本地素材目录下预设的 xxx.png 文件,理解这些参考图
|
|
17
|
+
3. 根据漫剧设定和参考图,为用户创建“分镜剧情.md”文件,格式如下:
|
|
18
|
+
|
|
19
|
+
### 分镜剧情.md 示例
|
|
20
|
+
|
|
21
|
+
```
|
|
22
|
+
### 基础设定
|
|
23
|
+
风格:二次元日漫质感,色彩饱满鲜亮;
|
|
24
|
+
|
|
25
|
+
场景参考:
|
|
26
|
+
- 宴会厅.png
|
|
27
|
+
- 宴会厅原石.png;
|
|
28
|
+
|
|
29
|
+
人物设定:
|
|
30
|
+
- 林风.png:清瘦学生装扮,气质冷静
|
|
31
|
+
- 王浩.png:浮夸富二代造型,神态嚣张
|
|
32
|
+
- 苏沐雪.png:温婉气质少女,表情细腻
|
|
33
|
+
- 张伯.png:中年管家装扮,神态焦灼
|
|
34
|
+
- 富二代跟班.png:浮夸潮牌打扮,神态倨傲
|
|
35
|
+
|
|
36
|
+
|
|
37
|
+
### 分镜提示词
|
|
38
|
+
1. **中景 | 夜内宴会厅**
|
|
39
|
+
主体:
|
|
40
|
+
- 林风.png
|
|
41
|
+
场景:
|
|
42
|
+
- 宴会厅原石.png
|
|
43
|
+
画面:镜头平稳跟随“林风”,向场景中心的“宴会厅原石”移动,保持一步距离后停住站立;背景可见铺白桌布、套黄椅套的餐桌与水晶吊灯,氛围安静;伴随轻缓脚步声。
|
|
44
|
+
预估时长:12秒(依据:平稳移动镜头+简单站立动作,与前序分镜保持一致)
|
|
45
|
+
|
|
46
|
+
2. **近景 | 夜内宴会厅**
|
|
47
|
+
主体:
|
|
48
|
+
- 王浩.png
|
|
49
|
+
场景:
|
|
50
|
+
- 宴会厅.png
|
|
51
|
+
画面:“王浩”抱臂站立,嘴角勾起冷笑,眼神露出明显鄙夷,肢体姿态傲慢;背景虚化,聚焦其不屑的面部表情。
|
|
52
|
+
预估时长:8秒(依据:静态特写+微表情变化,动作复杂度低)
|
|
53
|
+
|
|
54
|
+
3. **近景 | 夜内宴会厅**
|
|
55
|
+
主体:
|
|
56
|
+
- 林风.png
|
|
57
|
+
场景:
|
|
58
|
+
- 宴会厅原石.png
|
|
59
|
+
画面:“林风”表情平静,视线落在前方“宴会厅原石”上,神态无波澜;背景为宴会厅虚化的金色墙面。
|
|
60
|
+
预估时长:6秒(依据:静态表情特写,无复杂动作)
|
|
61
|
+
|
|
62
|
+
...
|
|
63
|
+
```
|
|
64
|
+
|
|
65
|
+
4. 根据`分镜剧情.md`,使用参考生视频(generate-video-by-ref)工具,为每个分镜生成视频素材。
|
|
66
|
+
|
|
67
|
+
## 注意事项
|
|
68
|
+
|
|
69
|
+
1. 根据设定,一次性生成所有分镜剧情,不要分多次生成。
|
|
70
|
+
2. 分镜的主体、场景素材必须分开整理,且与用户提供的素材文件名完全一致,格式严格按照例子中的格式。
|
|
71
|
+
3. 画面中引用的主体和场景,需要用引号包裹,且名字与用户提供的素材文件名完全一致。
|
|
72
|
+
4. 生成完`分镜剧情.md`后,先和用户确认内容,准确无误后再开始依次生成视频素材
|
|
@@ -45,7 +45,7 @@
|
|
|
45
45
|
* 台词:使用人物名称或角色标识,如"小明:妈妈,这个玩具真好玩!" 或 "顾客:这个效果太棒了!"
|
|
46
46
|
* **画面 ("start_frame"字段):** 为每个分镜构思详细的首帧画面。画风必须贴合用户诉求、商品定位和故事氛围。描述需包含构图、光影、色彩、角色神态、商品展示等关键视觉要素,达到可直接用于图片生成的标准。注意画面描述必须与文案紧密贴合,共同服务于情绪传递和商品展示。
|
|
47
47
|
* **动画 ("video_prompt"字段):** 为每个分镜构思详细的动画描述。动画必须与画面作为首帧,描述紧密贴合,共同服务于情绪传递和商品展示。动画必须具备专业的镜头感和视觉效果,如镜头语言、运动、情感、动作等,也要考虑商品的展示效果。
|
|
48
|
-
9. 分镜整合输出: `get-schema
|
|
48
|
+
9. 分镜整合输出: `get-schema(type: storyboard)` 获取分镜规范 → 整合以上内容,创建初始 storyboard.json
|
|
49
49
|
10. **素材生成(根据选择的模式):**
|
|
50
50
|
**模式一:批量图片生成**
|
|
51
51
|
* 分组场景图片 `generate-image-serials` (一次性生成所有分镜图片)
|
|
@@ -58,7 +58,7 @@
|
|
|
58
58
|
* 配音 `generate-scene-tts` (⚠️ 务必严格采用storyboard中场景的script或dialog作为配音输入文本)
|
|
59
59
|
* 视频 `generate-video`
|
|
60
60
|
* 背景音乐 `generate-music`
|
|
61
|
-
11. 技术规范 → 调用 `get-schema
|
|
61
|
+
11. 技术规范 → 调用 `get-schema(type: draft_content)` 获取draft_content规范 → 根据规范创建 draft_content.json
|
|
62
62
|
12. 执行渲染 → `compile-and-run` 输出成品并自动下载到本地
|
|
63
63
|
13. 关闭项目 → `project-close`
|
|
64
64
|
|
|
@@ -36,7 +36,7 @@
|
|
|
36
36
|
|
|
37
37
|
**Action**
|
|
38
38
|
1) 与用户确认思路是否正确且符合需求
|
|
39
|
-
2) 调用`get-schema
|
|
39
|
+
2) 调用`get-schema(type: storyboard)`获取分镜规范
|
|
40
40
|
3) 根据确认结果创建项目目录下的 storyboard.json 文件
|
|
41
41
|
4) Review 生成的 storyboard.json 文件,对其进行初步优化
|
|
42
42
|
你可以做的优化动作:
|
|
@@ -167,7 +167,7 @@
|
|
|
167
167
|
|
|
168
168
|
**Action**
|
|
169
169
|
1) 将检查结果与用户确认,必要时更新 storyboard.json
|
|
170
|
-
2) 调用 `get-schema
|
|
170
|
+
2) 调用 `get-schema(type: draft_content)` 获取 draft_content 规范
|
|
171
171
|
3) 根据确认的结果创建 draft_content.json 文件(务必要先获取 schema)
|
|
172
172
|
4) 将当前的执行结果记录在 action_logs.json 中
|
|
173
173
|
5) 调用 `compile-and-run` 最终合成视频并下载
|
|
@@ -87,7 +87,7 @@
|
|
|
87
87
|
|
|
88
88
|
### 分镜构思
|
|
89
89
|
|
|
90
|
-
- 如果用户和你讨论视频剧情,或者已经有明确的场景想法,你使用 `'get-schema
|
|
90
|
+
- 如果用户和你讨论视频剧情,或者已经有明确的场景想法,你使用 `'get-schema(type: storyboard)` 工具来获知如何创建故事板,然后用故事板来帮助用户构思视频分镜
|
|
91
91
|
- 在所有和剧情、设定有关的问题时,你都要先理解用户想法然后更新故事板,并与用户确认
|
|
92
92
|
- 尤其是在生成素材前,能更新故事板就及时更新,以免后续遗忘信息,造成不一致
|
|
93
93
|
|
|
@@ -118,7 +118,7 @@
|
|
|
118
118
|
#### 后期制作和视频处理工具
|
|
119
119
|
- `generate-music`:你可以用这个工具生成适合视频内容风格的BGM
|
|
120
120
|
- `audio-video-sync`:音画(唇形)同步工具,你可以使用这个工具合并音频视频,或者为人物对口型
|
|
121
|
-
- `get-schema
|
|
121
|
+
- `get-schema(type: draft_content)`:你执行这个工具获取视频剪辑合成的JSON格式规范,用该规范创建 draft_content.json 文件,然后通过这个文件进行视频合成
|
|
122
122
|
- `compile-and-run`:你执行这个工具编译并运行 draft_content.json 文件,生成视频
|
|
123
123
|
- `run-ffmpeg`:你可以使用这个工具执行任意ffmpeg命令,这在需要对视频进行更复杂处理时非常有用
|
|
124
124
|
|
|
@@ -8,14 +8,14 @@
|
|
|
8
8
|
|
|
9
9
|
1. 确保项目已正确开启:`project-open` 已被调用
|
|
10
10
|
2. 根据剧情设计选择语音 → 使用 `search-voices` 选择合适的配音音色,若用户指定了voice_id,则直接使用该音色ID,无需验证
|
|
11
|
-
3. 剧本规范 → 调用`get-schema
|
|
11
|
+
3. 剧本规范 → 调用`get-schema(type: storyboard)`获取分镜规范 → 编写 storyboard.json(受众、脚本、风格、角色、场景)
|
|
12
12
|
4. 剧本润色 → 检查并修改剧本的角色,确保每个场景角色的外貌、妆造、衣着特征在 start_frame 中描述完整以保证一致性
|
|
13
13
|
5. 素材生成(严格按顺序)
|
|
14
14
|
1) 配音 `generate-scene-tts`
|
|
15
15
|
2) 图片 `generate-image` + 视频 `generate-video`
|
|
16
16
|
或 `generate-video-by-ref` 参考图生视频
|
|
17
17
|
3) 背景音乐 `generate-music`
|
|
18
|
-
6. 技术规范 → 调用`get-schema
|
|
18
|
+
6. 技术规范 → 调用`get-schema(type: draft_content)`获取draft_content规范 → 根据规范创建 draft_content.json
|
|
19
19
|
7. 执行渲染 → `compile-and-run` 输出成品并自动下载到本地
|
|
20
20
|
8. 关闭项目 → `project-close`
|
|
21
21
|
|
|
@@ -19,7 +19,7 @@
|
|
|
19
19
|
* **文案 ("script"字段):** 为每个分镜创作具备情感穿透力的文案。文案必须与画面描述紧密贴合,共同服务于情绪的传递。**禁止在文案中使用任何英文引号 ("")**。
|
|
20
20
|
* **画面 ("start_frame"字段):** 为每个分镜构思详细的首帧画面。画风必须贴合用户诉求和故事氛围。描述需包含构图、光影、色彩、角色神态等关键视觉要素,达到可直接用于图片生成的标准。注意画面避免在运动、情感等处**锁死**,必须留有视频发挥的余地,比如人物哭泣,不要在一开始就让角色号啕大哭,动作、姿势、表情等也不要一开始就达到高潮,记住这只是首帧图片,需要为后续动画留有余地。
|
|
21
21
|
* **动画 ("video_prompt"字段):** 为每个分镜构思详细的动画描述。动画必须与以画面作为首帧,描述紧密贴合,共同服务于情绪的传递。动画必须具备专业的镜头感和视觉效果,如镜头语言、运动、情感、动作等,也要考虑到光影和特效,且必须考虑到用户诉求和故事氛围。
|
|
22
|
-
8. 分镜整合输出: `get-schema
|
|
22
|
+
8. 分镜整合输出: `get-schema(type: storyboard)` 获取分镜规范 → 整合以上内容,创建初始 storyboard.json
|
|
23
23
|
9. **素材生成(根据选择的模式):**
|
|
24
24
|
**模式一:批量图片生成**
|
|
25
25
|
* 分组场景图片 `generate-image-serials` (一次性生成所有分镜图片)
|
|
@@ -32,7 +32,7 @@
|
|
|
32
32
|
* 配音 `generate-scene-tts` (⚠️ 务必严格采用storyboard中场景的script或dialog作为配音输入文本)
|
|
33
33
|
* 视频 `generate-video`
|
|
34
34
|
* 背景音乐 `generate-music`
|
|
35
|
-
10. 技术规范 → 调用`get-schema
|
|
35
|
+
10. 技术规范 → 调用`get-schema(type: draft_content)`获取 draft_content 规范 → 根据规范创建 draft_content.json
|
|
36
36
|
11. 执行渲染 → `compile-and-run` 输出成品并自动下载到本地
|
|
37
37
|
12. 关闭项目 → `project-close`
|
|
38
38
|
|
|
@@ -13,14 +13,14 @@ description: 制作通用视频时,可以根据用户需求,按照这个流
|
|
|
13
13
|
|
|
14
14
|
1. 确保项目已正确开启:`project-open` 已被调用
|
|
15
15
|
2. 根据剧情设计选择语音 → 使用 `search-voices` 选择合适的配音音色,若用户指定了voice_id,则直接使用该音色ID,无需验证
|
|
16
|
-
3. 剧本规范 → 调用`get-schema
|
|
16
|
+
3. 剧本规范 → 调用`get-schema(type: storyboard)`获取分镜规范 → 编写 storyboard.json(受众、脚本、风格、角色、场景)
|
|
17
17
|
4. 剧本润色 → 检查并修改剧本的角色,确保每个场景角色的外貌、妆造、衣着特征在 start_frame 中描述完整以保证一致性
|
|
18
18
|
5. 素材生成(严格按顺序)
|
|
19
19
|
1) 配音 `generate-scene-tts`
|
|
20
20
|
2) 图片 `generate-image` + 视频 `generate-video`
|
|
21
21
|
或 `generate-video-by-ref` 参考图生视频
|
|
22
22
|
3) 背景音乐 `generate-music`
|
|
23
|
-
6. 技术规范 → 调用`get-schema
|
|
23
|
+
6. 技术规范 → 调用`get-schema(type: draft_content)`获取 draft_content 规范 → 根据规范创建 draft_content.json
|
|
24
24
|
7. 执行渲染 → `compile-and-run` 输出成品并自动下载到本地
|
|
25
25
|
8. 关闭项目 → `project-close`
|
|
26
26
|
|
|
@@ -14,11 +14,11 @@ description: 创作专业音乐MV,基于 Zerocut 自主完成音乐MV成片的
|
|
|
14
14
|
3. 音乐创作 → 根据主题构思音乐氛围 → 创作歌词 lyrics.txt
|
|
15
15
|
4. 音乐生成 → 根据 lyrics.txt 调用 `generate-music` → 获得歌曲和 captions
|
|
16
16
|
5. 分析歌曲 → 创建 timeline_analysis.json 得到 captions 的时间线
|
|
17
|
-
6. 设计分镜场景 → `get-schema
|
|
17
|
+
6. 设计分镜场景 → `get-schema(type: storyboard)` 获取分镜规范 → 创建初始 storyboard.json
|
|
18
18
|
7. 主要角色形象塑造 → `generate-character-image` → 生成主要角色形象参考图(三视图)
|
|
19
19
|
8. 分镜首帧生成 → `generate-image` → 生成各场景分镜首帧
|
|
20
20
|
9. 首尾帧视频生成 → `generate-video` → **可选择使用连续镜头方式**:根据创意需要,可以选择以下一场景的 start_frame 作为上一场景的 end_frame 来实现场景间连续性,或采用独立场景切换方式,每段视频的实际时长应匹配 timeline_analysis 中 proposed_video_scenes 对应场景的 video_duration_s
|
|
21
|
-
10. 技术规范 → 调用`get-schema
|
|
21
|
+
10. 技术规范 → 调用`get-schema(type: draft_content)`获取 draft_content 规范 → 根据规范创建 draft_content.json
|
|
22
22
|
11. 执行渲染 → `compile-and-run` 输出成品并自动下载到本地
|
|
23
23
|
12. 关闭项目 → `project-close`
|
|
24
24
|
|
|
@@ -1 +1 @@
|
|
|
1
|
-
{"version":3,"file":"zerocut.d.ts","sourceRoot":"","sources":["../../../src/mcp/servers/zerocut.ts"],"names":[],"mappings":";
|
|
1
|
+
{"version":3,"file":"zerocut.d.ts","sourceRoot":"","sources":["../../../src/mcp/servers/zerocut.ts"],"names":[],"mappings":";AA0+KA,wBAAsB,GAAG,kBAKxB"}
|