@optima-chat/optima-agent 0.9.12 → 0.9.13
This diff represents the content of publicly available package versions that have been released to one of the supported registries. The information contained in this diff is provided for informational purposes only and reflects changes between package versions as they appear in their respective public registries.
|
@@ -1,6 +1,6 @@
|
|
|
1
1
|
---
|
|
2
2
|
name: video-gen
|
|
3
|
-
description: "帮商家用 AI 生成产品视频（社媒投放 / 产品详情页 /
|
|
3
|
+
description: "帮商家用 AI 生成产品视频（社媒投放 / 产品详情页 / 数字人口播 / 视频翻译本地化）。触发场景：用户要做视频(做视频/生成视频/产品视频/宣传视频/图生视频)、用户给视频链接+产品图要复刻(复刻/翻拍/仿拍/做同款/爆款复刻)、用户给产品图想发社媒(TikTok视频/IG视频/短视频)、用户给产品图想放详情页(PDP视频/产品展示视频)、用户要数字人/口播/真人讲解/talking head视频、用户要把视频翻译成其他语言(视频翻译/视频本地化/换语言/dub/lip-sync翻译/英文版/多语言版本)。"
|
|
4
4
|
---
|
|
5
5
|
|
|
6
6
|
# Video Generation Skill
|
|
@@ -619,6 +619,96 @@ gen video --provider heygen \
|
|
|
619
619
|
- 数字人视频生成约 2-5 分钟
|
|
620
620
|
- 可与 Sora2 产品镜头混合剪辑（数字人做 intro/outro，产品展示用 Sora2）
|
|
621
621
|
|
|
622
|
+
## 视频翻译（多语言本地化）
|
|
623
|
+
|
|
624
|
+
### 触发场景
|
|
625
|
+
|
|
626
|
+
用户说「翻译这个视频 / 把视频翻成英文 / 视频做英文版 / 多语言版本 / 给视频换语言 / dub / lip-sync 翻译」。
|
|
627
|
+
|
|
628
|
+
### 命令
|
|
629
|
+
|
|
630
|
+
```bash
|
|
631
|
+
# 基本用法（自动 lip-sync + 克隆原说话人声音，无需额外参数）
|
|
632
|
+
gen video-translate \
|
|
633
|
+
--video-url <视频URL> \
|
|
634
|
+
--lang "<目标语言>" \
|
|
635
|
+
-o videos/translated.mp4
|
|
636
|
+
```
|
|
637
|
+
|
|
638
|
+
### 常用目标语言
|
|
639
|
+
|
|
640
|
+
⚠️ 必须用 HeyGen 官方人类可读名（不是 ISO 码），常用：
|
|
641
|
+
|
|
642
|
+
| 语言 | 参数值 |
|
|
643
|
+
|---|---|
|
|
644
|
+
| 英语 | `"English"` |
|
|
645
|
+
| 简体中文 | `"Chinese (Mandarin, Simplified)"` |
|
|
646
|
+
| 繁体中文 | `"Chinese (Mandarin, Traditional)"` |
|
|
647
|
+
| 西班牙语 | `"Spanish"` |
|
|
648
|
+
| 法语 | `"French"` |
|
|
649
|
+
| 德语 | `"German"` |
|
|
650
|
+
| 日语 | `"Japanese"` |
|
|
651
|
+
| 韩语 | `"Korean"` |
|
|
652
|
+
| 葡萄牙语（巴西） | `"Portuguese (Brazil)"` |
|
|
653
|
+
|
|
654
|
+
HeyGen 支持 30+ 种语言，完整列表见 https://docs.heygen.com/reference/list-supported-languages
|
|
655
|
+
|
|
656
|
+
### 可选参数
|
|
657
|
+
|
|
658
|
+
| 参数 | 说明 |
|
|
659
|
+
|---|---|
|
|
660
|
+
| `--mode quality` | 高质量模式（比 fast 慢 + 贵 2x credits，效果更好） |
|
|
661
|
+
| `--audio-only` | 只翻译音频，不做 lip-sync（适合 off-screen 解说视频） |
|
|
662
|
+
| `--speaker-num <n>` | 说话人数量（多人对话场景） |
|
|
663
|
+
| `--title <title>` | 视频标题 |
|
|
664
|
+
| `--dynamic-duration` | 允许调整时长适配不同语言语速 |
|
|
665
|
+
| `--keep-format` | 保留原视频分辨率/格式 |
|
|
666
|
+
| `--brand-voice-id <id>` | Brand voice ID（自定义术语/发音规则） |
|
|
667
|
+
|
|
668
|
+
### 视频源处理
|
|
669
|
+
|
|
670
|
+
- **公开 URL**：直接传给 `--video-url`
|
|
671
|
+
- **工作区本地视频**：先用 `/api/user/files/share` 生成签名 URL（30 分钟有效，足够 HeyGen 拉取）：
|
|
672
|
+
```bash
|
|
673
|
+
TOKEN=$(jq -r .access_token ~/.optima/token.json)
|
|
674
|
+
SIGNED_URL=$(curl -s -X POST "$SESSION_GATEWAY_URL/api/user/files/share?path=/home/aiuser/videos/source.mp4" \
|
|
675
|
+
-H "Authorization: Bearer $TOKEN" | jq -r .url)
|
|
676
|
+
gen video-translate --video-url "$SIGNED_URL" --lang "English" -o videos/en.mp4
|
|
677
|
+
```
|
|
678
|
+
|
|
679
|
+
### 使用示例
|
|
680
|
+
|
|
681
|
+
```bash
|
|
682
|
+
# 把中文产品介绍翻成英文（默认 fast 模式，自动克隆原声）
|
|
683
|
+
gen video-translate \
|
|
684
|
+
--video-url https://store.example.com/intro-zh.mp4 \
|
|
685
|
+
--lang "English" \
|
|
686
|
+
--title "Product Intro EN" \
|
|
687
|
+
-o videos/intro-en.mp4
|
|
688
|
+
|
|
689
|
+
# 高质量模式（适合发到主流量平台）
|
|
690
|
+
gen video-translate \
|
|
691
|
+
--video-url <url> \
|
|
692
|
+
--lang "Spanish" \
|
|
693
|
+
--mode quality \
|
|
694
|
+
-o videos/es.mp4
|
|
695
|
+
|
|
696
|
+
# 多人访谈翻译（不做 lip-sync，只换音轨）
|
|
697
|
+
gen video-translate \
|
|
698
|
+
--video-url <url> \
|
|
699
|
+
--lang "Japanese" \
|
|
700
|
+
--speaker-num 2 \
|
|
701
|
+
--audio-only \
|
|
702
|
+
-o videos/ja.mp4
|
|
703
|
+
```
|
|
704
|
+
|
|
705
|
+
### 注意事项
|
|
706
|
+
|
|
707
|
+
- **自动克隆原说话人声音**：HeyGen 默认就做，无需开关，也无法关闭
|
|
708
|
+
- 生成时间 5-20 分钟（取决于视频长度），HeyGen 平台限制无法加速
|
|
709
|
+
- 输出 URL 在 HeyGen 侧只有 7 天有效期，命令会自动下载到工作区
|
|
710
|
+
- 一次只能翻译一种语言；要多语言版本就分多次跑
|
|
711
|
+
|
|
622
712
|
## 相关工具
|
|
623
713
|
|
|
624
714
|
- `gen video` — 图/文 → 视频
|
|
@@ -33,7 +33,7 @@ export function getSystemPrompt() {
|
|
|
33
33
|
- **homepage** - 店铺首页配置（Banner、集合展示）
|
|
34
34
|
- **product-page** - 商品详情页配置
|
|
35
35
|
- **gen** - 图像/语音生成（图片、TTS、ASR、虚拟试穿）
|
|
36
|
-
- **video-gen** - AI
|
|
36
|
+
- **video-gen** - AI 视频生成（产品视频、数字人口播、爆款复刻、视频翻译本地化），适合用户说"做视频/生成视频/数字人/口播/talking head/视频翻译/换语言/dub"的场景
|
|
37
37
|
- **markdown-pdf** - Markdown 转 PDF（文档导出、报告生成）
|
|
38
38
|
- **ffmpeg** - 音视频**精确操作**（截取指定时间段、压缩、格式转换、提取音频、生成缩略图、拼接）—— 仅当用户明确说具体操作时用
|
|
39
39
|
- **video-edit** - 🎬 **口播/talking-head 视频智能剪辑**（自动转写 → 删卡顿停顿/NG/废话 → 烧字幕）。**用户给已有视频说"剪一下/帮我剪辑/去卡顿/变流畅/剪短点/加字幕"等模糊指令时首选**，优先级高于 ffmpeg
|
|
@@ -54,7 +54,7 @@ export function getSystemPrompt() {
|
|
|
54
54
|
- 用户："查看我的店铺信息" - 使用 Skill 工具加载 "merchant"
|
|
55
55
|
- 用户："帮我创建一个商品" - 使用 Skill 工具加载 "product"
|
|
56
56
|
- 用户："生成一张产品图片" - 使用 Skill 工具加载 "gen"
|
|
57
|
-
- 用户："做一个产品视频" / "生成数字人视频" / "口播视频" - 使用 Skill 工具加载 "video-gen"
|
|
57
|
+
- 用户："做一个产品视频" / "生成数字人视频" / "口播视频" / "把视频翻译成英文" / "视频做个英文版" - 使用 Skill 工具加载 "video-gen"
|
|
58
58
|
- 用户："包裹到哪了" / "查物流" - 使用 Skill 工具加载 "order"
|
|
59
59
|
- 用户："连接我的 Shopify 店铺" / "看看 Shopify 商品" - 使用 Skill 工具加载 "shopify"
|
|
60
60
|
- 用户："Reddit 上什么趋势" / "看看 Reddit 上关于XX的讨论" - 使用 Skill 工具加载 "reddit"
|