
用Claude Code/Codex/Hermes等AI代理剪辑视频,扔素材进文件夹聊天就能拿到成片,自动去填充词调色加字幕,15.8k Stars
video-use — 用 AI 代理剪辑视频
browser-use 团队出品,用 Claude Code / Codex / Hermes 等任何 AI 代理来剪辑视频。把原始素材扔进文件夹,跟 AI 聊天,拿回 final.mp4。15.8k Stars,MIT 开源。
核心能力
- 自动去除填充词:umm、uh、错误开头、拍摄间的死空气
- 自动调色:每段素材自动 color grade(暖电影风、中性对比风或自定义 ffmpeg 链)
- 30ms 音频淡入淡出:每个剪辑点自动加,永远不会听到爆音
- 烧录字幕:默认2词大写分块,完全可自定义样式
- 动画覆盖层:通过 HyperFrames、Remotion、Manim 或 PIL 生成动画效果,每个动画由独立子代理并行生成
- 自评估循环:渲染后在每个剪辑点运行检查,发现视觉跳跃、音频爆音、隐藏字幕问题会自动修复(最多3轮)
- 会话记忆:项目状态持久化到 project.md,下次继续
工作原理
LLM 不看视频,而是"读"视频——通过两层结构化数据:
- 音频转录(始终加载):ElevenLabs Scribe 提供词级时间戳、说话人分离、音频事件。所有片段打包成 ~12KB 的
takes_packed.md - 视觉合成(按需加载):生成胶片条 + 波形 + 词标签的 PNG,只在决策点调用
朴素方法:30,000帧 × 1,500 token = 45M token 噪音。video-use:12KB 文本 + 少量 PNG。
流程
转录 → 打包 → LLM 推理 → EDL → 渲染 → 自评估
└─ 有问题?修复+重新渲染(最多3次)
快速安装
# Claude Code 一键安装——直接粘贴到 Claude Code:
Set up https://github.com/browser-use/video-use for me.
# 手动安装
git clone https://github.com/browser-use/video-use ~/Developer/video-use
ln -sfn ~/Developer/video-use ~/.claude/skills/video-use
cd ~/Developer/video-use
uv sync # 或 pip install -e .
brew install ffmpeg # 必须
brew install yt-dlp # 可选,下载在线素材
cp .env.example .env # 配置 ElevenLabs API Key
使用
cd /path/to/your/videos
claude # 或 codex、hermes 等
# 然后说:"把这些素材剪辑成发布视频"
AI 会自动盘点素材、提出策略、等你确认后输出 edit/final.mp4。
支持的 AI 代理
Claude Code、Codex、Hermes、OpenClaw,任何有 shell 访问权限的 AI 代理都能用。
暂无评论
