video-use — AI代理剪辑视频

video-use — AI代理剪辑视频


用Claude Code/Codex/Hermes等AI代理剪辑视频,扔素材进文件夹聊天就能拿到成片,自动去填充词调色加字幕,15.8k Stars

video-use — 用 AI 代理剪辑视频

browser-use 团队出品,用 Claude Code / Codex / Hermes 等任何 AI 代理来剪辑视频。把原始素材扔进文件夹,跟 AI 聊天,拿回 final.mp4。15.8k Stars,MIT 开源。

核心能力

  • 自动去除填充词:umm、uh、错误开头、拍摄间的死空气
  • 自动调色:每段素材自动 color grade(暖电影风、中性对比风或自定义 ffmpeg 链)
  • 30ms 音频淡入淡出:每个剪辑点自动加,永远不会听到爆音
  • 烧录字幕:默认2词大写分块,完全可自定义样式
  • 动画覆盖层:通过 HyperFrames、Remotion、Manim 或 PIL 生成动画效果,每个动画由独立子代理并行生成
  • 自评估循环:渲染后在每个剪辑点运行检查,发现视觉跳跃、音频爆音、隐藏字幕问题会自动修复(最多3轮)
  • 会话记忆:项目状态持久化到 project.md,下次继续

工作原理

LLM 不看视频,而是"读"视频——通过两层结构化数据:

  1. 音频转录(始终加载):ElevenLabs Scribe 提供词级时间戳、说话人分离、音频事件。所有片段打包成 ~12KB 的 takes_packed.md
  2. 视觉合成(按需加载):生成胶片条 + 波形 + 词标签的 PNG,只在决策点调用

朴素方法:30,000帧 × 1,500 token = 45M token 噪音。video-use:12KB 文本 + 少量 PNG。

流程

转录 → 打包 → LLM 推理 → EDL → 渲染 → 自评估
                                          └─ 有问题?修复+重新渲染(最多3次)

快速安装

# Claude Code 一键安装——直接粘贴到 Claude Code:
Set up https://github.com/browser-use/video-use for me.

# 手动安装
git clone https://github.com/browser-use/video-use ~/Developer/video-use
ln -sfn ~/Developer/video-use ~/.claude/skills/video-use
cd ~/Developer/video-use
uv sync              # 或 pip install -e .
brew install ffmpeg  # 必须
brew install yt-dlp  # 可选,下载在线素材
cp .env.example .env # 配置 ElevenLabs API Key

使用

cd /path/to/your/videos
claude    # 或 codex、hermes 等
# 然后说:"把这些素材剪辑成发布视频"

AI 会自动盘点素材、提出策略、等你确认后输出 edit/final.mp4

支持的 AI 代理

Claude Code、Codex、Hermes、OpenClaw,任何有 shell 访问权限的 AI 代理都能用。

GitHub: https://github.com/browser-use/video-use

9000举报0Xiao.Xi1个月前
点击获取 ^_^
被收录:

暂无评论