1 工具速览
ClipSketch AI：把B站/小红书视频一键变成手绘分镜并自动生成爆款文案的开源神器。
ClipSketch AI：把B站/小红书视频一键变成手绘分镜并自动生成爆款文案的开源神器。
2 主要功能
1 视频解析与关键帧提取：粘贴B站或小红书链接即可自动下载视频，并用算法抽取出最具代表性的关键帧。
2 手绘故事板生成：将关键帧转为统一手绘线稿风格，支持多种笔刷与配色主题。
3 文案一键输出：基于视频字幕与画面内容，自动写出短视频标题、口播脚本、小红书笔记文案，可选“爆款”或“科普”等风格。
4 本地纯前端部署：无需后端服务器，浏览器里即可完成全部流程；也提供Docker镜像方便内网部署。
5 开源可二次开发：MIT协议，代码结构清晰，可自由替换绘图模型或接入其他LLM。
1 视频解析与关键帧提取：粘贴B站或小红书链接即可自动下载视频，并用算法抽取出最具代表性的关键帧。
2 手绘故事板生成：将关键帧转为统一手绘线稿风格，支持多种笔刷与配色主题。
3 文案一键输出：基于视频字幕与画面内容，自动写出短视频标题、口播脚本、小红书笔记文案，可选“爆款”或“科普”等风格。
4 本地纯前端部署：无需后端服务器，浏览器里即可完成全部流程；也提供Docker镜像方便内网部署。
5 开源可二次开发：MIT协议，代码结构清晰，可自由替换绘图模型或接入其他LLM。
3 技术原理
1 视频抽帧：使用FFmpeg.wasm在浏览器端解封装与抽帧，结合帧间差分与CNN美学评分筛选关键帧。
2 风格化绘图：调用Google Gemini API（或本地Stable Diffusion）进行“line-art”风格迁移，生成手绘线稿。
3 文案生成：把ASR字幕+关键帧标签送入Gemini Pro，通过Prompt模板输出多平台文案。
4 前后端分离：React+Vite纯前端实现，所有运算可在本地GPU或云端API完成，无数据泄露风险。
1 视频抽帧：使用FFmpeg.wasm在浏览器端解封装与抽帧，结合帧间差分与CNN美学评分筛选关键帧。
2 风格化绘图：调用Google Gemini API（或本地Stable Diffusion）进行“line-art”风格迁移，生成手绘线稿。
3 文案生成：把ASR字幕+关键帧标签送入Gemini Pro，通过Prompt模板输出多平台文案。
4 前后端分离：React+Vite纯前端实现，所有运算可在本地GPU或云端API完成，无数据泄露风险。
4 应用场景
1 短视频运营：快速把长视频拆成手绘剧情预告，挂抖音/B站二创区引流。
2 小红书笔记：将vlog生成手绘分镜+种草文案，一键发图文笔记。
3 教学/培训：教师把长课剪成手绘板书式分镜，方便学生复习。
4 广告代理：为客户提案阶段快速做出“手绘故事板”+“口播脚本”，节省分镜师时间。
1 短视频运营：快速把长视频拆成手绘剧情预告，挂抖音/B站二创区引流。
2 小红书笔记：将vlog生成手绘分镜+种草文案，一键发图文笔记。
3 教学/培训：教师把长课剪成手绘板书式分镜，方便学生复习。
4 广告代理：为客户提案阶段快速做出“手绘故事板”+“口播脚本”，节省分镜师时间。
5 使用方法
1 获取代码：git clone https://github.com/RanFeng/clipsketch-ai
2 配置密钥：在.env文件填入Google Gemini API Key（或其他LLM Key）。
3 安装依赖：npm install && npm run dev，浏览器自动打开localhost:5173。
4 粘贴视频链接：输入B站或小红书URL，点击“解析”。
5 等待抽帧与绘图：进度条完成后可手动增删帧、切换手绘风格。
6 生成文案：选择平台模板，点击“生成”，右侧即出现标题+正文，可直接复制或导出PDF。
1 获取代码：git clone https://github.com/RanFeng/clipsketch-ai
2 配置密钥：在.env文件填入Google Gemini API Key（或其他LLM Key）。
3 安装依赖：npm install && npm run dev，浏览器自动打开localhost:5173。
4 粘贴视频链接：输入B站或小红书URL，点击“解析”。
5 等待抽帧与绘图：进度条完成后可手动增删帧、切换手绘风格。
6 生成文案：选择平台模板，点击“生成”，右侧即出现标题+正文，可直接复制或导出PDF。
6 适用人群
1 短视频MCN、个人创作者
2 小红书博主、种草号运营
3 教育工作者、线上课程讲师
4 广告/影视前期分镜师
5 开源技术爱好者、AI绘图研究者
1 短视频MCN、个人创作者
2 小红书博主、种草号运营
3 教育工作者、线上课程讲师
4 广告/影视前期分镜师
5 开源技术爱好者、AI绘图研究者
7 优缺点介绍
1 优点
1 全流程自动化，10分钟完成传统2小时的分镜+文案工作。
2 纯前端部署，数据不上传，隐私风险低。
3 开源可改，模型、风格、Prompt均可替换。
2 缺点
1 依赖Gemini API，国内网络需科学上网；免费额度有限。
2 手绘风格目前仅支持线稿+简单色块，复杂场景细节容易丢失。
3 长视频（>30分钟）抽帧耗时较长，老机器可能卡顿。
1 优点
1 全流程自动化，10分钟完成传统2小时的分镜+文案工作。
2 纯前端部署，数据不上传，隐私风险低。
3 开源可改，模型、风格、Prompt均可替换。
2 缺点
1 依赖Gemini API，国内网络需科学上网；免费额度有限。
2 手绘风格目前仅支持线稿+简单色块，复杂场景细节容易丢失。
3 长视频（>30分钟）抽帧耗时较长，老机器可能卡顿。
8 分类标签
AI视频工具、AI绘画、短视频运营、开源项目、文案生成、故事板、内容二创
AI视频工具、AI绘画、短视频运营、开源项目、文案生成、故事板、内容二创
Kortix-AI 推出的一款开源通用 AI 智能体平台，旨在成为 Manus 的替代品，通过自然语言对话实现复杂任务的自动化处理。