clipsketch AI

网站地址:https://clipsketch-ai.vercel.app

GitHub:https://github.com/RanFeng/clipsketch-ai

描述信息:将视频瞬间转化为手绘故事

访问官网

GitHub

ClipSketch AI 是一个专为视频创作者、社交媒体运营者和二创爱好者设计的全流程生产力工具。

它不仅仅是一个视频播放器，更是一个AI 驱动的内容创作工作台。它可以解析 Bilibili 和小红书的视频链接，让你能够帧级精准地标记精彩瞬间。通过集成 Google Gemini 最新的多模态大模型，它能将这些瞬间一键转化为精美的手绘风格故事板，并自动撰写适配社交媒体（如小红书）的爆款文案。

技术上它是个纯前端项目，用了 React 和 Tailwind CSS，数据也是存在浏览器本地的，不用担心隐私泄露。作者把交互做得挺细，针对竖屏视频和宽屏视频都有适配，甚至还考虑了批量生成来省 API 的钱，看得出是懂内容创作者痛点的。

核心功能

强大的视频采集

多源导入：支持解析 Bilibili 和 小红书 的分享链接（支持短链接和混合文案）。
高清播放：针对竖屏视频（9:16）和宽屏视频进行了自适应布局优化。
精准控制：支持键盘快捷键（空格播放/暂停，左右键逐帧/智能步长调节）。

帧级标记系统

毫秒级记录：精确捕捉每一个精彩瞬间。
快捷键打点：按下 T 键即可快速标记。
数据导出：支持导出 TXT 格式的时间轴标签，或将标记帧打包导出为 ZIP 图片包。

AI 艺术工作室 (Powered by Gemini)

智能绘图：利用 gemini-3-pro-image-preview 模型，将多个标记帧整合成一张连贯的、可爱手绘风格的故事板（Storyboard）。
社交文案生成：基于视觉内容，利用 gemini-3-pro-preview 自动生成 3种不同风格 的种草文案（情感故事型、干货教程型、短小精悍型）。
角色融合：上传自定义角色/头像，AI 自动将其融入到故事板场景中。
封面生成：基于精选文案和原始画面，生成高品质的竖屏视频封面。
批量精修：支持批量生成和优化分镜（可配置使用 Batch API 以节省成本）。