Tesseract Skill:让 Claude 化身剪辑师一键产出 4K 视频
AI 视频创作一直被一个根本问题卡住:模型能生成画面,但做不出”剪辑师级”的成片。Mirage(Captions 母公司)9 月 22 日正式上线的 Tesseract,把答案直接交给 Agent——给 Agent 一支剪辑笔,让它像专业剪辑师一样调关键帧、分图层、配音轨,最终在本地渲染出 4K 成片。
总结
Tesseract 是 Mirage 推出的面向 AI Agent 的视频创意套件,由 4 个独立 Skill 组成(Edit Video / Motion Graphics / Editor / Design),跑在本地原生视频引擎上,把 Premiere + After Effects 的核心能力(layers、keyframes、masks、adjustment layers、audio tracks)开放给 Agent 调用。截至 2026-10-05 上线 19 天内被 Business Insider、Forbes AI 50 母公司、AGI Hunt、Christopher Alarcon 顶级独立评测频道密集报道,被誉为”Premiere / After Effects 的 Agent 化重建”。
功能与原则
Tesseract 不是把视频包成 HTML/React 给 Agent 操作,而是把 Agent 直接接入原生视频引擎——和剪辑师在 Premiere 里操作的对象一样:视频图层、合成、关键帧、遮罩、调整层、音频轨、音量自动化。
设计原则有三条:
– Native-first:Agent 不再通过 web 抽象间接生成视频,而是用真实的视频对象(layers / compositions / keyframes)进行精细操作。
– 可编辑的项目(.tsrct):项目不是一次性产物,全程保持可迭代——用户让 Agent 调一个关键帧、改标题时间、重平衡音乐,其他部分原封不动。
– 本地优先 + 免费:本地引擎完全免费、跨 macOS / Windows / Linux,不需要 Captions 账号或 API key;用户只需承担 Agent 自身的订阅或模型调用费用。
认可度
- GitHub Stars:截至 2026-10-05 约 112 stars,7 forks(项目 2026-09-16 才创建,19 天)
- 媒体覆盖密度极高:Business Insider Markets 头条、The Next Gen Tech Insider 长文、AGI Hunt 多篇追踪、Christopher Alarcon(shiplean.com)把它列为 2026 年自己”留下来的两个 Claude Skill 之一”
- Forbes AI 50 入选公司 Mirage 出品,资方包括 General Catalyst、Index Ventures、Kleiner Perkins、Andreessen Horowitz、Sequoia、HubSpot Ventures、Adobe Ventures
- 平台覆盖:ChatGPT(含 ChatGPT Mobile)+ Claude(插件状态:coming soon)+ Muse + Grok Bot + Instinct
- 输出规格:最高 4K @ 60 FPS,横屏 / 竖屏 / 方形多比例
链接
GitHub: https://github.com/mirage-hq/Tesseract
官网 / 安装指南:https://mirage.app/tesseract
原作者
- 公司:Mirage(总部纽约,旗下产品:Captions、Tesseract)
- CEO / 联合创始人:Gaurav Misra(GitHub: @gaurav-misra)——原话:”Think of Tesseract as Premiere and After Effects, rebuilt for agents.”
- 一句话简介:Forbes AI 50 入选 AI 原生创意工具公司,把剪辑师级生产流程交给 Agent。
介绍
Tesseract 把 Agent 变成一名能直接指挥剪辑引擎的制片人。Agent 拿到用户的素材(视频、图像、品牌资产、音轨)和创意简报后,会构建一个完整的多图层工程文件:视频图层、合成、关键帧、遮罩、调整层、动画时间轴,全部由 Agent 通过 CLI 工具调用产生。整个项目以 .tsrct 格式保留,每一步都可回滚、可迭代。
Agent 不是一次性”吐”出一个成片——它产出的就是 Premiere/After Effects 剪辑师日常操作的对象。用户可以让 Agent “把开场做快一点”、”给这段加上 logo 出现动画”、”把人声音轨调低 3 dB”,Agent 都能精确执行,不重建整个项目。
Tesseract CLI 在本地运行(Linux x86_64 + glibc 2.35+、macOS ARM/x86、Windows),渲染走 Vulkan 或 Mesa lavapipe headless 渲染管线。整套引擎免费,不锁 API key、不收 Credits——你只为自己的 Agent 订阅或模型用量付费。
特点
- 四个独立 Skill 自由组合:
Edit Video(剪辑)、Motion Graphics(动画)、Editor(自定义浏览器编辑器)、Design(静态视觉 → 视频),按需启用 - 原生视频对象驱动:Agent 用 layers / compositions / keyframes / masks 直接工作,而非 HTML 抽象;输出是真正的视频而非网页
- 可编辑工程文件(.tsrct):所有修改落到工程文件,迭代不破坏既有内容,关键帧级精修
- 4K @ 60 FPS 本地渲染:跨平台(macOS / Windows / Linux),完全离线、可视化、可迭代
- 多 Agent 接入:ChatGPT(含 Mobile)、Claude(插件即将上线)、Muse、Grok Bot、Instinct
- 完全免费:本地引擎无功能限制,零订阅、零 Credits、不绑 Captions
使用方法
前置条件:Node.js/npm(仅用于 installer,CLI 本身不依赖 Node)+ Agent 运行环境的本地文件与命令访问权限(Claude Code / Codex / ChatGPT Desktop 等具备 local tool access 的环境)。
一行安装:
npx skills add mirage-hq/Tesseract
按提示选择需要的 Skill(Edit Video / Motion Graphics / Editor / Design)。安装器会自动从 GitHub release 拉取匹配平台的 CLI ZIP(darwin-arm64 / darwin-x86_64 / windows-x86_64 / linux-x86_64)+ .sha256 校验码。
让 Agent 直接做视频:
请用 Tesseract 把这些素材做成一个 30 秒的产品发布短片。
开场节奏要快,加一段干净的标题动画,结尾落在 logo 上。
让 Agent 做动态图解:
用 Tesseract 把这三步流程做成一个动态图解,使用我们的品牌色,文字保持可编辑。
让 Agent 做配套设计稿:
用 Tesseract 给这个视频设计一张宣传图,字体和配色保持一致。
交付 PNG 和可编辑工程文件。
使用场景与人群
适用场景:
– 短视频 / Reels / TikTok 批量生产(电商、社媒运营)
– 产品发布视频、社交广告片、播客可视化片段
– 教学/讲解视频(关键步骤动画、图解、字幕)
– 品牌资产动效化(logo reveal、标题动画、转场)
– 设计师/剪辑师辅助:把脏活(粗剪、合规字幕、模板化动画)丢给 Agent,自己只把关风格
目标用户:
– 不剪视频但要交付视频的人:营销、增长、独立开发者、独立设计师、Newsletter 作者
– 专业剪辑师:把 Tesseract 当”Agent 助手”先剪一版,自己再精修,省 60% 时间
– Agent 重度用户:Claude Code / Codex 用户,希望让 Agent 拥有真实的多媒体生产能力
输入与输出案例
案例 1:30 秒产品发布短片
- Input:
- 素材:3 段产品演示视频(每段 8–10 秒)、品牌 logo(PNG)、品牌色(#1A1A1A + #FF5A1F)、一首 30 秒背景音乐
- 创意简报:”做一个 30 秒发布短片,开场快节奏展示三个产品功能,每个功能用一段动态字幕卡介绍,结尾落在 logo 上。”
- Output:一个 30 秒、4K @ 60 FPS 的
.mp4+ 可编辑.tsrct工程文件,包含 3 个产品演示视频图层 + 3 个字幕动画合成 + 1 个 logo reveal 合成 + 1 个音轨层;所有图层命名清晰(如layer: feature_1_demo,comp: title_card_01),后续 Agent 可按名精修。
案例 2:动态流程图解
- Input:
- 创意简报:”用品牌色把这三步流程做成动态图解:(1) 提交需求 → (2) AI 自动拆分任务 → (3) 多个 Agent 并行执行。每步用动画箭头连接,文字保持可编辑。”
- Output:6 秒、1080×1080 方形视频(适合 X / LinkedIn / 小红书),包含 3 个矩形元素 + 2 个动画箭头 + 关键帧序列(steps 在 0.0s / 2.0s / 4.0s 处出现,箭头在每两 step 之间 1s 内完成路径动画),文字层独立可改;可在
.tsrct中把”AI 自动拆分任务”改成”AI 自动分析需求”,其他动画保留。
评论区
登录后可评论。