Clipkit

ClipKit

面向 Agent 的视频基础设施。 ClipKit 将 JSON 时间线——开放的 ClipKit Protocol——转换为由 GPU 渲染的视频。用结构化数据描述视频；即可生成 MP4。专为 AI Agent 及其开发者打造。

clipkit.dev · 文档 · Protocol · Agent 快速入门

https://github.com/user-attachments/assets/ff4b7e9b-2e0a-40f4-a6a1-042e981fc65f

_{↑ 使用 ClipKit 制作。这段宣传视频的每一帧都由 ClipKit Protocol 文档渲染而成——无需编辑器或时间线 UI，只需结构化数据。若无法内嵌播放，请▶ 播放。}

快速入门

npm install -g @clipkit/cli

clipkit new my-video.json                 # scaffold a Source
clipkit render my-video.json -o out.mp4   # render locally (headless Chrome)

……也可以通过代码使用：

import { render } from '@clipkit/renderer';
import { writeFile } from 'node:fs/promises';

const { buffer } = await render({ source });   // source = a ClipKit Protocol document
await writeFile('out.mp4', buffer);

本地渲染需要使用已安装的 Google Chrome（用于 WebCodecs）。如需 GPU 加速及专业格式（ProRes / AV1 / 透明）输出，请使用托管服务进行渲染：clipkit render --cloud。

项目内容

这是一个 monorepo；每个软件包都以 @clipkit 作用域发布到 npm。

软件包	说明
@clipkit/protocol	ClipKit Protocol——架构、类型、验证
@clipkit/runtime	引擎——WebGPU/WebGL2 合成器 + WebCodecs 编码器
@clipkit/renderer	在本地将 Source 渲染为 MP4（无头 Chrome）
@clipkit/editor	基于该架构的可配置、可嵌入编辑器
@clipkit/editor-core	编辑器的无 UI 数据层
@clipkit/playback	浏览器播放引擎
@clipkit/patterns	可组合的动态图形单元
@clipkit/sfx	程序化音效合成
@clipkit/music-analysis	用于创作的节拍 / 速度分析
@clipkit/speech-to-text	转录 → 字幕
@clipkit/lint	支持 Protocol 的验证 + 通俗易懂的摘要
@clipkit/mcp-server	MCP 服务，让 Agent 能够创作和渲染视频
@clipkit/cli	本地优先的命令行工具

面向 AI Agent

ClipKit 提供 MCP 服务——将 Agent 指向该服务，它就能创建、验证、预览和渲染 ClipKit 视频：

npx -y @clipkit/cli mcp        # stdio MCP server

请参阅 Agent 快速入门，了解 Claude、Cursor 等工具的使用方法。

许可证

Apache-2.0——@clipkit/runtime 除外，它采用 Business Source License 1.1，并在每次发布四年后转为 Apache-2.0。简单来说：你可以免费使用、嵌入、基于它构建自己的产品，并为自己的客户渲染——唯一不能做的事，是提供具有竞争性的 ClipKit 托管渲染服务。请参阅 LICENSING.md 和 TRADEMARK.md。