fal-lip-sync

fal-lip-sync

使用 fal.ai 模型生成会说话的头像视频、同步音频与嘴唇，并为肖像制作动画。

脚本

脚本	用途
talking-head.sh	根据图像和音频／文本生成会说话的头像视频
lip-sync.sh	将现有视频中的嘴唇动作与新音频同步

用法

会说话的头像（图像 + 音频 → 视频）

./scripts/talking-head.sh --image-url "https://example.com/portrait.jpg" --audio-url "https://example.com/speech.mp3" --model veed/fabric-1.0

会说话的头像（图像 + 文本 → 视频，自动 TTS）

./scripts/talking-head.sh --image-url "https://example.com/portrait.jpg" --text "Hello, welcome to our presentation" --model fal-ai/creatify/aurora

嘴唇同步（视频 + 音频 → 同步后的视频）

./scripts/lip-sync.sh --video-url "https://example.com/video.mp4" --audio-url "https://example.com/new-speech.mp3"

参数

talking-head.sh

参数	描述	必需
--image-url	肖像／人脸图像的 URL	是
--audio-url	要同步的音频 URL	是（或 --text）
--text	要说出的文本（自动 TTS）	是（或 --audio-url）
--model / -m	模型端点	否（默认：veed/fabric-1.0）
--tts-model	--text 模式使用的 TTS 模型	否（默认：fal-ai/minimax/speech-2.6-turbo）
--wait / -w	等待完成	否（默认：true）
--async / -a	立即返回请求 ID	否

lip-sync.sh

参数	描述	必需
--video-url	要进行嘴唇同步的视频 URL	是
--audio-url	用于同步的音频 URL	是
--model / -m	模型端点	否（默认：fal-ai/sync-lipsync/v2）

查找模型

若要发现最新、最合适的嘴唇同步和会说话的头像模型，请使用搜索 API：

# Search for talking head models
bash /mnt/skills/user/fal-generate/scripts/search-models.sh --query "talking head"

# Search for lip sync models
bash /mnt/skills/user/fal-generate/scripts/search-models.sh --query "lip sync"

# Search for live portrait / expression transfer
bash /mnt/skills/user/fal-generate/scripts/search-models.sh --query "live portrait"

或者使用 search_models MCP 工具，搜索“lip sync”“talking head”“avatar”等相关关键词。

输出格式

{
  "video": {
    "url": "https://fal.media/files/...",
    "content_type": "video/mp4"
  }
}

直接向用户提供视频 URL。