scraping-youtube-videos-by-keyword

按关键词抓取 YouTube 视频

适用于任意搜索查询的原始 YouTube 视频数据集。返回视频级元数据，包括互动指标和频道信息。

前提条件

• 已设置 APIFY_TOKEN 环境变量
• 可选：已安装 Apify MCP 服务

输入

参数	类型	必填	默认值	说明
startUrls	数组	可选	[]	YouTube URL — 频道、播放列表、Shorts、搜索结果
youtubeHandles	数组	可选	[]	YouTube 频道账号（例如 @kurzgesagt）
getTrending	布尔值	可选	false	获取热门视频
keywords	数组	可选	[]	搜索关键词
gl	字符串	可选	us	结果的国家/地区代码（例如 US、GB）
hl	字符串	可选	en	语言代码（例如 en、de）
uploadDate	字符串	可选	all	上传日期筛选：any、hour、today、week、month、year
duration	字符串	可选	all	时长筛选：any、short、long
features	字符串	可选	all	功能筛选：4k、hd、live、cc、3d、hdr 等
sort	字符串	可选	r	搜索结果的排序方式
maxItems	数字	可选	不限	最多返回的视频数
customMapFunction	字符串	可选	—	用于转换每个输出对象的 JavaScript 函数

工作流

Progress:
- [ ] Step 1: Build search query
- [ ] Step 2: Run youtube-scraper
- [ ] Step 3: Poll for SUCCEEDED
- [ ] Step 4: Deliver video dataset

步骤 2：运行 Actor

推荐 — run_actor.js（自动处理等待、输出和文件保存）：

# Quick answer (prints table to chat)
node scripts/run_actor.js \
  --actor "apidojo~youtube-scraper" \
  --input '{"param": "value"}'

# Save as CSV
node scripts/run_actor.js \
  --actor "apidojo~youtube-scraper" \
  --input '{"param": "value"}' \
  --output YYYY-MM-DD_results.csv --format csv

# Save as JSON
node scripts/run_actor.js \
  --actor "apidojo~youtube-scraper" \
  --input '{"param": "value"}' \
  --output YYYY-MM-DD_results.json --format json

必须在环境变量或 .env 文件中设置 APIFY_TOKEN。

如果 Apify MCP 可用：

Tool: apify:run-actor
Actor: "apidojo~youtube-scraper"
Input:
{
  "searchKeywords": "<query>",
  "maxResults": 50,
  "sortBy": "relevance"
}

REST API 备用方案：

curl -X POST \
  "https://api.apify.com/v2/acts/apidojo~youtube-scraper/runs?token=$APIFY_TOKEN" \
  -H "Content-Type: application/json" \
  -d '{"searchKeywords": "<query>", "maxResults": 50}'

将 id 保存为 RUN_ID。轮询直到 status = SUCCEEDED：

curl "https://api.apify.com/v2/actor-runs/$RUN_ID?token=$APIFY_TOKEN" | grep '"status"'

获取结果：

curl "https://api.apify.com/v2/actor-runs/$RUN_ID/dataset/items?token=$APIFY_TOKEN&format=json"

步骤 3：处理边缘情况

• 结果少于 20 条：查询条件可能过窄；请扩大搜索词范围。
• 结果中包含年龄限制内容：这些内容的元数据可能有限 — 对缺少 viewCount 的行进行标记。
• 视频 ID 重复：按 videoId 去重。

输出格式

# YouTube Video Dataset: "<query>"
Videos collected: N | Sort: <sortBy>

| Video ID | Title | Channel | Views | Likes | Comments | Duration | Published |
|----------|-------|---------|-------|-------|----------|----------|-----------|
| ...      | ...   | ...     | ...   | ...   | ...      | ...      | ...       |

Available fields: videoId, title, channelName, channelId, viewCount, likeCount,
commentCount, duration, publishedAt, videoUrl, thumbnailUrl, description

故障排除

结果少于请求数量： YouTube 搜索对小众查询可能返回的结果有限。 缺少点赞数： YouTube 会隐藏点踩数，但仍提供点赞数；部分视频会隐藏所有计数。