← 返回 Skills 市场
terrycarter1985

抖音爆款爬虫 v3

作者 terrycarter1985 · GitHub ↗ · v1.1.0 · MIT-0
cross-platform ⚠ suspicious
45
总下载
0
收藏
1
当前安装
1
版本数
在 OpenClaw 中安装
/install douyin-scraper-v3
功能描述
爬取抖音爆款视频和文案数据,使用 Playwright 自动化浏览器操作,支持搜索关键词、获取热榜、提取视频信息和文案等功能。
使用说明 (SKILL.md)

抖音爆款爬虫 Skill

Agent 指令:自然语言解析

当用户用自然语言请求抖音相关操作时,按以下规则映射到命令:

用户意图 关键词提取 执行命令
搜索/找/看一下 XX 视频 提取 XX 作为 keyword python scripts/scraper.py search --keyword "XX" --limit 10
抖音热榜/热门/趋势 无需 keyword python scripts/scraper.py hot --limit 20
XX 分类的热榜 提取 XX 作为 category python scripts/scraper.py hot --category "XX" --limit 20
分析视频链接 URL 提取 URL 提示用户:当前版本暂不支持单视频解析,建议用搜索关键词替代

解析步骤:

  1. 判断用户意图是「搜索」还是「热榜」
  2. 从自然语言中提取关键词(去掉"视频"、"内容"、"一下"等虚词)
  3. 在 skill 目录下执行对应命令
  4. 将结果以简洁列表形式呈现给用户

示例:

  • "搜索一下海鲜视频" → python scripts/scraper.py search --keyword "海鲜" --limit 10
  • "找一些海鲜售卖相关的视频文案" → python scripts/scraper.py search --keyword "海鲜售卖" --limit 10
  • "看看抖音热榜有什么" → python scripts/scraper.py hot --limit 20
  • "美食热榜" → python scripts/scraper.py hot --category "美食" --limit 20

功能概述

使用 Playwright 自动化浏览器操作,爬取抖音爆款视频和文案数据。

功能特性

  • 🔍 关键词搜索 - 按关键词搜索抖音视频
  • 📊 热榜获取 - 获取抖音热榜数据
  • 📝 文案提取 - 提取视频标题、描述、标签等
  • 🎬 视频信息 - 获取播放量、点赞数、评论数等
  • 🔗 链接收集 - 收集视频链接用于后续下载

安装依赖

pip install playwright
playwright install chromium

使用方法

搜索关键词

python scripts/scraper.py search --keyword "海鲜" --limit 10

获取热榜

python scripts/scraper.py hot --limit 20
python scripts/scraper.py hot --category "美食" --limit 20

保存结果

python scripts/scraper.py search --keyword "海鲜" --limit 10 --output result.json
python scripts/scraper.py search --keyword "海鲜" --limit 10 --output result.csv --format csv

输出数据格式

{
  "title": "视频标题",
  "description": "视频描述",
  "author": "作者昵称",
  "play_count": 1000000,
  "like_count": 50000,
  "comment_count": 2000,
  "share_count": 1000,
  "url": "https://www.douyin.com/video/xxx",
  "tags": ["标签1", "标签2"],
  "publish_time": "2026-03-21"
}

注意事项

⚠️ 重要提示:

  1. 遵守抖音平台规则,合理使用,避免频繁请求
  2. 建议请求之间添加适当延时
  3. 数据仅供学习和研究使用
  4. 不要登录账号,避免风控
  5. 注意 IP 被封禁的风险
  6. 如果 Playwright 未安装,将返回模拟数据(标注"模拟数据")
  7. 验证码问题:抖音对未登录的 headless 浏览器会弹出验证码,导致无法提取真实数据。此时脚本会自动降级为模拟数据

获取真实数据的方案

当脚本遇到验证码时,可使用以下方式获取真实数据:

方案一:使用 OpenClaw browser 工具(推荐)

通过 OpenClaw 的 browser 工具在已登录的浏览器中操作抖音:

1. browser open → 打开 https://www.douyin.com
2. browser snapshot → 查看页面状态
3. browser navigate → 访问搜索页
4. browser snapshot → 提取搜索结果

方案二:传入 Cookie 文件

python scripts/scraper.py search --keyword "海鲜" --cookie-file cookies.json

Cookie 文件格式为 Playwright 的 browser_context.cookies() 输出的 JSON 数组。

安全使用建议
Install only if you are comfortable with a Douyin scraper that may make live browser requests, save scraped data locally, and may prompt workflows involving logged-in sessions or cookies. Do not provide cookie files or use a logged-in browser unless you intentionally accept the account, privacy, and platform-policy risks; treat cookies as secrets and verify whether returned data is real or mock output before relying on it.
能力评估
Purpose & Capability
The stated purpose is Douyin search and hot-list scraping, and the Playwright/browser automation plus optional file output generally fit that purpose. However, the Node.js implementation returns example data while presenting it as collected results, and the Python version falls back to mock data when scraping fails.
Instruction Scope
The skill maps broad natural-language requests to live Douyin scraping commands and later recommends using a logged-in browser or cookie file, despite also warning users not to log in. That creates unclear consent and scoping around authenticated session use.
Install Mechanism
Installation creates a Python virtual environment, installs Playwright, installs Chromium, optionally runs npm install, and provides a Docker helper. These are expected for a browser scraper, though they download and install substantial runtime components.
Credentials
Network access to Douyin and local output files are proportionate for scraping, but using an already logged-in browser session or injecting cookies is sensitive and not sufficiently bounded to public pages or explicit user approval.
Persistence & Privilege
The skill persists dependencies, browser binaries, a venv, generated run scripts, and optional scraped result files. It does not show hidden background persistence, privilege escalation, destructive actions, or exfiltration logic.
如何使用
  1. 确保已安装 OpenClaw(本地或 Docker 部署)
  2. 在对话框中输入安装命令:/install douyin-scraper-v3
  3. 安装完成后,直接呼叫该 Skill 的名称或使用 /douyin-scraper-v3 触发
  4. 根据 Skill 的参数说明提供必要输入,即可获得结构化输出
版本历史
v1.1.0
支持自然语言搜索、验证码检测、cookie注入、系统Chromium回退
元数据
Slug douyin-scraper-v3
版本 1.1.0
许可证 MIT-0
累计安装 1
当前安装数 1
历史版本数 1
常见问题

抖音爆款爬虫 v3 是什么?

爬取抖音爆款视频和文案数据,使用 Playwright 自动化浏览器操作,支持搜索关键词、获取热榜、提取视频信息和文案等功能。 它是一个面向 Claude Code / OpenClaw 的 AI Agent Skill 插件,目前累计下载 45 次。

如何安装 抖音爆款爬虫 v3?

在 OpenClaw 或 Claude Code 对话框中运行命令「/install douyin-scraper-v3」即可一键安装,无需额外配置。

抖音爆款爬虫 v3 是免费的吗?

是的,抖音爆款爬虫 v3 完全免费,采用 MIT-0 许可证,可自由下载、安装和使用。

抖音爆款爬虫 v3 支持哪些平台?

抖音爆款爬虫 v3 跨平台运行,可在任意部署了 OpenClaw / Claude Code 的环境中使用(cross-platform)。

谁开发了 抖音爆款爬虫 v3?

由 terrycarter1985(@terrycarter1985)开发并维护,当前版本 v1.1.0。

💬 留言讨论