基于 Playwright 浏览器自动化的多平台社交媒体数据采集工具,支持小红书、抖音、快手、B站、微博、贴吧、知乎的帖子与二级评论抓取,无需 JS 逆向,数据可存 CSV/JSON/SQLite/MySQL。
适合做内容分析的研究者或学生 · 想学浏览器自动化的开发者 · 只需小批量抓某个平台数据的技术用户
亮点
免 JS 逆向抓签名
用保留登录态的浏览器上下文执行 JS 表达式取签名参数,绕开破解加密算法这道最高门槛
七平台能力一致
小红书、抖音、快手、B站、微博、贴吧、知乎均支持关键词搜索、指定帖子ID、二级评论与创作者主页
数据落地方式齐全
同一份采集结果可选 CSV、JSON、SQLite 或 MySQL,个人用 --init_db sqlite 一条命令建库
开源版功能有天花板
断点续爬、多账号轮换、去 Playwright 依赖、完整 Linux 支持均属付费 Pro 版
取舍
选它的理由
- 七大中文社媒统一命令行调用,学习成本低
- 不用逆向加密签名,代码可读性和可维护性好
- SQLite 零配置落库,个人分析开箱可用
- 配置项中文注释详尽,文档站有架构图
先想清楚
- 打算商用或做大规模持续采集
- 不熟悉命令行和 Python 环境
- 不愿用主账号登录目标平台
- 无任何 Release 安装包,只能拉源码自己配环境
安全警示
- 项目自身在 README 与官网首页反复声明:仅供学习研究,禁止商业用途与大规模爬取,法律责任自负。
- 作者在免责声明中直接链接国内爬虫违法违规判例集,说明该类工具使用存在明确法律边界与合规风险。
- 运行需扫码登录你本人的小红书/抖音等账号并本地缓存登录态,账号存在被平台风控限流或封禁的风险。
- 仓库无任何 GitHub Release,只能从源码运行,安装第三方 fork 或镜像时存在被植入恶意代码的风险,务必核对官方仓库地址。
- README 内嵌赞助商代理服务与返利折扣码等商业推广内容,第三方代理服务的数据处理方式不受本项目约束。
基于公开资料与 AI 分析整理,仅供参考,请自行核实。
同类推荐
查看全部更多「编程开发」软件
AxonHub
编程开发开源开源自托管的 AI 网关,让你用 OpenAI、Anthropic 等任意 SDK 透明调用 100+ 家模型,切换供应商无需改动一行代码。
FastCtx
编程开发开源本地 Rust 工具运行时,通过 MCP 为 AI 编程代理提供文件读取、内容搜索、批量替换与 Bash 执行,用结构化输入输出帮模型省上下文、少绕弯。
Postman 中文注入
编程开发开源给已安装的 Postman 桌面端和网页版注入简体中文界面的第三方汉化工具,桌面端是单文件可执行程序无需装 Node,网页版走 Chrome/Edge 扩展,译文内置、一条命令即可注入或还原。
Kiro
编程开发开源AWS 出品的 AI 编程工具集,先把自然语言需求拆成需求文档、架构设计和有序任务,再由并行代理落地实现,并用属性测试验证行为,覆盖 IDE、CLI、Web 与 iOS。
CC Switch
编程开发开源CC Switch 是一款 Tauri 桌面应用,把 Claude Code、Codex、Gemini CLI、OpenCode、OpenClaw、Grok Build 等七款 AI 编程工具的供应商配置、MCP、Skills、会话与用量统计集中到一个界面,并内置本地路由做多 Provider 一键切换与故障转移。
Sub2API
编程开发开源Sub2API 是一个开源的 AI API 访问网关,将 Claude、OpenAI、Gemini、Grok 等 AI 订阅账号的配额转换为统一、稳定且高性价比的 API 接口,方便开发者在应用中集成多种 AI 服务。
AI 整理的软件知识库
AI 整理软件资料、版本动态、更新通知、订阅权益与对比分析,沉淀可复用的工具知识。