AI驱动的网页抓取工具,支持OpenAI、Gemini和Ollama本地模型解析网页内容,集成Tor匿名路由与反检测机制,通过Streamlit图形界面实现零代码操作。
适合需要从复杂页面提取结构化数据的开发者 · 暗网研究或隐私敏感场景的安全研究员 · 不想写代码的数据分析师
亮点
LLM语义化提取数据
不靠CSS选择器,用AI理解页面语义后结构化输出,网页改版也不容易失效
Tor洋葱路由内置
自动检测.onion地址并走Tor网络,暗网抓取开箱即用无需额外配置
三套LLM后端可选
OpenAI和Gemini云端精准,Ollama本地离线运行,按需求和预算灵活切换
反检测与验证码绕过
Stealth模式模拟真实浏览器指纹,支持复用本地浏览器会话绕过大多数Bot检测
取舍
选它的理由
- 用自然语言描述想要的数据即可提取
- Tor集成让匿名抓取零配置
- 支持本地LLM,数据不出机器
- Streamlit界面对非程序员友好
先想清楚
- 需要大规模高频抓取
- 追求稳定生产级爬虫
- 硬件资源有限又不想付API费
- 本地LLM对硬件要求高,低配机器响应慢
同类推荐
查看全部更多「编程开发」软件
AxonHub
编程开发开源开源自托管的 AI 网关,让你用 OpenAI、Anthropic 等任意 SDK 透明调用 100+ 家模型,切换供应商无需改动一行代码。
FastCtx
编程开发开源本地 Rust 工具运行时,通过 MCP 为 AI 编程代理提供文件读取、内容搜索、批量替换与 Bash 执行,用结构化输入输出帮模型省上下文、少绕弯。
Postman 中文注入
编程开发开源给已安装的 Postman 桌面端和网页版注入简体中文界面的第三方汉化工具,桌面端是单文件可执行程序无需装 Node,网页版走 Chrome/Edge 扩展,译文内置、一条命令即可注入或还原。
MediaCrawler
编程开发开源基于 Playwright 浏览器自动化的多平台社交媒体数据采集工具,支持小红书、抖音、快手、B站、微博、贴吧、知乎的帖子与二级评论抓取,无需 JS 逆向,数据可存 CSV/JSON/SQLite/MySQL。
Kiro
编程开发开源AWS 出品的 AI 编程工具集,先把自然语言需求拆成需求文档、架构设计和有序任务,再由并行代理落地实现,并用属性测试验证行为,覆盖 IDE、CLI、Web 与 iOS。
CC Switch
编程开发开源CC Switch 是一款 Tauri 桌面应用,把 Claude Code、Codex、Gemini CLI、OpenCode、OpenClaw、Grok Build 等七款 AI 编程工具的供应商配置、MCP、Skills、会话与用量统计集中到一个界面,并内置本地路由做多 Provider 一键切换与故障转移。
AI 整理的软件知识库
AI 整理软件资料、版本动态、更新通知、订阅权益与对比分析,沉淀可复用的工具知识。