webclaw
把网页抓取并转换为适合智能体与 RAG 使用的干净内容。
- Stars
- 1,729
- Forks
- 181
- 更新时间
- 更新于 2026年7月13日
把网页抓取并转换为适合智能体与 RAG 使用的干净内容。
webclaw 可通过命令行、MCP 服务或 REST API 抓取和遍历网站,并输出 Markdown、文本或 JSON,适合智能体和 RAG 流程。核心提取路径可在本地运行且无需账号;遇到受保护网站、JavaScript 渲染或异步研究任务时,可改用托管 API。
资源类型
使用场景
运行平台
通过 CLI 或 MCP 批量操作和查询 Google NotebookLM。
用一条命令抓取多站点信息并交给脚本或智能体
运行方式
协议与集成
核心能力
适合人群
GitHub 公开事实最近同步于 2026年7月14日。
在终端搜索、抓取网页并把 Firecrawl 接入编码助手
把公开专家资料整理成可加载的 Agent 技能文件