命令行应用研究与知识

webclaw

把网页抓取并转换为适合智能体与 RAG 使用的干净内容。

Stars
1,729
Forks
181
License
AGPL-3.0
更新于
更新于 2026年7月13日

正在检查仓库实时数据……

项目概览

webclaw 可通过命令行、MCP 服务或 REST API 抓取和遍历网站，并输出 Markdown、文本或 JSON，适合智能体和 RAG 流程。核心提取路径可在本地运行且无需账号；遇到受保护网站、JavaScript 渲染或异步研究任务时，可改用托管 API。

仓库事实

主要语言
Rust
许可证
AGPL-3.0
仓库更新时间
2026年7月13日
默认分支
main

资源类型

命令行应用API 或服务端MCP 服务端SDK

使用场景

研究与知识

运行平台

Claude CodeCursorCodex

运行方式

命令行云端运行本地运行

协议与集成

MCPREST

核心能力

网页搜索

适合人群

开发者

相关项目

打开项目 notebooklm-mcp-cli
命令行应用研究与知识MCP

notebooklm-mcp-cli

@jacob-bdPython

通过 CLI 或 MCP 批量操作和查询 Google NotebookLM。

Stars
★ 5,458
Forks
⑂ 839
开源许可
MIT
打开项目 AutoCLI
命令行应用研究与知识Linux

AutoCLI

@nashsuRust

用一条命令抓取多站点信息并交给脚本或智能体

Stars
★ 2,875
Forks
⑂ 269
开源许可
Apache-2.0
打开项目 cli
命令行应用研究与知识Claude Code

cli

@firecrawlTypeScript

在终端搜索、抓取网页并把 Firecrawl 接入编码助手

Stars
★ 520
Forks
⑂ 73
GitHub 更新
2026年7月14日
打开项目 mimeo
命令行应用研究与知识

mimeo

@K-Dense-AIPython

把公开专家资料整理成可加载的 Agent 技能文件

Stars
★ 229
Forks
⑂ 29
开源许可
MIT
查看更多同类项目