📦 Tavily Crawl — 网站爬取与本地 Markdown 保存
v1.0.0爬取任意网站，保存页面为本地 Markdown 文件。适用于下载文档、知识库或网页内容以供离线访问或分析。
0· 442·1 当前·1 累计
by 运行时依赖
无特殊依赖
安装命令
点击复制官方npx clawhub@latest install liang-tavily-crawl
镜像加速npx clawhub@latest install liang-tavily-crawl --registry https://cn.longxiaskill.com镜像同步中
技能文档
Tavily Crawl 技能文档
简介
爬取任意网站，保存页面为本地 Markdown 文件。适用于下载文档、知识库或网页内容以供离线访问或分析。使用方法
- 安装：通过 MCP 平台安装 Tavily Crawl 技能
- 配置：输入目标网站 URL 和保存路径
- 执行：运行技能，等待爬取完成
示例
- 输入：
https://example.com/docs，保存路径：./local_docs - 输出：
./local_docs中包含 example.com/docs 的所有页面（以 Markdown 格式保存）
注意
- 请确保目标网站允许爬取
- 尊重网站的
robots.txt规则