web-data-extractor（网页数据采集器，支持 CSS/XPath 选择器、批量抓取、自动分页、数据导出（CSV/JSON）。 适用于市场调研、竞品分析、内容聚合。） — 网页-data-提取器（网页数据采集器，支持 CSS/XPath 选择器、批量抓取、自动分页、数据导出（CSV/JSON）。 适用于市场调研、竞品分析、内容聚合。）

网页数据采集器 v1.0.0

从网页批量提取结构化数据，支持多种选择器和导出格式。

功能特性

• CSS 选择器提取

// 提取所有标题 网页_fetch({"url": "https://example.com"}) // 使用 CSS 选择器提取特定元素

• XPath 提取

// 支持 XPath 路径提取复杂结构

• 批量抓取

自动分页处理 URL 列表批量处理 并发控制

• 数据导出

CSV 格式 JSON 格式 Markdown 表格 快速使用示例 // 提取文章列表 const articles = 提取Data({ url: "https://b记录.example.com", selector: ".article-card", fields: { title: "h2.title", link: "a[href]", date: ".publish-date" } })

// 导出为 CSV 导出ToCSV(articles, "输出.csv")

// 导出为 JSON 导出ToJSON(articles, "输出.json")

// 批量抓取多页 const allData = scrapeMultiple({ baseUrl: "https://example.com/page/", pages: 10, selector: ".item" })

使用场景 市场调研 - 抓取竞品价格、产品信息 内容聚合 - 收集多源内容 数据分析 - 提取公开数据集 舆情监控 - 追踪 mentions、评论 SEO 分析 - 抓取关键词排名 注意事项 遵守目标网站的 ro机器人s.txt 控制抓取频率，避免被封 仅抓取公开数据 定制开发

需要定制化数据采集、清洗或自动化工作流？

📧 联系：careytian-AI@github

许可证

MIT-0