工具介绍
以 chrome 扩展程序实现的 Web 数据提取工具
Web Scraper 是一个 Chrome 浏览器扩展，用于从网页中提取数据。使用此扩展，您可以创建计划（网站地图），以指定如何遍历网站和需要提取哪些数据。使用这些网站地图，Web Scraper 将根据需要浏览网站并提取所有数据。提取的数据随后可作为 CSV 格式导出。
- 爬取多个页面 2. 网站地图和爬取的数据存储在浏览器的本地存储中或 CouchDB 中 3. 多种数据选择类型 4. 从动态页面中提取数据 (JavaScript+AJAX) 5. 浏览爬取的数据 6. 将爬取的数据导出为 CSV 7. 导入、导出网站地图 8. 仅依赖 Chrome 浏览器
v0.2
- 添加元素单击选择器
- 添加元素滚动下方选择器
- 添加链接弹出选择器
- 改进表格选择器，使其能够处理任何 HTML 标记
- 添加图像下载
- 添加在选择元素时的键盘快捷键
- 添加可配置的选择器使用延迟
- 添加可配置的页面访问之间的延迟
- 添加多个起始 URL 配置
- 添加表单字段验证
- 修复了许多错误