百科.dev
全部条目在线工具AI 编程趋势榜开源项目技术资讯提交条目
登录
< 返回工具列表
S

Scrapy-Samples

> 编程语言
开源

爬行 Craigslist 的破例

199 stars0 点赞1 次浏览
访问官网GitHub

工具介绍

爬行 Craigslist 的破例

Scrapy Samples

This project contains sample scraping projects/tutorials as detailed in my blog. If you need help with downloading Scrapy and installing the dependencies, please watch this video - http://www.youtube.com/watch?v=eEK2kmmvIdw&feature=plcp

BaseSpider

  • This is a simple tutorial on how to write a crawler using Scrapy (BaseSpider) to scrape and parse Craigslist Nonprofit jobs in San Francisco and store the data to a CSV file.
  • Tutorial: http://mherman.org/blog/2012/11/05/scraping-web-pages-with-scrapy/
  • Video: http://www.youtube.com/watch?v=1EFnX1UkXVU

CrawlSpider

  • This tutorial adds to the BaseSpider code, in order to build a recursive crawler to scrape multiple pages. Make sure you read the first tutorial first.
  • Tutorial: http://mherman.org/blog/2012/11/08/recursively-scraping-web-pages-with-scrapy/
  • Video: http://www.youtube.com/watch?v=P-_TpZ54Vcw

Todo

  1. Add more use cases

Issues· 0 开放

查看全部 Issues在 GitHub 打开

暂无开放 Issues,或尚未同步最近议题。

> 标签

Python

暂无评论,来聊聊你的看法吧

> 工具信息

发布日期2026年8月1日
最后更新2026年9月18日
分类编程语言
定价开源

> 相关工具

T
TypeScript
JavaScript 的超集,为前端与全栈提供静态类型
P
Python
通用编程语言,广泛用于 Web、数据与 AI
G
Go
Google 推出的简洁高效系统语言