前言 最近一直在学爬虫，从最基本的 urllib 到 requests 、 beautifulsoup 到分布式爬虫框架 scrapy ,现在终于感觉可以上路了。所以先基于 scrapy 重写了我以前做的小说爬虫，代码都很简单，就不注释了。相关的知识点在我的python爬虫系列文章后面都会介绍到。 主要的参考文献： scrapy官方文档(无中文) python官方文档(有中文) 思路 1.搜索小说…
前言 最近一直在学爬虫，从最基本的 urllib 到 requests 、 beautifulsoup 到分布式爬虫框架 scrapy ,现在终于感觉可以上路了。所以先基于 scrapy 重写了我以前做的小说爬虫，代码都很简单，就不注释了。相关的知识点在我的python爬虫系列文章后面都会介绍到。 主要的参考文献： scrapy官方文档(无中文) python官方文档(有中文) 思路 1.搜索小说…
讨论
登录后参与讨论
还没有评论，来说第一句吧。