忽然之间的博客

Thoughts, stories and ideas.

爬虫技术-Scrapy框架使用学习整理

本文主要内容针对Scrapy有初步了解的同学。结合作者的实际项目中遇到的一些问题,汇成本文。 之后会写一些具体的爬虫demo, 放到 鉴于作者接触爬虫不久,水平有限,文章难免出现纰漏,还请各位达人留言指导。read more»

爬虫技术-使用Requests抓取网页内容

不知道从什么时候,貌似谈到Python技术, 必谈爬虫。 讲到爬虫也不得不说到Python Python这门语言对抓取网页有什么相关的技术方案呢。 那本文就介绍如何实现抓取网页内容:RequestsHTTP库的使用。 有了好用的工具,就可以愉快的搞事情啦。read more»