首先看到这么多朋友浏览，证明对大家还是有帮助的，感谢大家的关注！因为文章是在一年前写的，网站更新了不少，下面的代码已经不适用，特意更新了下，供大...

【导语】我们在爬取数据中，会遇到字体乱码的下，其实是字体加密，本篇文章主要解决字体解密这种反爬方式。 1.在浏览器打开58同城网址进入北京租房2...

Scrapy简介 Scrapy是用纯Python实现一个为了爬取网站数据、提取结构性数据而编写的应用框架，用途非常广泛。 框架的力量，用户只需要...

最近搜狗微信更改新的反爬策略，增加ua判断和多一层列表页跳转，很难找到或拼凑出列表页。（之前使用的是wechatsogou包，虽然很方便。但是逃...

最近因公司需求采集知网数据（标题、来源、关键字、作者、单位、分类号、摘要、相似文献这些字段），由于知网防爬太强，内容页链接加密，尝试了pyspi...