scrapy使用随机User-Agent 众所周知，User-Agent值是用来帮助服务器识别用户使用的操作系统、浏览器、浏览器版本等等信息的，...

本文主要介绍部分爬虫在遇到%u5317%u4eac%u70e4%u9e2d这种类似unicode编码的str类型数据时，无法直接使用decode...

我们在写爬虫的时候，偶尔会遇到一些内容是通过js获取，或者加密等一些情况，那么这种情况就必须要祭出大杀器了——selenium。 严格来讲，se...

开始语 最近心血来潮，将selenium升级了一下，发现在使用phantomJS的时候，console的输出跟之前有些不一样。待我细心观瞧之后发...

py2下hbase的字符串编码问题(\xe7\xbc\x96) 最近在py2的环境下使用hbase，遇到了一个令人恼火的编码问题。问题字符串如下...