玩Python之HTTP代理 0x00 前言 大家对HTTP代理应该都非常熟悉，它在很多方面都有着极为广泛的应用。HTTP代理分为正向代理和反向...
投稿
收录了8篇文章 · 4人关注
-
玩Python之HTTP代理
-
给自己的爬虫做一个简单的动态代理池使用代理服务器一直是爬虫防BAN最有效的手段，但网上的免费代理往往质量很低，大部分代理完全不能使用，剩下能用的代理很多也只有几分钟的寿命，没法直...
-
代理池
1.首先创建一个获取代理ip的类，这里取名为ProxyPool。 这个ProxyPool类中有两个方法： get_soup(self，url)这...
-
SqlLite数据库一、数据库 在项目开发中，通常都需要对数据进行离线缓存的处理，如新闻数据的离线缓存等。离线缓存一般都是把数据保存到项目的沙盒中。有以下几种方式：...
-
python 三种打包 exe 使用方法
3种工具为：py2exe、cx_Freeze、pyinstaller 可使用 pip 安装 ， 使用示例如下： 1.py2exe 编写脚本,命名...
-
使用 PyInstaller 把python程序 .py转为 .exe 可执行程序
在win中要想将python的py转换为exe文件，可以使用PyInstaller。 PyInstaller下载地址：nchc.dl.sourc...
-
学员肖杰：如何把Python脚本导出为exe程序一.pyinstaller简介 pyinstaller将Python脚本打包成可执行程序，使在没有Python环境的机器上运行 最新版是pyin...
-
新手向爬虫（一）利用工具轻松爬取简书并分析爬取目标 爬取四块简单的简书网页，并做一定的分析。 第一块是首页热门，网址就是http://jianshu.com 第二块是简书推荐，网址形如h...
-
反爬虫策略
这篇文章是对上篇的一个实现。虽然已经破解了它再去实现有点不开心。但作为防止学生暴力的爬页面也比较足够了。 需求 在请求重要接口时要多传一个不太好...
-
写一只"独立"的python爬虫-浅谈用爬虫自行抓取代理ip网站信息【作者：0han 未经授权请不要转载】 8/29更新： 由于发现昨天的代码所爬的网站资源太少，而且没有翻页，所以换了一个网站，kuaidaili...
专题公告
。
{var%20f='http://v.t.sina.com.cn/share/share.php?appkey=1881139527',u=z||d.location,p=['&url=',e(u),'&title=',e(t||d.title),'&source=',e(r),'&sourceUrl=',e(l),'&content=',c||'gb2312','&pic=',e(p||'')].join('');function%20a(){if(!window.open([f,p].join(''),'mb',['toolbar=0,status=0,resizable=1,width=440,height=430,left=',(s.width-440)/2,',top=',(s.height-430)/2].join('')))u.href=[f,p].join('');};if(/Firefox/.test(navigator.userAgent))setTimeout(a,0);else%20a();})(screen,document,encodeURIComponent,'','','https://upload.jianshu.io/collections/images/366880/android.graphics.Bitmap_445bfdb.jpeg', '推荐专题《python proxy》（ 分享自 @简书 ）','https://jianshuapi.com/c/bfb3699a599a?utm_campaign=maleskine&utm_content=collection&utm_medium=reader_share&utm_source=weibo','页面编码gb2312|utf-8默认gb2312'));){kind=link}