怎样使用Python进行数据采集和做爬虫

【置顶公告】为提高本专题文章质量，避免低质量无关文章重复投稿，即日起本专题将不再以公开投稿形式收录文章。有投稿需求的作者们，欢迎以私信发送文章链接的形式继续投稿！专题管理员也会适当收录一些优质的文章进入本专题，感谢大家对本专题的继续支持！ ----------------------------------------------------------- 蓬头垢面、短裤人字拖、目光呆滞、少言寡语，我们是隐匿于现代都市的键盘侠，过C++，斩Java，心有Python，胸有PHP，从世界上最好的语言中走出Html的浪潮，我们的名字叫 程序员，我们的信念叫 技术！ 主编：代码咖啡 http://www.jianshu.com/users/9b87ba5fc959 为保证本专题为读者创造良好的阅读环境，为作者创造舒适的创作氛围，列本专题投稿须知如下： 1. 无推广性质链接 本专题不推荐将推广性质链接放入文章中，包括但不限于QQ/微信/微博/知乎/豆瓣等，若含有QQ群等推广信息，请放入个人主页的简介中。 【补充】考虑到一些质量优秀的文章，其作者有推自己公众号及QQ交流群的需求，为不让好文章被埋没，酌情考虑收录此类文章，推广内容仅限公众号、QQ群，且QQ群推广内容仅包含QQ号，严禁出现入群可得学习资源等截图文字信息！ 2. 推荐原创文章 本专题支持原创，禁止单纯的粘贴复制，允许原创基础上适当修改；纯粘贴复制文章，若经发现，将予以移除。 3. 收录范围 本专题主要收录技术相关文章，但不限于技术，可包括：经验谈、程序员系列小说、产品分析、下载资源等。 4. 内容排版 为确保良好的阅读体验，文章内容排版要求如下： * 段落间空一行 * 段落标题显眼 * 关键代码放入代码块 * 下载资源文请附上详细的资源说明和插图 * 贴图插图无水印、链接 * 文章样式干净整洁、大方得体 * 文章主体充实，非笔记性质内容 5. 严禁宣传广告文 本专题不建议收录宣传广告性质的文章，包括但不限于：培训机构、服务宣传、组织推广等系列主题。此类文章投稿次数达到3次及以上的用户，本专题将不再接受其任何投稿，将其列入专题黑名单。 6. 其他 若文章被收录后更新，更新后内容与上述要求不符，本专题将对文章予以移除 ------------------------------------------------------------ 技术源于信仰，我们是程序员，欢迎投稿！ ——源自【程序员技术栈】

生活不易 我用python 请提交关于python 语言相关的内容，本专题目前不再接受关于各种库的安装问题

每周产品介绍：微信“万能拍照识图”小程序，一键提取图片中的文字，识别花草树木.欢迎品鉴.

如何利用python提高运维效率， 节省运维时间， 减少运维人肉堆砌。 感谢每位主动投递同学！

Python爬虫学习群 作业集。 加微信 yong164647，一起学习Python开发

鉴于越来越多的初学者进行爬虫分享，本着“精进”的原则，将提高收录爬虫文章的门槛。 1. 编程语言 2. 爬虫知识 3. 持续精进

Pythoner的集中营, 收集关于Python的各种知识教程. 推荐文章和系列阅读: 1. Python 零基础入门资料整理（更新版） http://www.jianshu.com/p/9c02dade7e90 2. Python 零基础入门资料整理 http://www.jianshu.com/p/5eee782b8627 3. Python 从入门到高手系列视频教程 http://www.jianshu.com/p/93085280e4a4 4. Python学习网络资源整理 http://www.jianshu.com/p/fe0e5a515696 5. Python爬虫学习系列专题 http://www.jianshu.com/notebooks/255245/latest 6. Python Django博客开发专题 http://www.jianshu.com/notebooks/293635/latest PS: 另招Python热心管理员