《从Python开始学编程》第5章

第五章 对象带你飞

5.1 储存

1.文件

·Python必须把数据储存在磁盘中。

·磁盘以文件为单位储存数据,在python中,我们可以通过内置函数open来创建文件对象。在调用open时,需要说明文件名以及文件打开方式:f=open(文件名,方式)

·打开文件的常用方式有:“r”:读取已存在的文件,“w”:新建文件并写入,“a”:如果文件存在,那么写入到文件的结尾。如果文件不存在,则新建文件并写入。

·通过以上返回的对象,我们可以读取文件:

content = f.read(10)   #只读取10个字节的数据

content = f.readline()  #读取一行

content =f.readlines()  #读取所有行,储存在列表中,每个元素是一行

f.white() #写入一行,用/r/n为分行符,括号内为输入内容

f.close() #关闭文件

2.上下文管理器

·上下文管理器用于规定某个对象的使用范围。一旦进入或者离开该使用范围,则会有特殊操作被调用(关闭文件)。


3.pickle包

·文本可以被存于文件,Python中最常见的是对象,当程序结束或者计算机关机时,这些存于内存的对象便会消失,利用Python和pickle包可以做到把对象存到磁盘上。

·分为两部:1.将对象在内存中的数据直接抓取出来,转换成一个有序的文本(序列化 Serialization) 2.将文本存入文件


·读取上面保存的文件时,首先,我们从文件中读出文本,然后使用pickle的loads()方法,将字符串形式的文本转化为对象。


5.2 一寸光阴

1.time包

·Python可以替我们管理日期和时间


挂钟时间是从某个固定时间起点到现在的时间间隔

·借助模块time测量程序运行时间


·程序可以休眠


·time包中还定义了struct_time对象。(tm_year、tm_mon、tm_mday...)

2.datetmie包

·datetime包分为两类:datetime.date类和datetmie.time类,你也可以把日期和时间结合在一起使用:datetime.datetime。

打印结果为2019-09-03  21:30:00

·对象t属性:hour、minute、millisecond、microsecond、year、month、day、weekday

·我们还可以进行时间间隔的运算。


·在传递参数时,还可以是天、小时、毫秒、微秒;两个datetime对象能进行比较运算,以确定哪个时间间隔更长。(print(t>t_next)#打印False)

3.日期格式

·包含有时间信息的字符串,我们可以借助datetime包,把它们转化为datetime类对象


·我们也可以调用datetime对象的surftime方法,将一个datetime对象转换成特定格式的字符串

·常用的特殊符号(如想表示%本身,可以使用%%来表示):

5.3 看起来像那样的东西

1.正则表达式

·主要功能是从字符串中通过特定的格式,搜索到希望找到的内容。Python中可以使用包re来处理正则表达式。

如果没有找到,则返回None

·其他搜索方法:

m = re.search(pattern,string)  #搜索整个字符串,直到发现符合的子字符串

m = re.match(pattern,string)   #从头开始检查字符串是否符合正则表达式

                                                  #必须从字符串的第一个字符开始就相符

·我们还可以在搜索之后将搜索到的子字符串进行替换

形如str = re.sub(pattern, replacement, string),replacement就是替换用的的字符串。

·常用的方法还有:


re.split是以数字为边界对字符串'one1two2three3four4'进行切分,得到['one','two','three','four','']五个字符串

re.findall是匹配字符串'one1two2three3four4'中的所有数字,得到['1','2','3','4']四个数字

2.写一个正则表达式


符号紧跟着单个字符之后


重复位置的符号

3.进一步提取

·群,用括号()圈起来的正则表达式的一部分,称之为群(group),一个正则表达式可以有多个

·我们可以用group(number)来查询群。注意:group(0)是整个正则表达式的搜索结果,group(1)是第一个群。

·还能为group命名

5.4 Python有网瘾

1.HTTP通信简介

·HTTP工作方式:1)请求 2)回复

计算机发出请求时会遵照下面格式:

GET:用于说明想要服务器执行的操作。

/index.html: 资源的路径,这里指向服务器上的index.html文件。

HTTP/1.1协议的版本,HTTP第一个广泛使用的版本是1.0,当前版本为1.1。

Host: www.example.com:要访问的服务器地址。

·服务器在接收到请求之后,会根据程序,生成对应于该请求的回复,比如:

HTTP/1.1:协议版本  200:状态码(status code)(一切OK) OK:状态描述(对状态码200的文字描述)

·其他状态码:(1)302,重新定向(Redirect):我这里没有你想要的资源,但我知道另一个地方xxx有,你可以去那找  (2)404,无法找到(Not Found):我找不到你想要的资源,无能为力

Content-type说明了主体所包含的资源的类型,根据类型的不同,客户端可以启动不同的处理程序(如:显示图像,播放声音),下面是常见的一些资源:

text/plain:普通文本

text/html:HTML文本

image/jpeg:jpeg图片

image/gif:gif图片

Content-length说明了主体部分的长度,以字节(byte)为单位

·剩下的是主体部分,包含了主要的文本数据。

2.http.client包

·在明确了主机地址、请求方法和资源路径,再加上http.client包的帮助,就可以发出http请求。

网络正常,下面程序就会访问网址,并获取对应位置的超文件文本。

5.5 写一个爬虫

第一步:访问博客首页,作者的博客地址是www.cnblogs.com/vamei,主机是www.cnblogs.com,资源位置是/vamei。这个页面是一个超文本文件,所以我们用 HTTPS协议访问:

第二部:清洗数据,爬取我们想要的信息

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 202,009评论 5 474
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 84,808评论 2 378
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 148,891评论 0 335
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,283评论 1 272
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,285评论 5 363
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,409评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,809评论 3 393
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,487评论 0 256
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,680评论 1 295
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,499评论 2 318
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,548评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,268评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,815评论 3 304
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,872评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,102评论 1 258
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,683评论 2 348
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,253评论 2 341

推荐阅读更多精彩内容

  • 目录 1.读写文件2.时间设置3.正则表达式4.计算机通信5.爬虫 1.读写文件 python可以把数据储存在文件...
    谢艺俊阅读 262评论 0 4
  • 写在前面的话 代码中的# > 表示的是输出结果 输入 使用input()函数 用法 注意input函数输出的均是字...
    FlyingLittlePG阅读 2,720评论 0 8
  • 高阶函数:将函数作为参数 sortted()它还可以接收一个key函数来实现自定义的排序,reversec参数可反...
    royal_47a2阅读 674评论 0 0
  • 常用模块 认识模块 什么是模块 什么是模块? 常见的场景:一个模块就是一个包含了python定义和声明的文件,文...
    go以恒阅读 1,932评论 0 6
  • 类 !/usr/bin/python -- coding: UTF-8 -- class Employee:'所有...
    SkTj阅读 942评论 0 0