Python自动化办公-Excel读取与操作

实现自动化办公是许多同学学习Python的初衷,但对于有选择困难症而且基础相对薄弱的同学来讲,面对众多的教程,Python库,往往无从下手,本篇从实际应用的角度,给出一条能快速上手的学习及实操路线,以让初学者少走弯路,尽快上车。

现有Excel自动化处理方式及对比

方式 优点 缺点
VBA Excel自带,兼容性好,无需环境Python环境 复杂数据处理是门槛较高,需单独学习
XlsxWriter 可创建和写2007及xlsx文件 不能读取,不能处理xls文件
xlrd,xlwt,xlutils 三个包配合用,可读可写 大文件处理能力弱
OpenPyXL 读写2007, xlsm, xltx, xltm文件 不支持xls
pandas 批量数据处理,操作简单,所有Excel问题都可以转换为pandas问题进行处理,只学习一个包,以不变应万变。 通常为结果数据,不支持公式,作图等

本文主要讲如何运用pandas处理Excel:

  • 学习pandas使用(已经了解的同学忽略)
  • 学习read_excelto_excel参数含义。将Excel转化为DataFrame,用pandas进行处理及输出。

pands库学习

Python数据科学,有几个包是必须掌握的,numpy处理数组矩阵计算,pandas相当于numpy的升级版,处理结构化数据,这两个包是学习其他数据处理的前提,学习资源有:廖雪峰官网,《Python数据科学》等,此处不进行过多,后面我会针对这两部分做专项讲解,同学们可后续关注更新情况。

read_excel”参数介绍

pd.read_excel(io, sheetname=0,header=0,skiprows=None,index_col=None,names=None,
                arse_cols=None,date_parser=None,na_values=None,thousands=None, 
                convert_float=True,has_index_names=None,converters=None,dtype=None,
                true_values=None,false_values=None,engine=None,squeeze=False,**kwds)

大家知道,每个Python库通常参数都特别多,但大家只需知道常用的就好,下面我把常用的参数给大家做了翻译:

pd.read_excel(io="路径", sheetname="工作表名",header="指定作为列名的行",
skiprows="跳过头部指定行数的数据",ski_footer="跳过尾部指定行数的数据",index_col="指定索引列",
names="传入列名list", usecols="要读取的列", arse_cols=None,date_parser=None,na_values=None,thousands=None, convert_float=True,has_index_names=None,converters=None,
dtype=None, true_values=None,false_values=None,engine=None,squeeze=False,**kwds)

示例

假如我们Excel中有两个工作表,表1:“科目”,表2:“等级”,现在要把等级根据成绩匹配值表1.


1.读取数据
读取数据是要指定好工作表名称,表头位置,否则会导致数据读取不准确。比如仅指定工作表名:

import pandas as pd
data_kemu = pd.read_excel('Test.xlsx',sheet_name="科目" ,header=2,usecols=['姓名','科目','成绩'])
data_kemu

结果如下,因为表内数据并非顶格开始的,所以需要加入更多参数。
data_kemu = pd.read_excel('Test.xlsx',sheet_name="科目" ,header=2,usecols=['姓名','科目','成绩'])
data_kemu

输出结果正常,所以在Excel文件读取是,通常要指定出工作表名,起始行,所需列等信息:


2.数据匹配merge

data_kemu = pd.read_excel('/Users/liuhongxing/Desktop/Test.xlsx',sheet_name="科目",header=2,usecols=['姓名','科目','成绩'])
data_dengji = pd.read_excel('/Users/liuhongxing/Desktop/Test.xlsx',sheet_name="等级",header=2,usecols=['等级','成绩'])
data = pd.merge(data_kemu,data_dengji,how='left',on='成绩')
data.head()

输出结果,与预期一致,此处采用了常用的函数merge,来处理不同表间数据融合的问题。


3.存储导出

to_excel”参数介绍

导出虽然有较多参数,但我们通常已经在数据处理过程中处理成了我们想要的样子,所以此处需要用到的参数通常较少,通常为表名,缺失值填充,是否含index等,其它维持默认即可。

df.to_excel(self, excel_writer, sheet_name='Sheet1', na_rep='', float_format=None,columns=None, header=True, index=True, index_label=None,startrow=0, startcol=0, engine=None, merge_cells=True, encoding=None,
inf_rep='inf', verbose=True, freeze_panes=None)

参数解释:

df.to_excel(目标路径, sheet_name="工作表名", na_rep="缺失值填充", float_format="数据格式",columns=“哪些列存储”, header=“是否含表头”, index=“是否含index,默认有”, index_label=None,startrow=“起始行”, startcol=“起始列”, engine=None, merge_cells=True, encoding=“编码方式”,
inf_rep='inf', verbose=True, freeze_panes=None)

导出示例:

data.to_excel('Data.xlsx',sheet_name="汇总",index=False)

结语

本文侧重讲解了运用pandas对Excel表进行读入和输出的两个常用函数read_excelto_excel,在这个基础上,将一切Excel问题转化为pandas问题,从而实现Excel的快速批量处理,实现真正意义上的办公自动化。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 199,340评论 5 467
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 83,762评论 2 376
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 146,329评论 0 329
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 53,678评论 1 270
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 62,583评论 5 359
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 47,995评论 1 275
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,493评论 3 390
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,145评论 0 254
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,293评论 1 294
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,250评论 2 317
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,267评论 1 328
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,973评论 3 316
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,556评论 3 303
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,648评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,873评论 1 255
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,257评论 2 345
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 41,809评论 2 339