pandas入门

 引入pandas和常用的数据结构Series,DataFrame

一、pandas的数据结构的介绍

1.Series

        Series是一种类似于一维数组的对象,它由一组数据(各种NumPy数据类型)以及一组与之相关的数据标签(即索引)组成。仅由一组数据即可产生最简单的Series:


        默认索引是一个从0-N-1(N为数据长度)的整数型索引。你可以通过Series的values和index属性获取其数组表示形式和索引对象:

        可以通过index创建自己想要的索引:


        可以通过索引选取一个或者一组值,或者对其进行修改:

        NumPy数组运算都会保留索引和数值之间的链接:

        还可以将Series看成是一个定长的有序字典,因为它是索引值到数据值的一个映射。它可以用在许多原本需要字典参数的函数中:

        如果数据被存在一个Python字典中,也可以直接通过这个字典来创建Series:

        如果只传入一个字典,则结果Series中的索引就是原字典的键(有序排列)。

        在这个例子中,sdata中跟states索引相匹配的那3个值会被找出来并放到相应的位置上,但由于California所对应的sdata值找不到,就用NaN代替。在pandas中,可以用isnull和notnull

函数来检测缺失数据:

        Series也有类似的方法:

        对于许多应用而言,Series最重要的一个功能是:它在算术运算中会自动对齐不同索引的数据。

        Series对象本身及其索引都有一个name属性,该属性跟pandas其他的关键功能关系非常密切:

        Series的索引值可以通过赋值的方式就地修改:

2、DataFrame

                DataFrame是一个表格型的数据结构,它含有一组有序的列,每列可以是不同的值类型。DataFrame既有行索引也有列索引,它可以被看做由Series组成的字典(共用同一个索引)。DataFrame中面向行和面向列的操作基本上是平衡的。其实,DataFrame中的数据是以一个或多个二维块存放的(而不是列表、字典或别的一维数据结构)。

        注意:虽然DataFrame是以二维结构保存数据的,但你仍然可以轻松的将其表示为更高维的数据。

        构建DataFrame的办法有很多,最常用的是直接传人一个由等长列表或NumPy数组组成的字典:



debt没有值,自动填充为NaN

3、索引对象

        pandas的索引对象负责管理轴标签和其他元数据(比如轴名称等)。构建Series或DataFrame时,所用到的任何数组或其他序列的标签都会被转换成一个Index:

        Index对象是不可修改的(immutable),因此用户不可对其修改:

        不可修改性非常重要,因为这样才能使Index对象在多个数据结构之间安全共享。


二、基本功能

        1、重新索引

            pandas对象的一个重要方法是reindex,其作用是创建一个适应新索引的新对象。








例子:


        DataFrame和Series之间的运算差不多也是如此,默认情况下,DataFrame和Series之间的算术运算会将Series的索引匹配到DataFrame的列,然后沿着行一直向下广播:

        如果某个索引值在DataFrame的列或者Series的索引中找不到,则参与运算的两个对象就会重新索引以形成并集:

        如果你希望匹配行且在列上广播,则必须使用算术运算方法。例如:

函数应用与映射

NumPy的ufunc(元素级数组方法)    也可用于操作pandas对象:

        另一个常见操作是,将函数应用到由各列或行所形成的一维数组上。DataFrame的apply方法即可实现此功能:

在DataFrame上,你希望根据一个或多个列中的值进行排序。将一个或多个列的名字传递给by选项即可达到该目的:

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 194,524评论 5 460
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 81,869评论 2 371
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 141,813评论 0 320
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,210评论 1 263
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 61,085评论 4 355
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,117评论 1 272
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,533评论 3 381
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,219评论 0 253
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,487评论 1 290
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,582评论 2 309
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,362评论 1 326
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,218评论 3 312
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,589评论 3 299
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 28,899评论 0 17
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,176评论 1 250
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 41,503评论 2 341
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 40,707评论 2 335

推荐阅读更多精彩内容