数据分析之pandas的使用

pandas

为什么学习pandas

  • numpy已经可以帮助我们进行数据的处理了,那么学习pandas的目的是什么呢?
    • numpy能够帮助我们处理的是数值型的数据,当然在数据分析中除了数值型的数据还有好多其他类型的数据(字符串,时间序列),那么pandas就可以帮我们很好的处理除了数值型的其他数据!

什么是pandas?

  • 首先先来认识pandas中的两个常用的类
    • Series
    • DataFrame

Series

  • Series是一种类似与一维数组的对象,由下面两个部分组成:

    • values:一组数据(ndarray类型)
    • index:相关的数据索引标签
  • Series的创建

    • 由列表或numpy数组创建
    • 由字典创建
from pandas import Series
s = Series(data=[127,2,3,'regina'])

image-20221215173915095

image-20221215175027237

为什么需要有显示索引?

答:显示索引可以增强Series 的可读性

还可以直接引入字典:

image-20221215175316761

Series的索引和切片

s[0] --> regina
s.姓名 --> regina
s[0:2] --> 
姓名    regina
年龄        23
dtype: object
  • Series的常用属性
    • shape
    • size
    • index 返回索引
    • values 返回值
s.shape
s.size
s.index #返回索引
s.values #返回值
s.dtype #元素的类型
  • Series的常用方法

    • head(),tail()

      image-20221216113457246

      这里的head和tail默认是5,tail显示最后n个数据

    • unique() 去重

      image-20221216113639939

    • isnull(),notnull()

    • add() sub() mul() div()

      只有索引一致的数据才可以相加

      image-20221216113810596

      同时也只有数据类型一样的才能相加

      image-20221216113931735

DataFrame

  • DataFrame是一个【表格型】的数据结构。DataFrame由按一定顺序排列的多列数据组成。设计初衷是将Series的使用场景从一维拓展到多维。DataFrame既有行索引,也有列索引。

    • 行索引:index
    • 列索引:columns
    • 值:values
  • DataFrame的创建

    • ndarray创建

      image-20221216114737560

    • 字典创建

      image-20221216114908080

  • DataFrame的属性

    • values、columns、index、shape

    image-20221216115319873

============================================

练习:

根据以下考试成绩表,创建一个DataFrame,命名为df:

 regina  ivanlee  
语文 150  		0
数学 150  		0
英语 150  		0
理综 300  		0

============================================

image-20221216115858360

  • DataFrame索引操作

    df = DataFrame(data=np.random.randint(60,100,size=(5,5)),columns=['A','B','C','D','E'],index=[1,2,3,4,5])
    

    image-20221216133947727

    • 对行进行索引

      • iloc: 通过隐式索引取行 (不根据所定义的index取值)

        image-20221216144916020

        取单个元素:

        df.iloc[,]

      • loc: 通过显示索引取行

        image-20221216134958627

    • 队列进行索引

      df['A'] #取单列,如果df有显示的索引,通过索引机制去行或者列的时候只可以使用显示索引

      image-20221216134039056

      image-20221216134101073

    • 对元素进行索引

      取多个元素:

      image-20221216145526288

  • DataFrame的切片操作

    • 对行进行切片
    • 对列进行切片
  • df索引和切片操作

    • 索引:

      • df[col]:取列
      • df.loc[index]:取行
      • df.iloc[index,col]:取元素
    • 切片:

      • df[index1:index3]:切行

        image-20221216150046991

      • df.iloc[:,col1:col3]:切列

        image-20221216150125128

DataFrame的计算与Series一致

  • 时间数据类型的转换

    • pd.to_datetime(col)

      dic = {
          'time':['2010-10-10','2011-11-20','2020-01-10'],
          'temp':[33,31,30]
      }
      df = DataFrame(data=dic) df['time'].dtype = 'O'
      import pandas as pd
      #将time列的数据类型转换成时间序列类型
      df['time'] = pd.to_datetime(df['time'])
      df['time']
      

      image-20221216151216436

  • 将某一列设置为行索引

    • df.set_index()

      上图中的索引是隐式索引的012,如果要将time列作为行索引

      #将time列作为源数据的行索引
      df.set_index('time',inplace=True)
      

      image-20221216154809733

本站文章如无特殊说明,均为本站原创,如若转载,请注明出处:数据分析之pandas的使用 - Python技术站

(0)
上一篇 2023年4月2日 下午4:14
下一篇 2023年4月2日 下午4:14

相关文章

  • Django_模型详解

    Django_模型ORM Django中内嵌了ORM框架,不需要直接编写SQL语句进行数据库操作,而是通过定义模型类,操作模型类来完成对数据库中表的增删改查和创建等操作。 O是object,也就类对象的意思。 R是relation,翻译成中文是关系,也就是关系数据库中数据表的意思。 M是mapping,是映射的意思。 映射: 类:sql语句table表 类成…

    2023年4月2日
    00
  • django中间件以及自定义中间件

    middleware 中间件就是在目标和结果之间进行的额外处理过程,在Django中就是request和response之间进行的处理,相对来说实现起来比较简单,但是要注意它是对全局有效的,可以在全局范围内改变输入和输出结果,因此需要谨慎使用,否则不仅会造成难以定位的错误,而且可能会影响整体性能。 中间件有什么用 如果想要修改HttpRequest或者Htt…

    2023年4月2日
    00
  • pip常见命令

    linux常用的一些命令笔记___pip3 [root@localhost ~]# pip3 –help Usage: pip3 <command> [options] Commands: install Install packages. download Download packages. uninstall Uninstall pack…

    2023年4月2日
    00
  • linux使用php-ast方法

    php-ast php-cs-fixer PHP-CS-Fixer 是一个开源工具,它可以强制执行和检测违反 PHP 编码风格的行为。 使用预定义的规则,它可以使您拥有严格的编码风格,该风格由工具强制执行,因此您可以将时间花在更重要的事情上。 安装过程 在github上其实给出了很多种安装方式,我直接下载了php-cs-fixer.phar文件并将其存储在计…

    PHP 2023年4月17日
    00
  • CSRF和token以及用django实现

    csrf CSRF(Cross-Site Request Forgery,跨站点伪造请求)是一种网络攻击方式,该攻击可以在受害者毫不知情的情况下以受害者名义伪造请求发送给受攻击站点,从而在未授权的情况下执行在权限保护之下的操作,具有很大的危害性。具体来讲,可以这样理解CSRF攻击:攻击者盗用了你的身份,以你的名义发送恶意请求,对服务器来说这个请求是完全合法的…

    2023年4月2日
    00
  • mysql面试小结

    MySQL 1. 索引 1.1 什么是索引 索引是一种特殊的文件(InnoDB数据表上的索引是表空间的一个组成部分),它们包含着对数据表里所有记录的引用指针。 索引是一种数据结构。数据库索引,是数据库管理系统中一个排序的数据结构,以协助快速查询、更新数据库表中数据。索引的实现通常使用B树及其变种B+树。 更通俗的说,索引就相当于目录。为了方便查找书中的内容,…

    MySQL 2023年4月18日
    00
  • Django_渲染详解

    Django_render 模板语法 模板引擎是一种可以让开发者把服务端数据填充到html网页中完成渲染效果的技术。它实现了把前端代码和服务端代码分离的作用,让项目中的业务逻辑代码和数据表现代码分离,让前端开发者和服务端开发者可以更好的完成协同开发。 静态网页:页面上的数据都是写死的,万年不变 动态网页:页面上的数据是从后端动态获取的(比如后端获取当前时间;…

    2023年4月2日
    00
  • pandas替换,加载,透视表

    pandas的级联和合并 级联操作 pd.concat, pd.append pandas使用pd.concat函数,与np.concatenate函数类似,只是多了一些参数: objs axis=0 keys join=’outer’ / ‘inner’:表示的是级联的方式,outer会将所有的项进行级联(忽略匹配和不匹配),而inner只会将匹配的项级联…

    2023年4月2日
    00
合作推广
合作推广
分享本页
返回顶部