pandas.DataFrame中提取特定类型dtype的列

作者:饺子大人 时间:2021-06-13 06:04:25 

pandas.DataFrame为每一列保存一个数据类型dtype。

要仅提取(选择)特定数据类型为dtype的列,请使用pandas.DataFrame的select_dtypes()方法。

以带有各种数据类型的列的pandas.DataFrame为例。

import pandas as pd

df = pd.DataFrame({'a': [1, 2, 1, 3],
                   'b': [0.4, 1.1, 0.1, 0.8],
                   'c': ['X', 'Y', 'X', 'Z'],
                   'd': [[0, 0], [0, 1], [1, 0], [1, 1]],
                   'e': [True, True, False, True]})

df['f'] = pd.to_datetime(['2018-01-01', '2018-03-15', '2018-02-20', '2018-03-15'])

print(df)
#    a    b  c       d      e          f
# 0  1  0.4  X  [0, 0]   True 2018-01-01
# 1  2  1.1  Y  [0, 1]   True 2018-03-15
# 2  1  0.1  X  [1, 0]  False 2018-02-20
# 3  3  0.8  Z  [1, 1]   True 2018-03-15

print(df.dtypes)
# a             int64
# b           float64
# c            object
# d            object
# e              bool
# f    datetime64[ns]
# dtype: object

将描述以下内容。

select_dtypes()的基本用法

  • 指定要提取的类型:参数include

  • 指定要排除的类型:参数exclude

select_dtypes()的基本用法

指定要提取的类型:参数include

在参数include中指定要提取的数据类型dtype。

print(df.select_dtypes(include=int))
#    a
# 0  1
# 1  2
# 2  1
# 3  3

可以按原样指定作为Python的内置类型提供的那些变量,例如int和float。您可以将“ int”指定为字符串,也可以指定“ int64”(包括确切位数)。 (标准位数取决于环境)

print(df.select_dtypes(include='int'))
#    a
# 0  1
# 1  2
# 2  1
# 3  3

print(df.select_dtypes(include='int64'))
#    a
# 0  1
# 1  2
# 2  1
# 3  3

当然,当最多包括位数时,除非位数匹配,否则不会选择它。

print(df.select_dtypes(include='int32'))
# Empty DataFrame
# Columns: []
# Index: [0, 1, 2, 3]

列表中可以指定多种数据类型dtype。日期和时间datetime64 [ns]可以由’datetime’指定。

print(df.select_dtypes(include=[int, float, 'datetime']))
#    a    b          f
# 0  1  0.4 2018-01-01
# 1  2  1.1 2018-03-15
# 2  1  0.1 2018-02-20
# 3  3  0.8 2018-03-15

可以将数字类型(例如int和float)与特殊值“ number”一起指定。

print(df.select_dtypes(include='number'))
#    a    b
# 0  1  0.4
# 1  2  1.1
# 2  1  0.1
# 3  3  0.8

元素为字符串str类型的列的数据类型dtype是object,但是object列还包含除str外的Python标准内置类型。实际上,数量并不多,但是,如示例中所示,如果有一列的元素为列表类型,请注意,该列也是由include = object提取的。

print(df.select_dtypes(include=object))
#    c       d
# 0  X  [0, 0]
# 1  Y  [0, 1]
# 2  X  [1, 0]
# 3  Z  [1, 1]

print(type(df.at[0, 'c']))
# <class 'str'>

print(type(df.at[0, 'd']))
# <class 'list'>

但是,除非对其进行有意处理,否则字符串str类型以外的对象都不会(可能)成为pandas.DataFrame的元素,因此不必担心太多。

指定要排除的类型:参数exclude

在参数exclude中指定要排除的数据类型dtype。您还可以在列表中指定多个数据类型dtype。

print(df.select_dtypes(exclude='number'))
#    c       d      e          f
# 0  X  [0, 0]   True 2018-01-01
# 1  Y  [0, 1]   True 2018-03-15
# 2  X  [1, 0]  False 2018-02-20
# 3  Z  [1, 1]   True 2018-03-15

print(df.select_dtypes(exclude=[bool, 'datetime']))
#    a    b  c       d
# 0  1  0.4  X  [0, 0]
# 1  2  1.1  Y  [0, 1]
# 2  1  0.1  X  [1, 0]
# 3  3  0.8  Z  [1, 1]

可以同时指定包含和排除,但是如果指定相同的类型,则会发生错误。

print(df.select_dtypes(include='number', exclude=int))
#      b
# 0  0.4
# 1  1.1
# 2  0.1
# 3  0.8

# print(df.select_dtypes(include=[int, bool], exclude=int))
# ValueError: include and exclude overlap on frozenset({<class 'numpy.int64'>})

来源:https://blog.csdn.net/qq_18351157/article/details/109745683

标签:pandas,DataFrame,特定类型,列
0
投稿

猜你喜欢

  • 解决pycharm安装scrapy DLL load failed:找不到指定的程序的问题

    2023-08-29 17:47:32
  • Python 利用邮件系统完成远程控制电脑的实现(关机、重启等)

    2023-12-23 19:32:54
  • SQL SERVER 2008数据库日志文件收缩的方法

    2024-01-27 09:29:38
  • em与px的区别以及em特点和应用

    2008-11-11 12:03:00
  • python中列表对象pop()方法的使用说明

    2021-10-25 09:45:40
  • 使用Python发送各种形式的邮件的方法汇总

    2022-12-21 15:24:46
  • Python 模块EasyGui详细介绍

    2022-04-27 22:55:39
  • 详解PHP合并多个PDF文件的方法

    2023-06-15 07:05:22
  • python 图像增强算法实现详解

    2023-10-27 10:12:47
  • 解决pytorch 的state_dict()拷贝问题

    2022-10-05 22:03:57
  • 用Django实现一个可运行的区块链应用

    2022-07-17 22:26:31
  • Dreamweaver MX网页图片热区使用方法

    2008-05-20 12:50:00
  • python中执行smtplib失败的处理方法

    2023-03-31 17:41:35
  • python使用正则表达式来获取文件名的前缀方法

    2023-02-08 07:37:58
  • MySQL主从复制的原理及配置方法(比较详细)

    2024-01-28 18:21:02
  • 简单了解python调用其他脚本方法实例

    2022-12-07 08:53:36
  • Django结合使用Scrapy爬取数据入库的方法示例

    2022-10-23 01:08:11
  • 解决Vue axios post请求,后台获取不到数据的问题方法

    2024-05-09 09:38:38
  • sql动态行转列的两种方法

    2024-01-24 07:17:41
  • 解决Python安装后pip不能用的问题

    2023-05-10 04:52:14
  • asp之家 网络编程 m.aspxhome.com