Pandas缺失值填充 df.fillna()的实现
作者:山茶花开时。 时间:2023-11-24 00:01:41
df.fillna主要用来对缺失值进行填充,可以选择填充具体的数字,或者选择临近填充。
官方文档
DataFrame.fillna(self, value=None, method=None, axis=None, inplace=False, limit=None, downcast=None)
df.fillna(x)可以将缺失值填充为指定的值
import pandas as pd
# 原数据
df = pd.DataFrame({'A':['a1','a1','a2','a2'],
'B':['b1','b2',None,'b2'],
'C':[1,2,3,4],
'D':[5,6,None,8],
'E':[5,None,7,8]
})
# 将缺失值填充为0
res1 = df.fillna(0)
结果展示
df
res1
# 常用的方法还有以下几个:
# 填充为0
df.fillna(0)
# 填充为指定字符
df.fillna('missing')
df.fillna('暂无')
df.fillna('待补充')
# 指定字段填充
df.E.fillna('暂无')
# 指定字段填充
df.E.fillna(0, inplace = True)
# 只替换第一个
df.fillna(0, limit = 1)
# 将不同列的缺失值替换为不同的值
values = {'A':0,'B':1,'C':2,'D':3}
df.fillna(value = values)
需要注意的是,如果想让填充马上生效,需要重新为df赋值或者传入参数inplace = True
有时候我们不能填入固定值,而是按照一定的方法填充,df.fillna()提供了一个method参数,可以指定以下几个方法:
pad/ffill:向前填充,使用前一个有效值填充,df.fillna(method=’ffill’)可以简写为df.ffill()
bfill/backfill:向后填充,使用后一个有效值填充,df.fillna(method=’bfill’)可以简写为df.bfill()
import pandas as pd
# 原数据
df = pd.DataFrame({'A':['a1','a1','a2','a2'],
'B':['b1','b2',None,'b2'],
'C':[1,2,3,4],
'D':[5,6,None,8],
'E':[5,None,7,8]
})
# 取后一个有效值填充
res1 = df.fillna(method = 'bfill')
# 取前一个有效值填充
res2 = df.fillna(method = 'ffill')
结果展示
df
res1
res2
除了取前后值,还可以取经过计算得到的值,比如常用的平均值填充法:
# 填充列的平均值
df.fillna(df.mean())
# 对指定列填充平均值
df.fillna(df.mean()['B':'D'])
# 另一种填充列的平均值的方法
df.where(pd.notna(df),df.mean(),axis = 'columns')
缺失值的填充的另一思路是使用替换方法df.replace():
# 将指定列的空值替换成指定值
import pandas as pd
import numpy as np
# 原数据
df = pd.DataFrame({'A':['a1','a1','a2','a2'],
'B':['b1','b2',None,'b2'],
'C':[1,2,3,4],
'D':[5,6,None,8],
'E':[5,None,7,8]
})
df.replace({'B':{np.nan:'Hudas'}})
结果展示
来源:https://blog.csdn.net/Hudas/article/details/122923643
标签:Pandas,缺失值填充,df.fillna()


猜你喜欢
从"..."看中国的UI设计界的粗糙
2007-11-21 19:28:00

python通过txt文件批量安装依赖包的实现步骤
2022-05-10 23:26:14
mysql 5.7.18 绿色版下载安装教程
2024-01-20 02:23:30

kali添加开机自启的方法
2023-06-06 04:15:06

vue实现Input输入框模糊查询方法
2024-04-28 09:20:46

Python3中使用urllib的方法详解(header,代理,超时,认证,异常处理)
2023-10-20 19:36:33
Mysql 相邻两行记录某列的差值方法
2024-01-18 22:29:14

python 对key为时间的dict排序方法
2021-03-22 17:09:59
Python实现读取Linux系统的CPU以及内存占用
2021-06-22 06:59:31

使用Perl语言去存取mSQL和MySQL数据库的内容
2009-10-23 09:11:00
如何在2003系统注册fso组件
2010-11-29 19:55:00
IntelliJ IDEA2020.3 新特性(小结)
2023-12-24 13:33:13

asp+jsp+JavaScript动态实现添加数据行
2023-07-03 05:37:15

SQL Server 2008 安装SQLDMO.dll的方法
2024-01-12 18:13:15
SQLServer2008新实例远程数据库链接问题(sp_addlinkedserver)
2024-01-19 23:44:22
python 获取list 长度
2021-11-12 12:49:57
Python操作MySQL简单实现方法
2024-01-19 04:45:44
vue-cli4如何打包静态资源到指定目录
2024-05-22 10:43:24

在pytorch中如何查看模型model参数parameters
2021-12-04 22:43:29

ASP中Request对象获取客户端数据的顺序
2007-09-22 10:36:00