python数据预处理之将类别数据转换为数值的方法
作者:jingxian 时间:2023-04-17 21:43:18
在进行python数据分析的时候,首先要进行数据预处理。
有时候不得不处理一些非数值类别的数据,嗯, 今天要说的就是面对这些数据该如何处理。
目前了解到的大概有三种方法:
1,通过LabelEncoder来进行快速的转换;
2,通过mapping方式,将类别映射为数值。不过这种方法适用范围有限;
3,通过get_dummies方法来转换。
import pandas as pd
from io import StringIO
csv_data = '''A,B,C,D
1,2,3,4
5,6,,8
0,11,12,'''
df = pd.read_csv(StringIO(csv_data))
print(df)
#统计为空的数目
print(df.isnull().sum())
print(df.values)
#丢弃空的
print(df.dropna())
print('after', df)
from sklearn.preprocessing import Imputer
# axis=0 列 axis = 1 行
imr = Imputer(missing_values='NaN', strategy='mean', axis=0)
imr.fit(df) # fit 构建得到数据
imputed_data = imr.transform(df.values) #transform 将数据进行填充
print(imputed_data)
df = pd.DataFrame([['green', 'M', 10.1, 'class1'],
['red', 'L', 13.5, 'class2'],
['blue', 'XL', 15.3, 'class1']])
df.columns =['color', 'size', 'price', 'classlabel']
print(df)
size_mapping = {'XL':3, 'L':2, 'M':1}
df['size'] = df['size'].map(size_mapping)
print(df)
## 遍历Series
for idx, label in enumerate(df['classlabel']):
print(idx, label)
#1, 利用LabelEncoder类快速编码,但此时对color并不适合,
#看起来,好像是有大小的
from sklearn.preprocessing import LabelEncoder
class_le = LabelEncoder()
color_le = LabelEncoder()
df['classlabel'] = class_le.fit_transform(df['classlabel'].values)
#df['color'] = color_le.fit_transform(df['color'].values)
print(df)
#2, 映射字典将类标转换为整数
import numpy as np
class_mapping = {label: idx for idx, label in enumerate(np.unique(df['classlabel']))}
df['classlabel'] = df['classlabel'].map(class_mapping)
print('2,', df)
#3,处理1不适用的
#利用创建一个新的虚拟特征
from sklearn.preprocessing import OneHotEncoder
pf = pd.get_dummies(df[['color']])
df = pd.concat([df, pf], axis=1)
df.drop(['color'], axis=1, inplace=True)
print(df)
标签:python,数值,转换
![](/images/zang.png)
![](/images/jiucuo.png)
猜你喜欢
SQL 统计一个数据库中所有表记录的数量
2012-01-29 18:21:36
Django如何使用redis作为缓存
2022-12-30 19:19:20
JS判断是否为数字、JS判断是否为整数、JS判断是否为浮点数
2008-11-19 16:42:00
Python中subprocess模块用法实例详解
2021-05-30 20:43:12
ASP和MYSQL开发网站的注意事项
2009-08-21 13:23:00
PHP join()函数用法与实例讲解
2023-06-02 00:39:19
![](https://img.aspxhome.com/file/2023/8/55378_0s.png)
Python实现图片指定位置加图片水印(附Pyinstaller打包exe)
2023-08-13 04:27:16
![](https://img.aspxhome.com/file/2023/5/94065_0s.jpg)
python中的lambda表达式用法详解
2022-12-01 17:33:57
vue实现选择商品规格功能
2024-05-13 09:37:55
![](https://img.aspxhome.com/file/2023/4/125304_0s.jpg)
基于vue的验证码组件的示例代码
2024-06-05 15:29:22
![](https://img.aspxhome.com/file/2023/0/123140_0s.gif)
Python中使用scapy模拟数据包实现arp攻击、dns放大攻击例子
2021-12-04 12:15:05
返回SQL执行时间的存储过程
2024-01-16 15:22:06
Python轮播图与导航栏功能的实现流程全讲解
2021-08-08 22:46:32
![](https://img.aspxhome.com/file/2023/4/105884_0s.jpg)
Python OpenCV实现传统图片格式与base64转换
2021-07-20 21:42:21
阿里云OSS实践文件直传基于服务端
2024-05-13 09:35:27
适合所有表的添加、删除、修改的函数
2008-04-15 15:29:00
asp测字符串长度及截取定长字符串汉字的处理
2007-10-12 13:14:00
浅谈Series和DataFrame中的sort_index方法
2022-07-01 05:53:22
PyTorch 普通卷积和空洞卷积实例
2021-01-06 16:42:57
![](https://img.aspxhome.com/file/2023/0/107130_0s.jpg)
Python可视化模块altair的使用详解
2023-10-03 09:00:28
![](https://img.aspxhome.com/file/2023/9/127149_0s.png)