Python Pandas list列表数据列拆分成多行的方法实现
作者:levi 时间:2021-04-20 18:56:01
1、实现的效果
示例代码:
df=pd.DataFrame({'A':[1,2],'B':[[1,2],[1,2]]})
df
Out[458]:
A B
0 1 [1, 2]
1 2 [1, 2]
拆分成多行的效果:
A B
0 1 1
1 1 2
3 2 1
4 2 2
2、拆分成多行的方法
1)通过apply和pd.Series实现
容易理解,但在性能方面不推荐。
df.set_index('A').B.apply(pd.Series).stack().reset_index(level=0).rename(columns={0:'B'})
Out[463]:
A B
0 1 1
1 1 2
0 2 1
1 2 2
2)使用repeat和DataFrame构造函数
性能可以,但不太适合多列
df=pd.DataFrame({'A':df.A.repeat(df.B.str.len()),'B':np.concatenate(df.B.values)})
df
Out[465]:
A B
0 1 1
0 1 2
1 2 1
1 2 2
或者
s=pd.DataFrame({'B':np.concatenate(df.B.values)},index=df.index.repeat(df.B.str.len()))
s.join(df.drop('B',1),how='left')
Out[477]:
B A
0 1 1
0 2 1
1 1 2
1 2 2
3)创建新的列表
pd.DataFrame([[x] + [z] for x, y in df.values for z in y],columns=df.columns)
Out[488]:
A B
0 1 1
1 1 2
2 2 1
3 2 2
或者
#拆成多于两列的情况
s=pd.DataFrame([[x] + [z] for x, y in zip(df.index,df.B) for z in y])
s.merge(df,left_on=0,right_index=True)
Out[491]:
0 1 A B
0 0 1 1 [1, 2]
1 0 2 1 [1, 2]
2 1 1 2 [1, 2]
3 1 2 2 [1, 2]
4)使用reindex和loc实现
df.reindex(df.index.repeat(df.B.str.len())).assign(B=np.concatenate(df.B.values))
Out[554]:
A B
0 1 1
0 1 2
1 2 1
1 2 2
#df.loc[df.index.repeat(df.B.str.len())].assign(B=np.concatenate(df.B.values)
5)使用numpy高性能实现
newvalues=np.dstack((np.repeat(df.A.values,list(map(len,df.B.values))),np.concatenate(df.B.values)))
pd.DataFrame(data=newvalues[0],columns=df.columns)
A B
0 1 1
1 1 2
2 2 1
3 2 2
来源:https://www.cjavapy.com/article/237/
标签:Pandas,list,列,拆分,行
0
投稿
猜你喜欢
Python tkinter模块弹出窗口及传值回到主窗口操作详解
2023-09-27 23:03:05
Python可视化Matplotlib折线图plot用法详解
2021-01-04 03:06:15
解决PyCharm 中写 Turtle代码没提示以及标黄的问题
2023-05-12 09:08:30
python爬取网页内容转换为PDF文件
2023-04-29 10:53:12
javascript彩虹圈效果
2011-08-05 19:10:45
TensorFlow和Numpy矩阵操作中axis理解及axis=-1的解释
2021-02-14 05:59:09
jupyter notebook参数化运行python方式
2022-09-10 21:38:55
Javascript的动态增加类的实现方法
2023-10-15 03:03:25
python对RabbitMQ的简单入门使用教程
2021-01-13 17:53:44
python标准日志模块logging的使用方法
2022-10-29 19:08:16
Apple在Safari 4中抛弃品牌视觉设计
2009-02-26 13:05:00
Python实现CAN报文转换工具教程
2022-06-13 02:34:06
解读HTML:命名空间与字符编码
2008-12-10 14:03:00
Oracle 忘记密码的找回方法
2009-03-06 11:12:00
Python开发之Nginx+uWSGI+virtualenv多项目部署教程
2023-07-30 04:42:39
Oracle11.2.0.1如何升级到11.2.0.3 Oracle同版本升级
2023-06-25 15:28:11
Python+Opencv实战之人脸追踪详解
2022-09-22 16:03:38
Python unittest单元测试框架的使用
2021-11-26 15:56:37
通过数据库引擎来加速的MySQL数据库
2012-01-29 18:07:09
Python爬虫:Request Payload和Form Data的简单区别说明
2021-11-14 14:01:24