pandas将list数据拆分成行或列的实现

作者:XerCis 时间:2023-12-23 01:58:41 

数据


import numpy as np
import pandas as pd

data = [{'Name': '小明', 'Chinese': [70, 80], 'Math': [90, 80]},
   {'Name': '小红', 'Chinese': [70, 80, 90], 'Math': [90, 80, 70]}]
data = pd.DataFrame(data)
data

pandas将list数据拆分成行或列的实现

拆分成行

pandas将list数据拆分成行或列的实现


def split_row(data, column):
 '''拆分成行

:param data: 原始数据
 :param column: 拆分的列名
 :type data: pandas.core.frame.DataFrame
 :type column: str
 '''
 row_len = list(map(len, data[column].values))
 rows = []
 for i in data.columns:
   if i == column:
     row = np.concatenate(data[i].values)
   else:
     row = np.repeat(data[i].values, row_len)
   rows.append(row)
 return pd.DataFrame(np.dstack(tuple(rows))[0], columns=data.columns)

split_row(data, column='Chinese')

拆分成列

pandas将list数据拆分成行或列的实现


from copy import deepcopy

def split_col(data, column):
 '''拆分成列

:param data: 原始数据
 :param column: 拆分的列名
 :type data: pandas.core.frame.DataFrame
 :type column: str
 '''
 data = deepcopy(data)
 max_len = max(list(map(len, data[column].values))) # 最大长度
 new_col = data[column].apply(lambda x: x + [None]*(max_len - len(x))) # 补空值,None可换成np.nan
 new_col = np.array(new_col.tolist()).T # 转置
 for i, j in enumerate(new_col):
   data[column + str(i)] = j
 return data

split_col(data, column='Chinese')

其他情况

 1. 批量处理+不要原列

pandas将list数据拆分成行或列的实现


def split_col(data, columns):
 '''拆分成列

:param data: 原始数据
 :param columns: 拆分的列名
 :type data: pandas.core.frame.DataFrame
 :type columns: list
 '''
 for c in columns:
   new_col = data.pop(c)
   max_len = max(list(map(len, new_col.values))) # 最大长度
   new_col = new_col.apply(lambda x: x + [None]*(max_len - len(x))) # 补空值,None可换成np.nan
   new_col = np.array(new_col.tolist()).T # 转置
   for i, j in enumerate(new_col):
     data[c + str(i)] = j

split_col(data, columns=['Chinese','Math'])
data

2. 带int和list数据

pandas将list数据拆分成行或列的实现

转成这样:

pandas将list数据拆分成行或列的实现


import numpy as np
import pandas as pd

data = [{'Name': '小爱', 'Chinese': 70, 'Math': 90},
   {'Name': '小明', 'Chinese': [70, 80], 'Math': [90, 80]},
   {'Name': '小红', 'Chinese': [70, 80, 90], 'Math': [90, 80, 70]}]
data = pd.DataFrame(data)

def split_col(data, columns):
 '''拆分成列

:param data: 原始数据
 :param columns: 拆分的列名
 :type data: pandas.core.frame.DataFrame
 :type columns: list
 '''
 for c in columns:
   new_col = data.pop(c)
   max_len = max(list(map(lambda x:len(x) if isinstance(x, list) else 1, new_col.values))) # 最大长度
   new_col = new_col.apply(lambda x: x+[None]*(max_len - len(x)) if isinstance(x, list) else [x]+[None]*(max_len - 1)) # 补空值,None可换成np.nan
   new_col = np.array(new_col.tolist()).T # 转置
   for i, j in enumerate(new_col):
     data[c + str(i)] = j

split_col(data, columns=['Chinese','Math'])
data

参考文献

 Python Pandas list(列表)数据列拆分成多行的方法

10分钟了解Pandas基础知识

来源:https://blog.csdn.net/lly1122334/article/details/104629678

标签:pandas,list,拆分
0
投稿

猜你喜欢

  • mysql密码过期导致连接不上mysql

    2024-01-22 12:28:06
  • Oracle以逗号分隔的字符串拆分为多行数据实例详解

    2024-01-13 16:32:46
  • 在SQL Server中使用SQL语句查询一个存储过程被其它所有的存储过程引用的存储过程名

    2012-07-11 16:09:40
  • 分享13款非常有用的jQuery插件

    2011-05-16 19:07:00
  • ThinkPHP5.0框架控制器继承基类和自定义类示例

    2024-05-03 15:52:24
  • Vue 实现拨打电话操作

    2024-05-09 15:09:53
  • 浅谈Python的字典键名可以是哪些类型

    2021-06-13 11:39:47
  • Python编程实现控制cmd命令行显示颜色的方法示例

    2023-07-24 05:39:45
  • 基于wxpython开发的简单gui计算器实例

    2023-09-09 04:42:25
  • Python入门教程(五)Python变量的用法

    2021-04-05 11:17:35
  • Python ATM功能实现代码实例

    2022-10-05 04:48:23
  • Python中__init__和__new__的区别详解

    2023-09-24 13:14:17
  • Tornado高并发处理方法实例代码

    2022-10-13 15:30:07
  • php mailer类调用远程SMTP服务器发送邮件实现方法

    2023-08-16 16:09:18
  • Python使用smtp和pop简单收发邮件完整实例

    2022-01-07 05:48:40
  • Python数据结构详细

    2022-10-03 21:02:00
  • Pipenv一键搭建python虚拟环境的方法

    2022-07-15 03:49:41
  • asp图片加水印的功能代码

    2011-02-05 11:02:00
  • 童年回忆录之python版4399吃豆豆小游戏

    2021-04-30 18:52:44
  • Python使用Selenium模拟浏览器自动操作功能

    2021-01-19 07:55:33
  • asp之家 网络编程 m.aspxhome.com