python 实现两个npy档案合并

作者:董董女友 时间:2022-08-20 13:29:55 

我就废话不多说了,大家还是直接看代码吧~



old_record=numpy.load('exist.npy')
temp_record=[]

path = os.getcwd()+"\\database\\new"  #获取当前路径
for root,dirs,files in os.walk(path):  #遍历统计
for each in files:
url=path+"\\"+each
...
temp_record.append(temp)

numpy.save('temp.npy',temp_record)
temp=numpy.load('temp.npy')

new_record=numpy.append(old_record,temp)
numpy.save('exist.npy',new_record)

补充知识:Python批量处理文件 将多个文件合并

需求:把一个文件夹下的多个csv文件合并成一个文件,文件的格式是相同的,只是按照不同的月份分成了多个文件,现将文件夹下的文件进行合并


import pandas as pd
import os
Folder_Path = 'C:\\Users\\dell\\雾霾预测\\data\\河北省'     #要拼接的文件夹及其完整路径,注意不要包含中文
SaveFile_Path = 'C:\\Users\\dell\\雾霾预测\\data'    #拼接后要保存的文件路径
SaveFile_Name = '河北省201701-201712.csv'       #合并后要保存的文件名

#修改当前工作目录
os.chdir(Folder_Path)
#将该文件夹下的所有文件名存入一个列表
file_list = os.listdir()

#读取第一个CSV文件并包含表头
df = pd.read_csv(Folder_Path +'\\'+ file_list[0]) #编码默认UTF-8,若乱码自行更改

#将读取的第一个CSV文件写入合并后的文件保存
df.to_csv(SaveFile_Path+'\\'+ SaveFile_Name,encoding="utf_8_sig",index=False)

#循环遍历列表中各个CSV文件名,并追加到合并后的文件
FileStart = 1
FileEnd = len(file_list)
for i in range(FileStart,FileEnd):
 df = pd.read_csv(Folder_Path + '\\'+ file_list[i])
 df.to_csv(SaveFile_Path+'\\'+ SaveFile_Name,encoding="utf_8_sig",index=False, header=False, mode='a+')

在读取的时候可能会出现中文乱码的问题,有可能是gbk编码这时候再读取文件的时候需要加上编码格式

df = pd.read_csv(Folder_Path +'\\'+ file_list[0],encoding = 'gbk')

来源:https://blog.csdn.net/weixin_39874268/article/details/83109725

标签:python,npy,合并
0
投稿

猜你喜欢

  • FrontPage XP中的设计技巧

    2008-07-17 10:49:00
  • Python打包文件夹的方法小结(zip,tar,tar.gz等)

    2022-01-14 17:40:55
  • php 图片上添加透明度渐变的效果

    2023-10-23 09:00:02
  • 如何使用共享连接减少空闲的连接数?

    2010-05-16 15:15:00
  • HTML标签tbody的用法

    2009-11-02 10:11:00
  • fckeditor编辑器在php中的配置方法

    2023-10-14 14:26:52
  • PHP笛卡尔积实现算法示例

    2023-09-08 19:58:09
  • 数据库Oracle数据的异地的自动备份

    2010-07-27 13:28:00
  • MS SQL7.0的数据迁移到MySQL上的一种方法

    2008-11-01 16:59:00
  • Python基础教程之异常详解

    2022-02-08 05:48:49
  • 跟老齐学Python之数据类型总结

    2023-05-30 07:15:07
  • 在tensorflow中设置使用某一块GPU、多GPU、CPU的操作

    2023-07-22 11:37:28
  • asp中isNull(str), isEmpty(str)和str=""的区别

    2008-02-15 13:10:00
  • 新建文件时Pycharm中自动设置头部模板信息的方法

    2021-08-18 11:56:46
  • Django中间件拦截未登录url实例详解

    2022-05-15 05:30:21
  • 网页图片按钮的生成与美化

    2008-12-12 13:03:00
  • python学习基础之循环import及import过程

    2022-04-02 13:23:25
  • PyTorch模型转换为ONNX格式实现过程详解

    2022-03-18 00:54:18
  • sql无效字符 执行sql语句报错解决方案

    2023-06-24 19:47:45
  • python快速建立超简单的web服务器的实现方法

    2021-03-14 23:25:14
  • asp之家 网络编程 m.aspxhome.com