hdf5文件创建(数据集处理):多个txt文件转成hdf5文件

该篇博客详细介绍了如何使用Python的h5py和numpy库将多个txt文件批量转换为一个hdf5文件。首先创建输出文件夹,然后读取每个txt文件并存储其内容到一个矩阵中,最后将矩阵写入h5文件。整个过程简洁高效,适用于数据存储和组织。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

将test文件夹下的多个txt文件转换为一个hdf5文件:

import h5py
import numpy as np
import os
in_path="test/"
out_path="data"
out_file="test.h5"
#创建输出文件夹
if os.path.exists(out_path)==False:
    os.mkdir(out_path)
in_file=os.listdir(in_path)

#读取一个文件,获得参数
temp_matrix=np.loadtxt(os.path.join(in_path,in_file[0]))
print('每个文件的大小=',temp_matrix.shape)
matrix_dir = np.zeros((len(in_file),temp_matrix.shape[0],temp_matrix.shape[1]))
#读取每一个文件
count=0#计数第几个文件
for in_name in in_file:
    temp_path=os.path.join(in_path,in_name)
    matrix_file=np.loadtxt(temp_path)
    matrix_dir[count,:,:]=np.array([x for x in matrix_file]).astype(np.float32)
    count+=1
print("文件总数=",len(matrix_dir))

f_out=h5py.File(os.path.join(out_path,out_file),"w")
f_out['data1']=matrix_dir
f_out['data2']=matrix_dir
f_out.close()

其中,test文件夹:
在这里插入图片描述

写成的data/test.h5 文件:
在这里插入图片描述

评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值