Python将CSV Excel数据转换为固定长度TXT文件的方法
本文介绍如何使用Python将CSV格式的Excel数据转换为每行包含固定数量数据的TXT文件。通过导入numpy和csv库,读取指定路径的CSV文件,去除表头并处理如'NULL'等缺失值。最终将提取的第一列数据按每48个一组写入TXT文件,适用于大数据量下的自动化格式转换需求。
Python将CSV Excel数据转换为固定长度TXT文件的方法
在数据处理过程中,经常需要将TXT文件读取并转换为可执行的列表格式。然而,当面对Excel文件时,如何将其转换为每行固定长度的TXT文件便成为一个挑战。若数据量较小,人工处理尚为可行;但在大数据场景下,人工操作几乎不可能完成。此时,借助程序自动执行该任务则显得轻松高效。以下将详细介绍具体实现代码。
导入必要库
首先,在Python环境中导入两个必要的库:numpy和csv。本示例主要针对.csv格式的Excel文件进行操作。
import numpy as np
import csv
读取Excel文件
接下来,执行Excel文件的读取操作。在代码中,本文采用绝对路径指定文件位置:
with open('F:/Data/DATA/airquality1.csv','rb') as csv_file:
all_lines = csv.reader(csv_file)
for one_line in all_lines:
list_file.append(one_line) #逐行读取Excel文件中的每一行append列表中
list_file.remove(list_file[0]) #该行表示我们去除Excel文件的第一行,因为第一行往往都是数据的名称介绍,如果没有介绍就不用该行代码了
arr_file = np.array(list_file) #转换为矩阵形式
label = arr_file[:,0] #第一列 //该行表示我们取Excel文件中第一列数据进行实验,下述贴出数据样式(或者Excel只有第一列有数据)
处理数据缺失值
随后,进行额外的数据筛选步骤。由于采集的数据中常存在缺失情况(例如显示为“NULL”或其他特定标识),可根据实际数据的缺失特征灵活调整筛选逻辑。若数据完整无缺失,此部分代码可省略:
for i in range(len(label)):
if label[i] == 'NULL': #注意我们文件中数据缺失时记录为“NULL”,注意替换
label[i] = label[i -1]
保存为TXT文件
完成上述Excel数据的处理步骤后,接下来将读取到的数据保存至指定的TXT文件中:
file = open("F:/Data/DATA/airquality48.txt", "w")
for n in range(int(len(label)/48)): #该行命令用来计算数据的长度,因为我们要存储的TXT文件中要使得每行包含48个数据,所以这里使用48
file.write(label[n*48:n*48+48]) #将提取好的数据写入到TXT文件中
file.write('\n') #注意转换后文件最后一行空白需要删除(写完48个数据进行换行)
完整程序代码与结果展示
以上即为程序的主要执行步骤。为直观展示效果,下文将提供程序所使用的数据样例及运行结果。为避免出错,此处先完整展示整体程序代码:
# EXCEL.CSV文件转换成TXT #
import numpy as np
import csv
def loadCSVfile1():
list_file = []
with open('F:/Data/DATA/airquality1.csv','rb') as csv_file:
all_lines = csv.reader(csv_file)
for one_line in all_lines:
list_file.append(one_line)
list_file.remove(list_file[0])
arr_file = np.array(list_file)
label = arr_file[:,0] #第一列
# 处理文件中null情况
for i in range(len(label)):
if label[i] == 'NULL':
label[i] = label[i -1]
#将数据以天为单位写入TXT文件中
file = open("F:/Data/DATA/airquality48.txt", "w")
for n in range(int(len(label)/48)):
file.write(label[n*48:n*48+48])
file.write('\n') #注意转换后文件最后一行空白需要删除
return label
loadCSVfile1()
本程序所使用的Excel数据样例如下:

程序运行后,转换生成的TXT文件样式如下(每行包含48个数据):

以上就是本文的全部内容,希望能为您的学习提供帮助,也欢迎大家继续支持本站。
免责声明:本文内容仅供参考,不代表本站观点。转载或引用请注明出处。









