Python 读取 .gz 压缩文件及字节串转换详解
本文详细介绍在Python中读取.gz压缩文件的方法。通过引入gzip和os模块,演示了单文件与批量文件的读取流程,重点解析了字节串(bytes)与字符串(str)之间的相互转换技巧,并提供了处理fastq.gz格式文件的实际代码示例,帮助开发者高效处理压缩数据。
Python 读取 .gz 文件
在 Python 中读取 .gz 文件,必须使用内置的 gzip 模块。如果环境中未预装该模块,需先在终端执行安装命令进行补充。
pip install gzipimport gzip
path = "" #你的文件路径
f = gzip.open(path, 'rb')
for line in f.readlines(): # 按行进行读取
s = line.decode() # 读取之后要进行解码
print(s) # s 为string类型,就是我们读取的文件中的一行除了单文件读取,还可以利用 os 模块实现对文件夹内所有 .gz 文件的批量读取操作。
import gzip
import os\
path = "" #表示你要打开的文件夹
files = os.listdir(path) #files 是path中存放的所有文件名集合
for file in files:
f = gzip.open(path+file, 'rb')
for line in f.readline():
print(line)Python 处理 gz 文件时,常涉及字符串与字节串的相互转换。
首先介绍将字节串(bytes)转换为字符串(str)的方法:
b = b'some byte array'
str(b, encoding = "utf-8")
#or
bytes.decode(b)接着介绍将字符串(str)转换为字节串(bytes)的方法:
s = 'some string'
bytes(s, encoding = "utf8")
#or
str.encode(s)以下是针对 fastq.gz 格式文件的读取示例。
with gzip.open(fq,'r') as fastq:
try:
while True:
line1 = next(fastq).decode() # 字节转字符串
line2 = next(fastq).decode()
line3 = next(fastq).decode()
line4 = next(fastq).decode()
except:
pass以上为个人经验总结,希望能给大家一个参考,也希望大家多多支持本站。
免责声明:本文内容仅供参考,不代表本站观点。转载或引用请注明出处。









