Python 读取 .gz 压缩文件及字节串转换详解

Evan
Evan
发布时间:2026-10-16| 3人浏览过
原创

本文详细介绍在Python中读取.gz压缩文件的方法。通过引入gzip和os模块,演示了单文件与批量文件的读取流程,重点解析了字节串(bytes)与字符串(str)之间的相互转换技巧,并提供了处理fastq.gz格式文件的实际代码示例,帮助开发者高效处理压缩数据。

Python 读取 .gz 文件

在 Python 中读取 .gz 文件,必须使用内置的 gzip 模块。如果环境中未预装该模块,需先在终端执行安装命令进行补充。

pip install gzip
import gzip
path = "" #你的文件路径
f = gzip.open(path, 'rb')
 
for line in f.readlines(): # 按行进行读取
    s = line.decode() # 读取之后要进行解码
    print(s) # s 为string类型,就是我们读取的文件中的一行

除了单文件读取,还可以利用 os 模块实现对文件夹内所有 .gz 文件的批量读取操作。

import gzip
import os\
 
path = "" #表示你要打开的文件夹
files = os.listdir(path) #files 是path中存放的所有文件名集合
for file in files:
    f = gzip.open(path+file, 'rb')
    for line in f.readline():
        print(line)

Python 处理 gz 文件时,常涉及字符串与字节串的相互转换。

首先介绍将字节串(bytes)转换为字符串(str)的方法:

b = b'some byte array'
 
str(b, encoding = "utf-8")  
#or
bytes.decode(b)

接着介绍将字符串(str)转换为字节串(bytes)的方法:

s = 'some string'
 
bytes(s, encoding = "utf8")  
#or
str.encode(s)

以下是针对 fastq.gz 格式文件的读取示例。

with gzip.open(fq,'r') as fastq:
    try:
        while True:
            line1 = next(fastq).decode()  # 字节转字符串
            line2 = next(fastq).decode()
            line3 = next(fastq).decode()
            line4 = next(fastq).decode()
            
    except:
            pass

以上为个人经验总结,希望能给大家一个参考,也希望大家多多支持本站。

相关标签:

免责声明:本文内容仅供参考,不代表本站观点。转载或引用请注明出处。

Python 相关产品和应用

全部下载
Selenium

Selenium

4.51.0 · Windows

用于浏览器自动化和 Web 测试的 Python 工具。

scikit-learn

scikit-learn

1.9.1 · Windows

常用 Python 机器学习算法与模型评估工具库。

Black

Black

26.10.1 · Windows

强调一致性的 Python 自动代码格式化工具。

Ruff

Ruff

0.17.1 · macOS

由 Rust 编写的高速 Python 代码检查和格式化工具。

pytest

pytest

9.1.1 · Windows

简洁而强大的 Python 自动化测试框架。

FastAPI

FastAPI

0.146.0 · Windows

高性能 Python API 框架,支持类型提示和自动接口文档。

Flask

Flask

3.1.3 · Windows

轻量灵活的 Python Web 应用框架。

Django

Django

6.1.2 · Windows

成熟的 Python Web 框架,适合构建内容站点和业务系统。

Spyder

Spyder

6.1.7 · Windows

面向科学计算与数据分析的 Python 集成开发环境。

SciPy

SciPy

1.18.1 · Windows

面向科学、工程和技术计算的 Python 算法库。