Python实现配置文件按行切分与重组

码头散步

发布时间：2026-10-13| 7人浏览过

原创

本文介绍使用Python脚本对配置文件进行切分与重组的方法。首先将源文件按每30行切分为多个子文件，随后遍历这些子文件，通过添加特定标识和UNION ALL语句将它们合并为一个新的配置文件。脚本包含路径配置、行数统计及文件遍历逻辑，适用于需要处理大型配置文件的场景。

配置文件切分与重组方案概述

本方案旨在对配置文件执行切分与重组操作，具体策略为每隔30行划分为一段，并基于此重新生成最终文件。

Python切分与重组代码实现

具体实现代码如下：


#!/usr/local/python/bin/python
# coding=utf-8
import sys
import re
import os
f = open('config.conf','r')
#判断文件条数
def file_num(filename):
  num_col = 0
  with open(filename,'rb') as Fnum:
    while(Fnum.readline() !=''):
     num_col = num_col + 1
  return num_col
  

file_num = file_num('config.conf')
print '文件总条数：' + str(file_num)

i = 0 #设置计数器
while i < file_num :       #表示文件行数
  with open('/tmp/newfile/newfile'+str(i),'w') as f1:
    for j in range(0,30) : #这里设置每个子文件的大小
      if i <= file_num : #这里判断是否已结束，否则最后可能报错
        f1.writelines(f.readline())
        i = i+1
      else:
        break

filepath1='/tmp/newfile/'
def eachFile(filepath):
  num = 1
  pathDir = sorted(os.listdir(filepath))
  for allDir in pathDir:
    child = os.path.join('%s%s' % (filepath, allDir))
    file_name = child.decode('gbk')
    print file_name
    with open('/tmp/check.py','a+') as f2:
     fopen = open(file_name, 'r+')
     f2.writelines("# config.py sql" + str(num) + " begin\n")
     count=0
     for line in fopen.readlines(): 
       if count == 0:
        f2.writelines(line)
        count= count+1
       else:
        f2.writelines("UNION ALL " + line)
     f2.writelines("# config.py sql" + str(num) + " end\n")
     f2.writelines("\n")
     num = num + 1

eachFile(filepath1)