Python多线程实现多任务文件复制完整示例

Aria

发布时间：2026-10-13| 5人浏览过

原创

本文提供Python多线程与多进程结合的文件复制完整实例。通过创建进程池并发处理文件读写，利用队列实时统计已完成文件数量并动态显示复制进度条。代码涵盖文件夹创建、文件遍历及异常处理，适用于需要高效批量处理文件复制任务的场景。

Python多线程文件复制实现原理

本文通过一个完整的Python实例，演示如何利用多线程与多进程技术实现多任务文件复制功能。该案例旨在为开发者提供清晰的代码参考，帮助理解并发编程在文件IO操作中的应用。

核心代码解析


import os
import multiprocessing
def copy_file(q,file_name, old_folder_name, new_folder_name):
  """完成文件的复制"""
  old_f = open(old_folder_name+"/"+file_name, "rb")
  content = old_f.read()
  old_f.close()
  new_f = open(new_folder_name+"/"+file_name, "wb")
  new_f.write(content)
  new_f.close()
  # print("从%s--->到%s 复制文件%s成功！" % (old_folder_name, new_folder_name, file_name))
  q.put(file_name)
def main():
  # 1.获取用户要copy的文件夹名称
  old_folder_name = input("请输入要copy的文件夹：")
  # 2.创建一个新的文件夹
  try:
    new_folder_name = old_folder_name + "复件"
    os.mkdir(new_folder_name)
  except:
    pass
  # 3.获取所有待copy的文件名称 listdir()
  file_names = os.listdir(old_folder_name)
  print(file_names)
  # 4.创建进程池
  po = multiprocessing.Pool(2)
  # 5.创建一个队列
  q = multiprocessing.Manager().Queue()
  # 6.向进程池中添加copy文件的任务
  for file_name in file_names:
    po.apply_async(copy_file, args=(q,file_name, old_folder_name, new_folder_name))
  po.close()
  # po.join()
  all_file_num = len(file_names) # 统计所有的文件个数
  copy_ok_num = 0
  while True:
    file_name = q.get()
    # print("已经完成copy ：%s" % file_name)
    copy_ok_num += 1
    print("\r复制的进度为：%.2f %%" % (copy_ok_num*100/all_file_num),end='')
    if copy_ok_num >= all_file_num:
      break
if __name__ == '__main__':
  main()

如需进一步了解Python并发编程及相关技术，建议参考本站其他专题文章，包括《Python进程与线程操作技巧总结》、《Python数据结构与算法教程》、《Python函数使用技巧总结》、《Python字符串操作技巧汇总》、《Python入门与进阶经典教程》、《Python+MySQL数据库程序设计入门教程》以及《Python常见数据库操作技巧汇总》。

希望上述代码示例及解析能对您的Python程序设计工作提供实际帮助。