Python多进程multiprocessing模块详解与通信示例

Ivy

发布时间：2026-10-13| 5人浏览过

原创

本文详解Python中multiprocessing模块的用法，涵盖进程创建、同步、池管理及数据共享四大核心部分。通过具体代码示例演示如何启动子进程及利用Queue实现进程间数据通信，强调进程状态独立性及通过序列化机制共享数据的原理，帮助开发者掌握多进程编程基础。

multiprocessing模块概述与核心分类

严格来说，multiprocessing并非一个独立的模块，而是Python标准库中用于操作和管理进程的包。其名称中的“multi”意指多功能，该包几乎囊括了与进程相关的所有子模块。鉴于提供的子模块众多，为便于记忆与分类，可将其大致划分为四个部分：创建进程、进程同步、进程池以及进程间数据共享。需要重点强调的是，进程之间不存在共享状态，进程对数据的修改仅限于其内部；然而，借助特定的机制与方法，可以实现进程间的数据共享。

多进程基本语法与通信示例

基于此前对多线程使用及线程间Queue的理解，多进程及其通信机制便易于掌握。下文将展示多进程的基本语法及进程间通信的简单示例。


#多进程基本语法
import multiprocessing, time, os

def process_test():
  time.sleep(3)
  print("my multiprocessing test")
  print("my pprocess id is",os.getppid())
  print("my process id is",os.getpid())

if __name__ == '__main__': #多线程必须写在if __name__后面，为什么？？？
  process = multiprocessing.Process(target=process_test) #启动子进程
  process.start()

#多进程间数据通信，多进程的queue实际上是python将一个queue序列化后再反序列化给其它进程
#定义一个函数，第一个形参传递一个进程queue
def m_queue_test(Queue, name):
  Queue.put(("multiprocess queue test",name)) #put一次只能传递一个数据对象，多个对象必须使用列表 元组 字典等传递

if __name__ == '__main__':
  q = multiprocessing.Queue() #主进程实例化一个进程queue
  process2 = multiprocessing.Process(target=m_queue_test, args=(q, "zsq")) #将q传递给子进程,由子进程往里面传递数据
  process2.start()
  print(q.get())#主进程从queue里面读数据