Python多进程共享数据:普通列表与Manager对比
本文通过两个Python示例演示多进程间共享数据的方法。示例一展示普通列表在多进程中无法共享数据的情况;示例二利用Manager创建共享列表,实现多进程对同一数据结构的读写。通过对比输出结果,深入理解Python多进程数据共享机制及Manager的使用方式。
本文通过具体实例解析Python中多进程共享数据的实现方式,旨在为读者提供清晰的参考与指导。
首先展示第一个示例:
# -*- coding:utf-8 -*-
from multiprocessing import Process, Manager
import time
import random
def kkk(a_list, number):
for i in range(10):
a_list.append(i)
time.sleep(random.randrange(2))
print('这是进程{} {}'.format(number, a_list))
print('这是进程{} {}'.format(number, a_list))
def jjj(a_list):
for i in range(2):
process = Process(target=kkk, args=(a_list, i))
process.start()
if __name__ == '__main__':
a_list = []
process_0 = Process(target=jjj, args=(a_list,))
process_0.start()
process_0.join()
print(a_list)
print(len(a_list))
print('it\'s ok')
运行结果如下:
这是进程0 [0] 这是进程0 [0, 1] 这是进程0 [0, 1, 2] 这是进程0 [0, 1, 2, 3] 这是进程1 [0] 这是进程0 [0, 1, 2, 3, 4] 这是进程1 [0, 1] 这是进程0 [0, 1, 2, 3, 4, 5] 这是进程1 [0, 1, 2] 这是进程1 [0, 1, 2, 3] 这是进程1 [0, 1, 2, 3, 4] 这是进程1 [0, 1, 2, 3, 4, 5] 这是进程0 [0, 1, 2, 3, 4, 5, 6] 这是进程0 [0, 1, 2, 3, 4, 5, 6, 7] 这是进程0 [0, 1, 2, 3, 4, 5, 6, 7, 8] 这是进程1 [0, 1, 2, 3, 4, 5, 6] 这是进程0 [0, 1, 2, 3, 4, 5, 6, 7, 8, 9] 这是进程0 [0, 1, 2, 3, 4, 5, 6, 7, 8, 9] 这是进程1 [0, 1, 2, 3, 4, 5, 6, 7] 这是进程1 [0, 1, 2, 3, 4, 5, 6, 7, 8] 这是进程1 [0, 1, 2, 3, 4, 5, 6, 7, 8, 9] 这是进程1 [0, 1, 2, 3, 4, 5, 6, 7, 8, 9] [] 0 it's ok Process finished with exit code 0
接着展示第二个示例:
本例采用Manager机制:
# -*- coding:utf-8 -*-
from multiprocessing import Process, Manager
import time
import random
def kkk(a_list, number):
for i in range(10):
a_list.append(i)
time.sleep(random.randrange(2))
print('这是进程{} {}'.format(number, a_list))
print('这是进程{} {}'.format(number, a_list))
def jjj(a_list):
for i in range(2):
process = Process(target=kkk, args=(a_list, i))
process.start()
if __name__ == '__main__':
manager = Manager()
a_list = manager.list()
# a_list = []
process_0 = Process(target=jjj, args=(a_list,))
process_0.start()
process_0.join()
print(a_list)
print(len(a_list))
print('it\'s ok')
对应的运行输出为:
这是进程0 [0, 0] 这是进程0 [0, 0, 1] 这是进程0 [0, 0, 1, 2] 这是进程0 [0, 0, 1, 2, 3] 这是进程0 [0, 0, 1, 2, 3, 4] 这是进程1 [0, 0, 1, 2, 3, 4, 5] 这是进程0 [0, 0, 1, 2, 3, 4, 5, 1] 这是进程1 [0, 0, 1, 2, 3, 4, 5, 1, 6] 这是进程1 [0, 0, 1, 2, 3, 4, 5, 1, 6, 2] 这是进程1 [0, 0, 1, 2, 3, 4, 5, 1, 6, 2, 3] 这是进程1 [0, 0, 1, 2, 3, 4, 5, 1, 6, 2, 3, 4] 这是进程1 [0, 0, 1, 2, 3, 4, 5, 1, 6, 2, 3, 4, 5] 这是进程0 [0, 0, 1, 2, 3, 4, 5, 1, 6, 2, 3, 4, 5, 6] 这是进程0 [0, 0, 1, 2, 3, 4, 5, 1, 6, 2, 3, 4, 5, 6, 7] 这是进程0 [0, 0, 1, 2, 3, 4, 5, 1, 6, 2, 3, 4, 5, 6, 7, 8] 这是进程1 [0, 0, 1, 2, 3, 4, 5, 1, 6, 2, 3, 4, 5, 6, 7, 8, 9] 这是进程1 [0, 0, 1, 2, 3, 4, 5, 1, 6, 2, 3, 4, 5, 6, 7, 8, 9, 7] 这是进程0 [0, 0, 1, 2, 3, 4, 5, 1, 6, 2, 3, 4, 5, 6, 7, 8, 9, 7, 8] 这是进程0 [0, 0, 1, 2, 3, 4, 5, 1, 6, 2, 3, 4, 5, 6, 7, 8, 9, 7, 8] 这是进程1 [0, 0, 1, 2, 3, 4, 5, 1, 6, 2, 3, 4, 5, 6, 7, 8, 9, 7, 8] 这是进程1 [0, 0, 1, 2, 3, 4, 5, 1, 6, 2, 3, 4, 5, 6, 7, 8, 9, 7, 8, 9] 这是进程1 [0, 0, 1, 2, 3, 4, 5, 1, 6, 2, 3, 4, 5, 6, 7, 8, 9, 7, 8, 9] [0, 0, 1, 2, 3, 4, 5, 1, 6, 2, 3, 4, 5, 6, 7, 8, 9, 7, 8, 9] 20 it's ok Process finished with exit code 0
如需了解更多Python相关技术,推荐查阅本站系列专题,包括《Python进程与线程操作技巧总结》、《Python Socket编程技巧总结》、《Python数据结构与算法教程》、《Python函数使用技巧总结》、《Python字符串操作技巧汇总》、《Python入门与进阶经典教程》以及《Python文件与目录操作技巧汇总》。
期望上述内容能对您的Python编程实践有所助益。
免责声明:本文内容仅供参考,不代表本站观点。转载或引用请注明出处。









