Python并行处理：使用多线程、进程池实现案例

原创待我称王封你为后i 2024-12-17 16:42 0阅读 0赞

在Python中，我们可以利用多线程（threading）和进程池（concurrent.futures）来实现并行处理。

1. 多线程：

```python
import threading

def worker(num):
    """工作函数"""
    print(f"Processing {num}")

# 创建线程列表
threads = []

for num in range(5):  # 迭代创建5个任务
    thread = threading.Thread(target=worker, args=(num,))
    threads.append(thread)  # 添加到线程列表

# 启动所有线程
for thread in threads:
    thread.start()

# 线程完成后，打印"all done"
for thread in threads:
    thread.join()
print("All tasks completed.")
```

2. 进程池：

```python
import concurrent.futures

def worker(num):
    """工作函数"""
    print(f"Processing {num}")

# 创建进程池
with concurrent.futures.ProcessPoolExecutor() as executor:
    # 提交任务到进程池
    future_to_num = {executor.submit(worker, num)): num for num in range(5)}

# 等待所有任务完成
    for future in concurrent.futures.as_completed(future_to_num):
        num = future_to_num[future]
        try:
            result = future.result()
            print(f"Processing {num} resulted: {result}")
        except Exception as exc:
            print(f"Processing {num}} error: {exc}")

print("All tasks completed.")
```

以上案例展示了如何使用多线程和进程池来实现并行处理。

文章版权声明：注明蒲公英云原创文章，转载或复制请以超链接形式并注明出处。

发表评论取消回复

表情：

评论列表（有 0 条评论，0人围观）

还没有评论，来说两句吧...

相关阅读

相关 Python并行计算：多线程和进程使用不当实例

在Python中，进行并行计算主要有两种方式：多线程和创建子进程（使用os模块的subprocess函数）。但是要注意，如果使用不当，可能会导致以下问题： 1. **竞态条件

港控/mmm°/ 2024年12月18日 15:30/ 0 赞/ 5 阅读

相关多线程案例(4)-线程池

我们既然已经有了多线程可以提高我们的工作效率，为什么还要引入线程池呢？那是因为线程池最大的好处就是减少每次启动、销毁线程的损耗，因此可以理解成我们的线程池比一般的多线程更...

一时失言乱红尘/ 2024年04月28日 07:11/ 0 赞/ 107 阅读

相关多线程案例-线程池

线程池的引入最开始,进程能够解决并发变成的问题. 但是由于频繁创建销毁进程,成本比较高.引入了轻量级进程->线程如果创建/销毁线程的频率进一步提高,此时线程的创建

待我称王封你为后i/ 2024年02月05日 15:13/ 0 赞/ 40 阅读

相关【JavaEE】多线程案例-线程池

![在这里插入图片描述][95ce59710ee540c2b41f6d2ffb494fcb.gif_pic_center] 文章目录 1. 什么是线程池

柔情只为你懂/ 2023年10月16日 12:08/ 0 赞/ 85 阅读

相关多线程案例-线程池

![2d8b044c9aa74626af93f6da7df31ef7.png][] 1.什么是线程池线程存在的意义是当使用进程进行并发编程太重了,此时引入了一个"轻量

你的名字/ 2023年10月10日 16:01/ 0 赞/ 99 阅读

相关【多线程】JAVA进程，并发/并行，进程管理，

> 前言： > > 小亭子正在努力的学习编程，接下来将开启javaEE的学习~~ > > 分享的文章都是学习的笔记和感悟，如有不妥之处希望大佬们批评指正~~ > > 同时

清疚/ 2023年09月27日 16:00/ 0 赞/ 146 阅读

相关线程池执行多线程案例

使用线程池执行多线程需要如下几个条件首先是一个线程池，线程池包含一些初始化数据，包含队列大小，核心线程数，最大线程数。然后是一个实现了 runnable的任务，将该任务

末蓝、/ 2023年06月30日 02:17/ 0 赞/ 43 阅读

相关 python-多线程（池）/多进程（池）及线程同步编程

目录多线程编程 threading模块直接调用派生多线程池 ThreadPoolExecutor 线程同步多进程编程 Process类直接调用

た入场券/ 2023年02月28日 11:14/ 0 赞/ 29 阅读

相关 python线程池ThreadPoolExecutor和进程池ProcessPoolExecutor使用

1、线程池ThreadPoolExecutor """ 线程池，使用单核CPU """ from concurrent.futures

素颜马尾好姑娘i/ 2022年12月22日 04:51/ 0 赞/ 180 阅读

相关 python中多进程multiprocessing、多线程threading、线程池threadpool

浅显点理解：进程就是一个程序，里面的线程就是用来干活的，，，进程大，线程小 ![1633316-20190603160244259-1726103803.png][]

╰+哭是因爲堅強的太久メ/ 2021年12月13日 01:41/ 0 赞/ 282 阅读