Python协程启用多线程或多进程任务

谁借莪１个温暖的怀抱￠ 2022-09-11 04:27 182阅读 0赞

简单来说就是一般IO密集型任务采用多线程、CPU密集型任务采用多进程。官网范例如下：

import asyncio
    import concurrent.futures
    
    def blocking_io():
        # File operations (such as logging) can block the
        # event loop: run them in a thread pool.
        with open('/dev/urandom', 'rb') as f:
            return f.read(100)
    
    def cpu_bound():
        # CPU-bound operations will block the event loop:
        # in general it is preferable to run them in a
        # process pool.
        return sum(i * i for i in range(10 ** 7))
    
    async def main():
        loop = asyncio.get_running_loop()
    
        ## Options:
    
        # 1. Run in the default loop's executor:
        result = await loop.run_in_executor(
            None, blocking_io)
        print('default thread pool', result)
    
        # 2. Run in a custom thread pool:
        with concurrent.futures.ThreadPoolExecutor() as pool:
            result = await loop.run_in_executor(
                pool, blocking_io)
            print('custom thread pool', result)
    
        # 3. Run in a custom process pool:
        with concurrent.futures.ProcessPoolExecutor() as pool:
            result = await loop.run_in_executor(
                pool, cpu_bound)
            print('custom process pool', result)
    
    asyncio.run(main())

Ref：[Event Loop — Python 3.9.7 documentation][Event Loop _ Python 3.9.7 documentation]

[Event Loop _ Python 3.9.7 documentation]: https://docs.python.org/3/library/asyncio-eventloop.html#asyncio.loop.run_in_executor

发表评论取消回复

表情：

评论列表（有 0 条评论，182人围观）

还没有评论，来说两句吧...

相关阅读

相关多线程（1）线程、进程、协程

进程是资源分配的单位，线程是调度的单位，而协程是程序员在用户级别上实现的调度单位。线程与进程相比，更轻量级，但它们都受到操作系统的管理和调度。线程共享进程的资源，而进程间...

红太狼/ 2024年04月24日 23:06/ 0 赞/ 12 阅读

相关 python的多线程、多进程、协程用代码

![6b6762bf289ff1bb942e93c48b8117bd.jpeg][] 很多时候我们写了一个爬虫，实现了需求后会发现了很多值得改进的地方，其中很重要的一点就是爬

╰半夏微凉°/ 2024年04月01日 18:11/ 0 赞/ 12 阅读

相关 python多线程、多进程及协程用代码

![db4015e393d469e864763dbfb4990473.jpeg][] 很多时候我们写了一个爬虫，实现了需求后会发现了很多值得改进的地方，其中很重要的一点就是爬

冷不防/ 2024年03月26日 16:13/ 0 赞/ 27 阅读

相关 python学习：多线程及多进程、协程

![c54182c3146e2f5c094d9d6a346971af.jpeg][] 很多时候我们写了一个爬虫，实现了需求后会发现了很多值得改进的地方，其中很重要的一点就是爬

迷南。/ 2024年03月26日 14:49/ 0 赞/ 9 阅读

相关 python基础入门：多线程、多进程及协程

![311963864ba7ec666acc92ddb308ad23.jpeg][] 很多时候我们写了一个爬虫，实现了需求后会发现了很多值得改进的地方，其中很重要的一点就是爬

今天药忘吃喽~/ 2024年03月26日 12:09/ 0 赞/ 8 阅读

相关 Python实现多任务（协程、线程、进程）

Python实现多任务 1.多任务-协程 2.多任务-线程 3.多任务-进程 1.多任务-协程 from gevent import m

不念不忘少年蓝@/ 2022年12月31日 02:28/ 0 赞/ 190 阅读

相关 Python协程启用多线程或多进程任务

简单来说就是一般IO密集型任务采用多线程、CPU密集型任务采用多进程。官网范例如下： import asyncio import concurrent.fut

谁借莪１个温暖的怀抱￠/ 2022年09月11日 04:27/ 0 赞/ 183 阅读

相关多进程、多线程和协程

> 简书：[https://www.jianshu.com/p/1cce7b37b80a][https_www.jianshu.com_p_1cce7b37b80a] >

你的名字/ 2022年02月22日 16:24/ 0 赞/ 263 阅读

相关 python多任务——协程

协程协程是python个中另外一种实现多任务的方式，只不过比线程更小占用更小执行单元（理解为需要的资源）。为啥说它是一个执行单元，因为它自带CPU上下文。这样只要在合

我不是女神ヾ/ 2022年01月07日 11:51/ 0 赞/ 246 阅读

相关多任务-协程

1.什么是协程？协程，又称微线程，纤程。英文名Coroutine。协程是python个中另外一种实现多任务的方式，只不过比线程更小占用更小执行单元（理解为需要的资源）。为

谁践踏了优雅/ 2021年09月20日 14:14/ 0 赞/ 333 阅读