Python3 多线程下载图片

一时失言乱红尘 2022-05-16 13:34 302阅读 0赞

import requests
    import time
    import threading
    import queue
    
    s='https://avatar.csdn.net/D/0/A/3_u013440574.jpg'
    urls=[]
    [urls.append(s) for i in range(100)]
    q = queue.Queue()
    for url in urls:
        q.put(url)
    start = time.time()
    def fetch_img_func(q):
        while True:
            try:
                url = q.get_nowait()# 不阻塞的读取队列数据
                i = q.qsize()
            except Exception as e:
                print (e)
                break
            # print ('Current Thread Name Runing %s ... ' % threading.currentThread().name)
            print("当前还有%s个任务"% i)
            res = requests.get(url, stream=True)
            if res.status_code == 200:
                save_img_path ='img/%s.jpg'%i
                # 保存下载的图片
                with open(save_img_path, 'wb') as fs:
                    for chunk in res.iter_content(1024):
                        fs.write(chunk)
    
    num=10  #线程数
    threads =[]
    for i  in range(num):
        t = threading.Thread(target=fetch_img_func, args=(q, ), name="child_thread_%s"%i)
        threads.append(t)
    for t in threads:
        t.start()
    for t in threads:
        t.join()
    
    print(time.time()-start)

发表评论取消回复

表情：

评论列表（有 0 条评论，302人围观）

还没有评论，来说两句吧...

相关阅读

相关多线程下载图片

准备工作首先需要commons io的工具包，下载连接附上 [Commons IO – Download Apache Commons IO][Commons IO

傷城~/ 2023年10月01日 21:25/ 0 赞/ 8 阅读

相关多线程下载图片的简单例子

[原文][Link 1] package com.example.kirito.myapplication.testdownload; import

男娘i/ 2022年07月15日 00:06/ 0 赞/ 200 阅读

相关 Python 3 多线程下载百度图片搜索结果

Python 3 多线程下载百度图片搜索结果转载来至：http://lovenight.github.io/2015/11/15/Python-3-%E5%A4

绝地灬酷狼/ 2022年06月04日 06:17/ 0 赞/ 271 阅读

相关多线程下载图片并压缩

最近在做一个需求：从其他系统的ftp目录下载存储图片url的文件，然后读取文件中的url地址，根据地址下载图片后按天压缩成一个包，平均一个地址文件中包含4000个地址左右，也就

落日映苍穹つ/ 2022年05月25日 08:59/ 0 赞/ 235 阅读

相关 Python3 多线程下载图片

import requests import time import threading import queue s='ht

一时失言乱红尘/ 2022年05月16日 13:34/ 0 赞/ 303 阅读

相关 python多线程下载图片

def download_urls(url_and_path_list, num_concurrent, skip_existing): prepar

今天药忘吃喽~/ 2022年02月05日 12:23/ 0 赞/ 297 阅读

相关 Python3 多线程

多线程类似于同时执行多个不同程序，多线程运行有如下优点：使用线程可以把占据长时间的程序中的任务放到后台去处理。用户界面可以更加吸引人，比如用户点击了一个按钮去

我会带着你远行/ 2022年02月04日 15:57/ 0 赞/ 303 阅读

相关 Python多线程下载网络URL图片的方法

Python多线程下载网络URL图片的方法采用多线程的方法，通过URL地址，下载资源图片 GitHub地址：[https://github.com/P

朴灿烈づ我的快乐病毒、/ 2022年01月14日 07:27/ 0 赞/ 378 阅读

相关 Python3 多线程

多线程类似于同时执行多个不同程序，多线程运行有如下优点：使用线程可以把占据长时间的程序中的任务放到后台去处理。用户界面可以更加吸引人，比如用户点击了一个按钮去

╰半夏微凉°/ 2022年01月06日 15:19/ 0 赞/ 279 阅读

相关 Python3多线程

Python3多线程多线程类似于同时执行多个不同程序，多项城运行有如下优点：使用线程可以把占据长时间的程序中的任务放到后台去处理用户界面可以更加吸引人，这样比如用户...

朱雀/ 2021年02月10日 10:10/ 0 赞/ 696 阅读