批量从网上下载图片、zip等文件到本地[java爬虫]

系统管理员 2022-05-28 04:59 172阅读 0赞

# 程序 #

public static void download(HFUTRequest httprequest,String url,String id) throws IOException{
            File fileDir=new File("E:\\zipFile");
            if(!fileDir.exists()){
                fileDir.mkdirs();
            }
            //图片或zip下载保存地址
            String filename="E:\\zipFile\\"+id+".zip";
            File file=new File(filename);
            if(file.exists()){
                file.delete();
            }
            BufferedOutputStream bw = new BufferedOutputStream(new FileOutputStream(filename)); 
            try {
    
                HttpEntity entity=httprequest.getEntityByHttpGetMethod(url);
                int i=-1;
                byte[] byt= EntityUtils.toByteArray(entity); 
                bw.write(byt);
                System.out.println("文件下载成功！");
            } catch (ClientProtocolException e) {
                e.printStackTrace();
            } catch (IOException e) {
                e.printStackTrace();
            }
            bw.close();
        }

# 解读 #

在上述的程序中：

byte[] byt= EntityUtils.toByteArray(entity);

很多人提供的源码是：

byte[] byt=new byte[1024];

或者：

byte[] byt=new byte[10*1024];

有些是可行的，有些会导致下载的文件没办法解压。所以使用：

byte[] byt= EntityUtils.toByteArray(entity);

这种方式就很完美了。

发表评论取消回复

表情：

评论列表（有 0 条评论，172人围观）

还没有评论，来说两句吧...

相关阅读

相关 java 批量下载文件打包成zip包

1. 创建DownLoadUrlStream承载数据 import lombok.Data; import java.io.InputStream;

约定不等于承诺〃/ 2023年10月12日 08:33/ 0 赞/ 46 阅读

相关 java系列之-下载Zip文件到本地

文章目录前言一、问题处理思路二、接口文档信息三、文档信息分析四、下载Zip到本地总结 -----------------

系统管理员/ 2023年01月01日 05:53/ 0 赞/ 125 阅读

相关 Python爬虫网站图片并下载到本地

文章目录先看效果 1、环境准备 2、要爬取的网站 3、程序源代码（可直接运行）先看效果 ![在这里插入图

逃离我推掉我的手/ 2022年12月30日 03:40/ 0 赞/ 215 阅读

相关用php 下载网页到本地文件,用php将网页图片批量下载到本地代码实例

我们现在要复制别人网站上的带有图片的内容到自己网站，这样我必须下载别人网的图片，然后保存到本地，再把内容中的图片地址替换成我们本地的，这里我们要借助于php中preg\_mat

柔情只为你懂/ 2022年11月12日 12:56/ 0 赞/ 162 阅读

相关 java从网上下载文件_java 从网上下载文件的几种方式（转）

package com.github.pandafang.tool; import java.io.BufferedOutputStream; import java.io

╰半夏微凉°/ 2022年11月06日 13:00/ 0 赞/ 149 阅读

相关 java下载图片到本地，例如从网上下载图片，下载淘宝图片，下载百度图片等

java下载图片到本地，例如从网上下载图片，下载淘宝图片，下载百度图片。直接上代码如下： > public static void download(String

刺骨的言语ヽ痛彻心扉/ 2022年10月29日 07:41/ 0 赞/ 192 阅读

相关【Java】Java实现批量打包文件Zip下载

有这样一个需求，需要将某个文件夹进行下载，而且该文件下包含多张图片，图片是存储于Linux服务器上的。故采用zip打包方式进行下载。在此并没有采用获取网络图片的方式进行下载，而

素颜马尾好姑娘i/ 2022年06月15日 01:23/ 0 赞/ 312 阅读

相关批量从网上下载图片、zip等文件到本地[java爬虫]

程序 public static void download(HFUTRequest httprequest,String url,String id) thro

系统管理员/ 2022年05月28日 04:59/ 0 赞/ 173 阅读

相关 php zip打包文件批量下载

php zip打包文件批量下载 $zipname = 'file.zip'; //file_path为文件位置，这里用的是thinkphp，路径为相对于入

痛定思痛。/ 2022年01月29日 06:51/ 0 赞/ 355 阅读

相关 java下载图片到本地

图片下载是一件很简单的事，那么用java如何实现网络图片下载到本地呢（例如我们从网络上爬取图片） public static void main(String[] a

约定不等于承诺〃/ 2021年12月12日 15:41/ 0 赞/ 356 阅读