java（Jsoup）抓取第三方网站图片

缺乏、安全感 2022-06-09 09:38 190阅读 0赞

抓取网页img标签

package com.betawoo.portal.util;
    
    import org.jsoup.Jsoup;
    import org.jsoup.nodes.Document;
    import org.jsoup.nodes.Element;
    import org.jsoup.select.Elements;
    
    /**
     * Created by hgg on 2017/9/2.
     */
    public class spiderUtils {
        public static void getHtmlWithUrl(String url) {
            try {
                Document doc = Jsoup.connect(url).userAgent("Mozilla/5.0 (Macintosh; Intel Mac OS X 10_12_5) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/59.0.3071.115 Safari/537.36").get();
    //            System.out.println(doc);
                spiderUtils.getImagesWithHtml(doc);
            } catch (Exception e) {
                e.printStackTrace();
            }
        }
    
        public static void getImagesWithHtml(Document doc) {
            Elements images = doc.getElementsByTag("img");
            for (Element image : images) {
    
                //页面所有img
                System.out.println(image.attr("src"));
            }
        }
    
        public static void main(String[] args) {
            //抓取网址
            spiderUtils.getHtmlWithUrl("https://zhidao.baidu.com/question/453277368.html");
        }
    }

引入jar

<dependency>
                <groupId>org.jsoup</groupId>
                <artifactId>jsoup</artifactId>
                <version>1.10.2</version>
            </dependency>

发表评论取消回复

表情：

评论列表（有 0 条评论，190人围观）

还没有评论，来说两句吧...

相关阅读

相关 python爬虫抓取网站图片并保存

import urllib2 from bs4 import BeautifulSoup import socket baseurl = "http://dbmeizi.com

系统管理员/ 2024年02月19日 21:57/ 0 赞/ 53 阅读

相关关于第三方图片资源403问题?

为什么文章列表数据中的好多图片资源请求失败返回 403？这是因为我们项目的接口数据是后端通过爬虫抓取的第三方平台内容，而第三方平台对图片资源做了防盗链保护处理。第三方平

悠悠/ 2023年02月23日 05:17/ 0 赞/ 5 阅读

相关第三方图片403问题(移动端)

解决第三方图片403问题(移动端) 移动端解决第三方图片403的问题服务端一般使用referrer请求头识别访问来源，然后处理资源访问 referrer是HTTP

约定不等于承诺〃/ 2022年11月25日 13:17/ 0 赞/ 136 阅读

相关 android图片美化第三方,Android第三方开源库CircleImageView的使用

![d4f55ebd07a1][] image 目前最新版本是 3.0.1 具体以官方为准 GitHub：快速圆形的 ImageView，非常适合个人资料图像。这基

我会带着你远行/ 2022年10月17日 11:22/ 0 赞/ 337 阅读

相关第三方网站微信登录实现

　　好记性不如烂笔头！且 coding 且记下^^ 　　前两个星期在公司中的项目加上了微信登录、绑定的功能，在这里做个记录！一、开发前知识　　1、微信开放平台与微信公

旧城等待，/ 2022年06月12日 11:37/ 0 赞/ 373 阅读

相关 java（Jsoup）抓取第三方网站图片

抓取网页img标签 package com.betawoo.portal.util; import org.jsoup.Jsoup;

缺乏、安全感/ 2022年06月09日 09:38/ 0 赞/ 191 阅读

相关七牛java抓取上传第三方资源

用的是七牛SDK的方法，官网的API有问题【[第三方资源抓取][Link 1]】，半天没捣鼓出来，询问七牛工程师才得以解决！ @Test // 抓

川长思鸟来/ 2022年06月07日 04:23/ 0 赞/ 176 阅读

相关 python 第三方库网站

[https://www.lfd.uci.edu/~gohlke/pythonlibs/][https_www.lfd.uci.edu_gohlke_pythonlibs]

墨蓝/ 2022年04月25日 04:22/ 0 赞/ 342 阅读

相关 web网站java实现QQ第三方登录

最近一段时间实现了微博微信qq的第三方登录功能，现在写出来与大家分享一下 QQ 首先贴出qq官方文档 [http://wiki.connect.qq.com/%e

秒速五厘米/ 2022年04月14日 06:06/ 0 赞/ 428 阅读

相关 JAVA-网站应用接入GitHub第三方登录

JAVA-网站应用接入GitHub第三方登录相对 [网站应用接入 QQ 登录][QQ]，简单很多，Github 直接创建应用就可以用，不需要长时间的审核 GitHub

╰半橙微兮°/ 2022年01月27日 05:23/ 0 赞/ 301 阅读