python爬取百度图片并下载

忘是亡心i 2022-02-25 14:59 315阅读 0赞

# 爬取百度贴吧图片 #

import requests
    from bs4 import BeautifulSoup
    import  urllib.request
    def getHtml(url):# 爬取网页源代码
        # headers={ 
        #     "User-Agent":"Mozilla/5.0 (Windows NT 10.0; WOW64; Trident/7.0; rv:11.0) like Gecko"
        # }
        response=requests.get(url)
        response.encoding=response.apparent_encoding # 设置编码
        return response.text
    
    def getData(html):
        src=[]	# 存放图片src链接
        soup=BeautifulSoup(html,'html.parser')# BeautifulSoup解析
        imglist=soup.find_all('img')# 获取img图片集合
        lenth = len(imglist)  # 计算图片集合的个数
        for i in range(lenth):
            src.append(imglist[i].attrs['src'])# 获取src链接
        return src
    
    if __name__ == '__main__':
        url="https://tieba.baidu.com/p/4803144798"
        html=getHtml(url)
        img=getData(html)
        imgName = 0 # 计数，下载图片个数
        for href in img:
            if href[0:4]=='http':   # 去除不规范src链接
                name = "G:\\images\\"+str(imgName)+".jpg"   # 图片保存地址及命名拼接
                conn = urllib.request.urlopen(href)
                f = open(name, 'wb')
                f.write(conn.read())    # 将图片写入磁盘
                f.close()
                imgName += 1
                print('正下下载第%s图片' % imgName)

发表评论取消回复

表情：

评论列表（有 0 条评论，315人围观）

还没有评论，来说两句吧...

相关阅读

相关 Ajax爬取百度图片

> Python爬取百度图片 -- coding: utf-8 -- """ Created on Sat Jan 5 01:38:24 2021

Dear 丶/ 2023年01月02日 08:24/ 0 赞/ 190 阅读

相关 php爬去百度图片,Python爬虫：通过关键字爬取百度图片

使用工具：Python2.7 scrapy框架 sublime text3 一。搭建python(Windows版本) 1.安装python2.7 ---然后在cmd当

雨点打透心脏的1/2处/ 2022年11月15日 14:27/ 0 赞/ 217 阅读

相关 python爬百度图片，并使用。

\\\注意点：一定要关闭fidder等抓包软件，才能使用 \\\ 文章目录 1、爬百度图片 1.1、需要修改内容：header的内容

喜欢ヅ旅行/ 2022年11月01日 00:50/ 0 赞/ 146 阅读

相关 mysql百度图片爬虫_百度图片爬虫-python版-如何爬取百度图片?

这一篇我想写写如何爬取百度图片的爬虫，这个爬虫也是：搜搜gif(在线制作功能点我) 的爬虫代码，其实爬虫整体框架还是差不多的，但就是会涉及到图片的的一些处理，还是花费了我不少时

本是古典何须时尚/ 2022年10月31日 13:36/ 0 赞/ 265 阅读

相关 python实现爬取百度贴吧图片

本文最初参考： http://www.cnblogs.com/fnng/p/3576154.html\!comments 有一个缺点就是只能爬取网页的第一页的图片，而

系统管理员/ 2022年09月28日 11:42/ 0 赞/ 226 阅读

相关 Python 爬取百度图片

百度图片抓包数据: ![SouthEast][] 参数详情: ![SouthEast 1][] 数据解析: ![SouthEast 2][] ![South

不念不忘少年蓝@/ 2022年06月05日 09:25/ 0 赞/ 311 阅读

相关 python爬取百度图片并下载

爬取百度贴吧图片 import requests from bs4 import BeautifulSoup import urllib.req

忘是亡心i/ 2022年02月25日 14:59/ 0 赞/ 316 阅读

相关爬虫：爬取百度图片

详细过程参考下面的网址，真的很不错的文章： [https://blog.csdn.net/mingzhiqing/article/details/82778954][htt

客官°小女子只卖身不卖艺/ 2022年02月25日 03:40/ 0 赞/ 350 阅读

相关 python爬取百度图片（动态页面）

前言现在百度图片加载并不是一页一页地加载出来的，直接请求得到的 HTML 代码里面，并没有我们需要的数据，因为这些信息是通过Ajax加载的，并且通过js渲染生成的。在爬

左手的ㄟ右手/ 2022年02月20日 01:07/ 0 赞/ 390 阅读

相关用python爬虫爬取百度图片

用python爬虫爬取百度图片话不多说，直接上代码！ import requests import re headers = { "

素颜马尾好姑娘i/ 2021年07月26日 21:54/ 0 赞/ 568 阅读