利用爬虫爬取图片并保存

拼搏现实的明天。 2024-03-23 20:36 34阅读 0赞

**1** **问题**

在工作中，有时会遇到需要相当多的图片资源，可是如何才能在短时间内获得大量的图片资源呢？

**2** **方法**

我们知道，网页中每一张图片都是一个连接，所以我们提出利用爬虫爬取网页图片并下载保存下来。

首先通过网络搜索找到需要的图片集，将其中图片链接复制然后编入爬虫代码，随后利用open()、iter\_content()、write()等函数将图片下载并保存下来，同时还要确定图片保存的路径以便于查找图片。

1.  找到需要的图片的网页链接；
2.  利用爬虫根据网页爬取图片；
3.  将图片下载并保存；

通过实验、实践等证明提出的方法是有效的，是能够解决开头提出的问题。

代码清单 1

<table> 
 <tbody> 
  <tr> 
   <td>import requests<br>def get_pictures(web,path):<br> headers={'user-agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/112.0.0.0 Safari/537.36'} <br> re=requests.get(web,headers=headers)<br> print(re.status_code)<br> with open(path, 'wb') as f:<br> for chunk in re.iter_content(chunk_size=128):<br> f.write(chunk)<br>web='https://static.nowcoder.com/fe/file/oss/1655700469353QRQEI.jpg'<br>path='数据分析.jpg'<br>get_pictures(web,path)</td> 
  </tr> 
 </tbody> 
</table>

**3** **结语**

针对如何短时间内获取大量图片的问题，提出使用爬虫、open()函数、iter\_content()函数、write()函数等方法将图片下载并保存，通过实验，证明该方法是有效的。其中对于正则表达式的书写方法还不够熟练，对于函数open()、iter\_content()、write()的使用还存在很多未知，由于知识和技术上存在问题以上代码只能获取一张图片，我们相信通过不断地学习与练习，我们能进一步优化方法，最终达成目的。