Python爬虫实践中常见的网络请求错误解析-蒲公英云

Python爬虫实践中常见的网络请求错误解析

原创青旅半醒 2025-03-20 20:54 7阅读 0赞

在Python爬虫中，我们经常遇到各种网络请求错误。这里我会介绍一些常见的错误及其解析方法。

HTTPError：这是requests库中的一种异常，通常是因为HTTP状态码不是200（成功）导致的。

解析：

try:
    response = requests.get('http://example.com')
    if response.status_code == 200:
        print('Request successful!')
    else:
        print(f'Request failed with status {response.status_code}}.')
except HTTPError as e:
    print(e)

URLError：这是requests库中的一种异常，通常是因为URL本身的问题导致的，比如URL不存在、格式错误等。

解析：

try:
    response = requests.get('http://example.com/invalid')
    if response.status_code == 404:
        print('Request successful, but resource not found!')
    else:
        print(f'Request failed with status {response.status_code}}.')
except HTTPError as e:
    if str(e).startswith('404'):
        print('Resource not found error!')
    else:
        print(e)