使用urllib.error模块处理URL请求的常见错误

urllib.error模块是Python标准库中的一个模块，用于处理URL请求时可能出现的常见错误。该模块提供了一系列的异常类，用于捕获和处理不同类型的异常，从而帮助我们更好地处理URL请求。

下面是urllib.error模块常见的异常类及其对应的错误类型和用法：

1. URLError：这是最常见的异常类，用于捕获包括网络无法连接、无效的URL等网络错误。它是所有其他异常类的基类，如果捕获到这个异常，则可以根据具体的错误类型进一步处理。

使用方法如下：

import urllib.request
from urllib.error import URLError

try:
    response = urllib.request.urlopen('http://www.example.com')
except URLError as e:
    print(e.reason)

2. HTTPError：这是URLError的子类，用于捕获HTTP请求的错误，如请求被拒绝、找不到页面等。它包含了HTTP状态码和错误原因。

使用方法如下：

import urllib.request
from urllib.error import HTTPError

try:
    response = urllib.request.urlopen('http://www.example.com')
except HTTPError as e:
    print(e.code, e.reason)

3. ContentTooShortError：这个异常类用于捕获下载内容过短的错误。当下载的内容长度小于预期长度时，就会引发这个异常。

使用方法如下：

import urllib.request
from urllib.error import ContentTooShortError

def download(url, num_retries=5, user_agent='wswp'):
    print('Downloading:', url)
    headers = {'User-Agent': user_agent}
    request = urllib.request.Request(url, headers=headers)
    try:
        response = urllib.request.urlopen(request)
        content = response.read()
        if len(content) < 1000:
            raise ContentTooShortError('Downloaded content is too short')
    except urllib.error.URLError as e:
        print('Download error:', e.reason)
        content = None
        if num_retries > 0:
            if hasattr(e, 'code') and 500 <= e.code < 600:
                return download(url, num_retries-1)
    except ContentTooShortError as e:
        print('Download error:', e.reason)
        content = None
    return content

4. FTPError：这个异常类用于捕获FTP请求的错误，如FTP用户名或密码错误等。

使用方法如下：

import urllib.request
from urllib.error import FTPError

try:
    urllib.request.urlopen('ftp://example.com')
except FTPError as e:
    print(e.reason)

5. 使用多个异常类同时捕获多个错误：

import urllib.request
from urllib.error import URLError, HTTPError, ContentTooShortError

try:
    urllib.request.urlopen('http://www.example.com')
except (URLError, HTTPError, ContentTooShortError) as e:
    print(type(e), e.reason)

以上就是urllib.error模块处理URL请求的常见错误及其使用方法的例子。该模块提供了丰富的异常类，可以根据具体的错误类型进行捕获和处理，从而提高我们处理URL请求时的容错性和健壮性。