如何使用Python中的requests函数进行网络请求和HTTP通信？

发布时间：2023-05-22 07:48:16

Python中的requests库是一个功能强大的HTTP通信库，它提供了简单的API使得我们能够轻松地发送HTTP/1.1请求，而且支持各种HTTP请求类型，例如GET、POST、PUT、DELETE等。它是一个非常简单直观的库，易于使用和理解。

本文将为您介绍如何使用Python中的requests函数进行网络请求和HTTP通信。

1. 安装requests库

在使用requests之前，我们需要先将其安装到我们的Python环境中。我们可以使用以下命令在终端中安装它：

pip install requests

2. 发送GET请求

发送GET请求最常见的场景是获取一个网页。以下是一个简单的GET请求的示例：

import requests

url = 'https://www.baidu.com'
response = requests.get(url)

print(response.text)

我们可以得到百度主页的HTML代码，它是通过requests向服务器发送的GET请求获取到的。

在这个示例中，我们使用了requests.get()函数来发起GET请求，并将请求的URL作为参数传递。该函数返回一个response对象，该对象包含服务器对请求的回复。我们可以通过调用response.text属性来获取响应的文本内容。如果我们想要获取响应的二进制内容，我们可以使用response.content属性进行获取。

在发起GET请求时，我们还可以添加额外的参数。以下是一些常用的GET请求的参数：

- params：字典类型，可选参数，为GET请求添加查询参数。例如，我们可以使用requests.get(url, params={'key1': 'value1', 'key2': 'value2'})在URL中添加查询字符串。

- headers：字典类型，可选参数，用于设置请求头。例如，我们可以使用requests.get(url, headers={'User-agent': 'Mozilla/5.0'})模拟浏览器来发起请求。

3. 发送POST请求

发送POST请求最常见的场景是向服务器提交表单数据。以下是一个发送POST请求的简单示例：

import requests

url = 'http://httpbin.org/post'
payload = {'username': 'admin', 'password': 'password'}
response = requests.post(url, data=payload)

print(response.text)

在这个示例中，我们使用了requests.post()函数来发起POST请求，并将请求的URL和一个payload作为参数传递。payload是一个字典类型，它包含我们要发送到服务器的表单数据。可以通过调用response.text属性来获取响应的文本内容。

在发送POST请求时，我们还可以添加额外的参数。以下是一些常用的POST请求的参数：

- data：字典、字符串、或字节流类型，可选参数，作为POST请求的请求体发送。例如，我们可以使用requests.post(url, data={'key1': 'value1', 'key2': 'value2'})向服务器发送表单数据。

- headers：字典类型，可选参数，用于设置请求头。例如，我们可以使用requests.post(url, headers={'User-agent': 'Mozilla/5.0'})模拟浏览器来发起请求。

4. 状态码和异常处理

在进行网络请求时，可能会存在一些异常情况，例如我们请求的服务器不存在或无法连接到网络。此时，我们需要对这些异常情况进行处理，以确保我们的程序不会中断或崩溃。

在使用requests进行网络请求时，我们可以根据响应的状态码来确定请求的状态。以下是一些常见的HTTP状态码：

- 2XX Success：表示请求已成功完成。

- 3XX Redirection：表示需要进一步操作来完成请求。

- 4XX Client Errors：表示请求包含错误或无法完成请求。

- 5XX Server Errors：表示服务器无法完成明显有效的请求。

我们可以使用response.status_code属性来获取响应的状态码。例如，如果我们得到的状态码为200，则表示请求成功，我们可以继续处理返回的数据。如果状态码为404，则表示请求的资源不存在，我们可能需要尝试使用其他的URL或等待服务器处理。

除了处理状态码之外，我们还需要处理HTTP中的其他异常情况。以下是一些常见的异常情况：

- ConnectionError：表示请求无法连接到服务器。

- Timeout：表示连接或读取数据超时。

- TooManyRedirects：表示重定向次数过多。

我们可以通过使用try-except块来捕获这些异常并相应地处理它们。以下是一个简单的异常处理的示例：

import requests

url = 'http://httpbin.org/get'
try:
    response = requests.get(url, timeout=5)
    response.raise_for_status() # 检查是否成功获取了响应
    print(response.text)
except requests.exceptions.RequestException as e:
    print(e)

在这个示例中，我们将timeout参数设置为5秒，以便在请求超时时终止请求。我们还使用raise_for_status()方法检查是否成功获取了响应，并通过捕获RequestException异常来处理任何与请求相关的异常。

综上所述，requests库是一个强大而易于使用的Python第三方库，它可以简化网络请求和HTTP通信。本文介绍了如何使用requests库来发送GET和POST请求，并处理HTTP异常情况和状态码。如果你需要在Python中进行网络请求和HTTP通信，那么requests库就是一个不错的选择。