Python中的requests库入门教程

本文全面介绍了requests库的使用方法和应用场景，包括安装步骤、发送GET和POST请求的详细步骤以及如何处理响应数据。文中还涵盖了参数和数据的传递方式以及异常处理机制，帮助读者更好地理解和使用requests库来处理各种HTTP请求。文中提供的示例代码详细解释了如何利用requests库进行HTTP请求的发送和响应的处理。文中详细说明了request库的多种应用场景和使用方法，适合需要进行Web开发和自动化任务的开发者。

1.1 什么是requests库

requests 是一个简洁的HTTP库，它用来发送HTTP请求和处理HTTP响应，支持多种HTTP方法，如GET、POST、PUT、DELETE等。requests 库易于使用，在Python社区中非常受欢迎，是进行Web开发和自动化任务时的首选库。

1.2 requests库的作用和应用场景

requests 库广泛用于各种场景，如Web爬虫、API测试、数据获取、自动化测试等。以下是一些常见应用场景：

• Web爬虫：通过发送HTTP请求获取网页内容，或从特定API获取数据。
• API测试：测试Web服务接口的正确性和性能。
• 数据获取：从各种API或网站获取数据，如天气预报、股票信息等。
• 自动化测试：模拟用户行为，验证Web应用的功能和性能。

1.3 安装requests库的方法

要使用requests库，首先需要安装它。可以通过pip工具来安装：

pip install requests

安装完成后，可以在Python脚本中导入requests库：

import requests

2.1 GET请求的基本概念

GET请求是一种HTTP方法，用于从服务器获取信息。它通过在URL中包含查询参数来传递数据。GET请求通常用于检索数据，且不会修改服务器上的数据。

2.2 使用requests发送GET请求的步骤

使用requests库发送GET请求的基本步骤如下：

1. 导入requests库。
2. 使用requests.get()方法发送GET请求。
3. 获取响应内容和状态码。

2.3 示例代码及解释

以下是一个发送GET请求的示例代码：

import requests

# 发送GET请求
response = requests.get('https://api.github.com')

# 打印响应内容
print(response.text)

# 打印响应状态码
print(response.status_code)

解释：

• requests.get(url)：发送GET请求到给定的URL。
• response.text：获取响应的文本内容。
• response.status_code：获取响应的状态码（HTTP状态码）。

2.4 获取响应内容和状态码

可以通过以下方式获取响应内容和状态码：

# 获取响应文本内容
response_text = response.text

# 获取响应状态码
response_status_code = response.status_code

print(f"响应文本内容: {response_text}")
print(f"响应状态码: {response_status_code}")

3.1 POST请求的基本概念

POST请求也是一种HTTP方法，用于向服务器提交数据。POST请求通常用于创建资源或提交数据到服务器。与GET请求相比，POST请求将数据放在请求体中而不是URL中。

3.2 使用requests发送POST请求的步骤

使用requests库发送POST请求的基本步骤如下：

1. 导入requests库。
2. 使用requests.post()方法发送POST请求。
3. 设置请求头和请求体。
4. 获取响应内容和状态码。

3.3 示例代码及解释

以下是一个发送POST请求的示例代码：

import requests

# 定义请求头
headers = {
    'Content-Type': 'application/json'
}

# 定义请求体
data = {
    'key1': 'value1',
    'key2': 'value2'
}

# 发送POST请求
response = requests.post('https://httpbin.org/post', headers=headers, json=data)

# 打印响应内容
print(response.text)

# 打印响应状态码
print(response.status_code)

解释：

• headers：请求头，设置请求的类型（例如JSON格式）。
• data：请求体，包含要提交的数据。
• requests.post(url, headers=headers, json=data)：发送POST请求到给定的URL，并传递请求头和请求体。

3.4 包含请求头和请求体的POST请求

以下是一个更复杂的POST请求示例，包含请求头和请求体：

import requests

# 定义请求头
headers = {
    'Content-Type': 'application/json',
    'Authorization': 'Bearer your_token'
}

# 定义请求体
data = {
    'username': 'your_username',
    'password': 'your_password'
}

# 发送POST请求
response = requests.post('https://example.com/login', headers=headers, json=data)

# 打印响应内容
print(response.text)

# 打印响应状态码
print(response.status_code)

4.1 获取响应的文本内容

响应内容通常是以文本形式返回的，可以通过以下方式获取：

import requests

response = requests.get('https://api.github.com')
response_text = response.text
print(response_text)

4.2 获取响应的JSON数据

如果响应内容是JSON格式，可以使用response.json()方法将其解析为Python字典：

import requests

response = requests.get('https://api.github.com')
response_json = response.json()
print(response_json)

4.3 处理响应的二进制数据

如果响应内容是二进制数据（例如图片或文件），可以使用response.content获取：

import requests

response = requests.get('https://example.com/image.jpg')
response_binary = response.content
print(response_binary)

5.1 传递URL参数

可以通过URL参数来传递额外的数据。例如，可以通过在URL后面添加问号（?）并追加参数来传递数据：

import requests

params = {
    'param1': 'value1',
    'param2': 'value2'
}

response = requests.get('https://httpbin.org/get', params=params)
print(response.text)

5.2 传递请求体数据

请求体数据可以通过json参数传递。例如：

import requests

data = {
    'key1': 'value1',
    'key2': 'value2'
}

response = requests.post('https://httpbin.org/post', json=data)
print(response.text)

5.3 使用不同的编码方式传递数据

有时需要使用不同的编码方式传递数据。例如，可以使用data参数传递URL编码的数据：

import requests

data = {
    'key1': 'value1',
    'key2': 'value2'
}

response = requests.post('https://httpbin.org/post', data=data)
print(response.text)

6.1 常见的异常类型

在使用requests库发送HTTP请求时，可能会遇到各种异常。以下是一些常见的异常类型：

• requests.exceptions.RequestException：所有异常的基础类。
• requests.exceptions.Timeout：请求超时。
• requests.exceptions.TooManyRedirects：重定向过多。
• requests.exceptions.HTTPError：HTTP请求失败（例如404错误）。

6.2 如何捕获和处理异常

使用try-except语句来捕获和处理异常：

import requests

try:
    response = requests.get('https://example.com/nonexistent')
except requests.exceptions.RequestException as e:
    print(f"请求异常: {e}")
else:
    print("请求成功")

6.3 示例代码及解释

以下是一个完整的示例代码，包括异常捕获和处理：

import requests

try:
    response = requests.get('https://example.com/nonexistent')
    response.raise_for_status()  # 如果响应状态码不是200，抛出异常
except requests.exceptions.HTTPError as http_err:
    print(f"HTTP错误: {http_err}")
except requests.exceptions.ConnectionError as conn_err:
    print(f"连接错误: {conn_err}")
except requests.exceptions.Timeout as time_err:
    print(f"请求超时: {time_err}")
except requests.exceptions.RequestException as err:
    print(f"请求异常: {err}")
else:
    print("请求成功")

解释：

• response.raise_for_status()：如果响应状态码不是200，抛出异常。
• requests.exceptions.HTTPError：处理HTTP错误。
• requests.exceptions.ConnectionError：处理连接错误。
• requests.exceptions.Timeout：处理请求超时。
• requests.exceptions.RequestException：处理其他请求异常。