网络请求轻松搞定:玩转Python中requests函数的实用技巧

off999 2024-10-08 06:20 39 浏览 0 评论

介绍

在Python中，requests库是用于发送HTTP请求的常用库。它提供了简洁易用的接口，使得发送HTTP请求变得非常简单。本文将深入探讨requests库的使用方法，从入门到精通。

1. 安装requests库

在使用requests库之前，我们需要先安装它。可以使用以下命令来安装requests库：

pip install requests

2. 发送GET请求

requests库中的get()函数可以用于发送GET请求。

import requests

# 发送GET请求
response = requests.get('https://api.example.com/data')

# 输出响应内容
print(response.text)

在上述代码中，我们使用requests.get()函数发送GET请求到https://api.example.com/data，并将响应保存在变量response中。然后，使用response.text打印响应内容。

3. 发送带参数的GET请求

有时候我们需要发送带参数的GET请求。

import requests

# 发送带参数的GET请求
params = {'key': 'value'}
response = requests.get('https://api.example.com/data', params=params)

# 输出响应内容
print(response.text)

在上述代码中，我们使用params参数传递参数，发送带参数的GET请求到https://api.example.com/data，并将响应保存在变量response中。

4. 发送POST请求

requests库中的post()函数可以用于发送POST请求。

import requests

# 发送POST请求
data = {'key': 'value'}
response = requests.post('https://api.example.com/data', data=data)

# 输出响应内容
print(response.text)

在上述代码中，我们使用requests.post()函数发送POST请求到https://api.example.com/data，并将响应保存在变量response中。

5. 发送带参数的POST请求

有时候我们需要发送带参数的POST请求。

import requests

# 发送带参数的POST请求
data = {'key1': 'value1', 'key2': 'value2'}
response = requests.post('https://api.example.com/data', data=data)

# 输出响应内容
print(response.text)

在上述代码中，我们使用data参数传递参数，发送带参数的POST请求到https://api.example.com/data，并将响应保存在变量response中。

6. 发送JSON数据

requests库中的post()函数也可以用于发送JSON数据。

import requests

# 发送JSON数据
json_data = {'key': 'value'}
response = requests.post('https://api.example.com/data', json=json_data)

# 输出响应内容
print(response.text)

在上述代码中，我们使用json参数传递JSON数据，发送POST请求到https://api.example.com/data，并将响应保存在变量response中。

7. 发送文件

requests库中的post()函数还可以用于发送文件。

import requests

# 发送文件
files = {'file': open('data.txt', 'rb')}
response = requests.post('https://api.example.com/upload', files=files)

# 输出响应内容
print(response.text)

在上述代码中，我们使用files参数传递文件，发送POST请求到https://api.example.com/upload，并将响应保存在变量response中。

8. 设置请求头

有时候我们需要设置请求头，以便向服务器传递更多信息。

import requests

# 设置请求头
headers = {'User-Agent': 'Mozilla/5.0'}
response = requests.get('https://api.example.com/data', headers=headers)

# 输出响应内容
print(response.text)

在上述代码中，我们使用headers参数设置请求头，发送GET请求到https://api.example.com/data，并将响应保存在变量response中。

9. 设置超时时间

在发送请求时，有时候我们需要设置超时时间，防止请求时间过长。

import requests

# 设置超时时间为5秒
timeout = 5
response = requests.get('https://api.example.com/data', timeout=timeout)

# 输出响应内容
print(response.text)

在上述代码中，我们使用timeout参数设置超时时间为5秒，发送GET请求到https://api.example.com/data，并将响应保存在变量response中。

10. 处理响应

requests库返回的响应是一个Response对象，我们可以通过该对象获取响应的各种信息。

import requests

# 发送GET请求
response = requests.get('https://api.example.com/data')

# 获取响应状态码
status_code = response.status_code

# 获取响应头
headers = response.headers

# 获取响应内容
content = response.text

# 输出响应状态码、响应头和响应内容
print("状态码:", status_code)
print("响应头:", headers)
print("响应内容:", content)

在上述代码中，我们使用response.status_code获取响应状态码，使用response.headers获取响应头，使用response.text获取响应内容，并将这些信息输出。

11. 异常处理

在发送请求时，可能会发生一些异常，我们需要进行适当的异常处理。

import requests

try:
    # 发送GET请求
    response = requests.get('https://api.example.com/data')

    # 如果响应状态码不为200，抛出异常
    response.raise_for_status()

    # 输出响应内容
    print(response.text)
except requests.exceptions.HTTPError as http_error:
    print("HTTP错误:", http_error)
except requests.exceptions.ConnectionError as connection_error:
    print("连接错误:", connection_error)
except requests.exceptions.Timeout as timeout_error:
    print("超时错误:", timeout_error)
except requests.exceptions.RequestException as request_exception:
    print("其他错误:", request_exception)

在上述代码中，我们使用try...except语句进行异常处理。如果响应状态码不为200，则使用response.raise_for_status()抛出HTTPError异常。除了HTTPError异常，requests库还可能抛出ConnectionError、Timeout和RequestException等异常。

12. 会话管理

有时候我们需要在多个请求之间保持一些状态信息，可以使用Session对象进行会话管理。

import requests

# 创建会话
session = requests.Session()

# 第一个请求
response1 = session.get('https://api.example.com/login')

# 第二个请求
response2 = session.post('https://api.example.com/data', data={'key': 'value'})

# 输出响应内容
print(response2.text)

在上述代码中，我们使用requests.Session()创建一个会话对象session。在session对象中，第一个请求和第二个请求可以共享会话信息，例如登录信息等。

13. SSL证书验证

在发送HTTPS请求时，默认会验证服务器的SSL证书。如果不想验证，可以设置verify参数为False。

import requests

# 发送HTTPS请求，不验证SSL证书
response = requests.get('https://api.example.com/data', verify=False)

# 输出响应内容
print(response.text)

在上述代码中，我们使用verify=False设置不验证SSL证书，发送HTTPS请求到https://api.example.com/data。

14. 代理设置

有时候我们需要通过代理服务器发送请求，可以通过proxies参数进行设置。

import requests

# 设置代理
proxies = {'http': 'http://user:password@proxy.example.com',
           'https': 'https://user:password@proxy.example.com'}
response = requests.get('https://api.example.com/data', proxies=proxies)

# 输出响应内容
print(response.text)

在上述代码中，我们使用proxies参数设置代理，发送请求到https://api.example.com/data。

15. 总结

通过本文的讲解，我们了解了requests库的基本用法，从发送GET请求、发送带参数的GET请求，到发送POST请求、发送带参数的POST请求，再到发送JSON数据和文件，以及设置请求头、超时时间，处理响应和异常，会话管理，SSL证书验证和代理设置。 requests库是发送HTTP请求的重要工具，熟练掌握它的使用将帮助我们在Python开发中更加灵活、高效地与网络进行交互。

python安装requests