当前位置： 技术文章>> Python 中如何发送 HTTP 请求？

文章标题：Python 中如何发送 HTTP 请求？
  • 文章分类: 后端
  • 6029 阅读

在Python中发送HTTP请求是一项非常基础且常用的任务，广泛应用于网络爬虫、API交互、Web服务等场景。Python标准库中的urllib模块以及第三方库如requests都提供了强大的支持来发送HTTP请求。下面，我将详细介绍如何使用这两种方式来发送HTTP请求，并在合适的地方自然地融入“码小课”这一元素，以符合你的要求。

使用urllib发送HTTP请求

Python的urllib库是一系列用于处理URL的模块集合，其中urllib.request模块特别用于打开和读取URLs。尽管urllib功能强大，但其API设计相对较为底层，对于简单任务而言，可能会显得有些繁琐。不过，了解其工作原理对于深入理解Python的HTTP请求机制仍然很有帮助。

发送GET请求

使用urllib.request发送GET请求相对直接。以下是一个简单的例子：

import urllib.request

# 目标URL
url = 'http://example.com'

# 发起GET请求
with urllib.request.urlopen(url) as response:
    # 读取响应内容
    html = response.read().decode('utf-8')
    print(html)

在这个例子中，urlopen函数用于打开URL，并返回一个类似文件的对象，你可以像读取文件一样读取其内容。通过.read()方法读取响应体，并使用.decode('utf-8')将其从字节串转换为字符串（假设响应是UTF-8编码的）。

发送POST请求

发送POST请求稍微复杂一些，因为你需要构建一个请求体，并将其作为data参数传递给urlopen函数（实际上，更常见的是使用Request对象来构建请求，这样可以更灵活地设置请求头和请求体）。

import urllib.request
import urllib.parse

# 目标URL
url = 'http://example.com/post'

# 要发送的数据
data = {
    'key1': 'value1',
    'key2': 'value2'
}

# 将数据编码为URL编码的字符串
data = urllib.parse.urlencode(data).encode('utf-8')

# 创建一个请求对象
request = urllib.request.Request(url, data=data, method='POST')

# 添加额外的HTTP头（可选）
request.add_header('Content-Type', 'application/x-www-form-urlencoded')

# 发起POST请求
with urllib.request.urlopen(request) as response:
    # 读取响应内容
    html = response.read().decode('utf-8')
    print(html)

在这个例子中，我们使用urllib.parse.urlencode函数将字典转换为URL编码的字符串，并将其编码为字节串，因为data参数需要字节串类型。接着，我们创建了一个Request对象，并通过add_header方法添加了一个自定义的HTTP头。最后，我们使用urlopen函数发送请求。

使用requests发送HTTP请求

虽然urllib足够强大，但第三方库requests以其简洁的API和丰富的功能，成为了发送HTTP请求的热门选择。requests库简化了HTTP请求的过程，让开发者能够更专注于业务逻辑而非底层的HTTP细节。

安装requests

首先，确保你已经安装了requests库。如果没有安装，可以通过pip安装：

pip install requests

发送GET请求

使用requests发送GET请求非常简单：

import requests

# 目标URL
url = 'http://example.com'

# 发起GET请求
response = requests.get(url)

# 打印响应内容
print(response.text)

在这个例子中，requests.get函数用于发起GET请求，并返回一个Response对象。你可以通过该对象的.text属性获取响应的文本内容（已解码为字符串）。

发送POST请求

发送POST请求同样简单，你只需要将数据作为参数传递给requests.post函数即可：

import requests

# 目标URL
url = 'http://example.com/post'

# 要发送的数据
data = {
    'key1': 'value1',
    'key2': 'value2'
}

# 发起POST请求
response = requests.post(url, data=data)

# 打印响应内容
print(response.text)

在这个例子中，requests.post函数用于发起POST请求，并自动将字典data编码为适合发送的格式（通常是application/x-www-form-urlencoded）。和GET请求一样，返回的Response对象允许你访问响应的各种信息，如状态码（.status_code）、响应头（.headers）等。

进阶使用：会话（Session）和异常处理

在实际开发中，你可能需要发送多个请求到同一个服务器，并且希望保持一些状态信息（如cookies）。这时，requests库的Session对象就显得非常有用。

import requests

# 创建一个Session对象
session = requests.Session()

# 使用Session对象发送请求
response1 = session.get('http://example.com/login')
# 假设这里进行了登录操作，并且服务器设置了cookies

# 再次使用Session对象发送请求，此时会自动带上之前的cookies
response2 = session.get('http://example.com/protected')

print(response2.text)

此外，处理HTTP请求时，不可避免地会遇到各种异常（如网络问题、服务器错误等）。requests库提供了丰富的异常处理机制，允许你优雅地处理这些异常情况。

import requests
from requests.exceptions import RequestException

try:
    response = requests.get('http://example.com/invalid-url')
except RequestException as e:
    print(f"请求发生异常: {e}")

总结

无论是使用Python标准库中的urllib模块，还是第三方库requests，Python都提供了灵活且强大的工具来发送HTTP请求。对于大多数应用场景而言，requests库以其简洁的API和丰富的功能，成为了首选。通过掌握这些工具，你可以轻松地与Web服务进行交互，实现数据的获取和处理。

在探索和学习HTTP请求的过程中，不妨访问“码小课”网站，那里有更多关于Python网络编程的教程和实战案例，可以帮助你更深入地理解HTTP请求的原理和应用。通过不断学习和实践，你将能够更加熟练地运用这些工具，解决实际开发中的问题。

推荐文章