7 发送请求之GET请求与POST请求

在上一篇的主题“环境准备之设置开发环境”中，我们为自己的爬虫项目搭建了基础的开发环境，包括安装Python及相应的库。现在，我们将深入探讨发送请求的基础知识，特别是 GET 请求和 POST 请求。

1. 什么是HTTP请求？

在计算机网络中，HTTP（超文本传输协议）是客户端和服务器之间进行通信的协议。常见的请求方法有 GET 和 POST。

• GET请求：用于请求访问指定资源。数据通常附加在URL中，适合获取数据。
• POST请求：用于向指定资源提交数据。数据通过请求体传输，适合提交表单或上传文件。

2. GET请求详解

GET 请求主要用于获取数据。它的特点是请求参数通过URL传递，参数可见，并且适合在浏览器中进行书签保存。

2.1 GET请求实例

以下是一个使用 requests 库发送 GET 请求的简单示例：

import requests

# 目标URL
url = 'http://example.com/api/data'
# 请求参数
params = {
    'key1': 'value1',
    'key2': 'value2'
}

# 发送GET请求
response = requests.get(url, params=params)

# 输出响应内容
print(response.status_code)  # 打印状态码
print(response.text)         # 打印响应内容

在上面的代码中，我们定义了一个字典 params 来存储请求参数。使用 requests.get() 方法发送请求时，requests 会自动将参数编码到URL中。

3. POST请求详解

与 GET 请求不同，POST 请求常用于上传数据或提交表单数据，数据在请求体中传输。

3.1 POST请求实例

下面是一个发送 POST 请求的示例：

import requests

# 目标URL
url = 'http://example.com/api/submit'
# 请求体中的数据
data = {
    'username': 'testuser',
    'password': 'mypassword'
}

# 发送POST请求
response = requests.post(url, data=data)

# 输出响应内容
print(response.status_code)  # 打印状态码
print(response.text)         # 打印响应内容

在此示例中，我们将数据以字典形式传递给 requests.post() 方法。requests 会将数据以表单格式发送到指定URL。

4. GET请求与POST请求的比较

特点	GET请求	POST请求
数据位置	URL中可见	请求体中不可见
数据大小限制	URL长度限制（通常不超过2048字符）	通常没有大小限制
安全性	不安全，易被窃听	相对安全，适合处理敏感数据
缓存支持	可被缓存	不可缓存

5. 总结

本文介绍了 GET 请求与 POST 请求的基本概念及操作，并通过案例演示了如何使用 requests 库进行这两种请求的发送。掌握这两种请求是进行网络爬虫开发的基础。

在下一篇教程“发送请求之使用requests库发送请求”中，我们将结合 requests 库的更多特性和实用功能，深入探索如何更有效地发送请求与处理响应。确保您已准备好继续学习！