【Python Requests 库详解】

目录

    • 简介
    • 一、安装与导入
      • 安装
      • 导入
    • 二、发送 HTTP 请求
      • 1. GET 请求
        • 基本请求
        • URL 参数
      • 2. POST 请求
        • 表单数据提交
        • JSON 数据提交
        • 文件上传
      • 3. 其他方法
        • PUT 请求示例
        • DELETE 请求示例
    • 三、处理响应
      • 1. 响应内容解析
        • 文本内容处理
        • 二进制内容处理
        • JSON 数据处理
      • 2. 响应状态与头信息
        • 状态码检查
        • 异常处理
        • 响应头解析
    • 四、高级功能
      • 1. 会话(Session)管理
      • 2. 代理设置
      • 3. 超时控制
      • 4. SSL 验证
        • 禁用验证(测试环境使用)
        • 自定义证书
    • 五、异常处理
      • 完整异常处理示例
    • 六、其他实用功能
      • 1. Cookie 操作
      • 2. 重定向控制
      • 3. 流式下载大文件
      • 4. 身份认证
    • 七、最佳实践
      • 推荐做法
      • 特点说明

简介

requests 是 Python 中最流行的 HTTP 客户端库,以简洁的 API 设计和强大的功能著称。以下是其核心知识点的详细说明及代码示例。


一、安装与导入

安装

# 使用 pip 安装 requests 库
pip install requests

导入

# 导入 requests 模块
import requests

二、发送 HTTP 请求

1. GET 请求

基本请求
# 发送一个简单的 GET 请求
response = requests.get("https://api.example.com/data")
print("响应状态码:", response.status_code)
URL 参数
# 通过 params 参数传递 URL 查询参数
params = {"page": 1,          # 当前页码"limit": 10,        # 每页数据量"sort": "desc"      # 排序方式
}
response = requests.get("https://api.example.com/items", params=params)
print("实际请求的 URL:", response.url)  # 输出构造后的完整 URL

2. POST 请求

表单数据提交
# 模拟表单提交(Content-Type: application/x-www-form-urlencoded)
form_data = {"username": "admin","password": "secret"
}
response = requests.post("https://api.example.com/login", data=form_data)
print("登录响应:", response.text)
JSON 数据提交
# 发送 JSON 格式数据(Content-Type: application/json)
user_info = {"name": "Alice","age": 25,"email": "alice@example.com"
}
response = requests.post("https://api.example.com/users", json=user_info)
print("创建用户结果:", response.json())
文件上传
# 上传本地文件(Content-Type: multipart/form-data)
with open("report.pdf", "rb") as file:  # 以二进制模式打开文件files = {"document": ("report.pdf", file, "application/pdf")}response = requests.post("https://api.example.com/upload", files=files)
print("文件上传结果:", response.json())

3. 其他方法

PUT 请求示例
# 更新资源(例如修改用户信息)
update_data = {"email": "new_email@example.com"}
response = requests.put("https://api.example.com/users/123", json=update_data)
print("更新结果状态码:", response.status_code)
DELETE 请求示例
# 删除资源(例如删除文章)
response = requests.delete("https://api.example.com/articles/456")
print("删除操作状态码:", response.status_code)

三、处理响应

1. 响应内容解析

文本内容处理
# 获取响应文本(自动解码)
response = requests.get("https://api.example.com/text")
print("文本内容:", response.text[:100])  # 截取前 100 个字符
二进制内容处理
# 下载图片并保存到本地
response = requests.get("https://example.com/image.jpg")
with open("image.jpg", "wb") as f:  # 以二进制写入模式保存f.write(response.content)
print("图片下载完成")
JSON 数据处理
# 解析 JSON 响应(自动转换为字典)
response = requests.get("https://api.example.com/products/789")
product = response.json()
print(f"产品名称: {product['name']}, 价格: {product['price']}元")

2. 响应状态与头信息

状态码检查
response = requests.get("https://api.example.com/health")
if response.status_code == 200:print("服务正常")
elif response.status_code == 404:print("资源不存在")
else:print("未知状态:", response.status_code)
异常处理
# 自动抛出 HTTP 错误
try:response = requests.get("https://api.example.com/error")response.raise_for_status()  # 如果状态码是 4xx/5xx 会抛出异常
except requests.HTTPError as err:print(f"HTTP 错误: {err}")
响应头解析
response = requests.head("https://example.com")  # HEAD 请求只获取头信息
print("服务器类型:", response.headers.get("Server", "未知"))
print("内容类型:", response.headers.get("Content-Type", "未指定"))

四、高级功能

1. 会话(Session)管理

# 使用 Session 保持登录状态和连接池
with requests.Session() as session:# 第一次请求:登录login_data = {"user": "admin", "pass": "123456"}session.post("https://api.example.com/login", data=login_data)# 后续请求:自动携带 Cookieprofile = session.get("https://api.example.com/profile").json()orders = session.get("https://api.example.com/orders").json()print("用户信息:", profile)

2. 代理设置

# 通过代理服务器发送请求
proxies = {"http": "http://10.10.1.10:3128",   # HTTP 代理"https": "http://10.10.1.10:1080"   # HTTPS 代理
}
try:response = requests.get("http://external-site.com", proxies=proxies, timeout=5)print("通过代理访问成功")
except requests.ConnectTimeout:print("代理连接超时")

3. 超时控制

# 设置连接超时和读取超时(元组格式)
try:response = requests.get("https://slow-api.example.com", timeout=(3.05, 10))# 连接超时 3.05 秒,读取超时 10 秒
except requests.Timeout:print("请求超时,请重试")

4. SSL 验证

禁用验证(测试环境使用)
# 注意:verify=False 会忽略 SSL 证书验证(不安全!)
response = requests.get("https://self-signed-cert-site.com", verify=False)
print("跳过 SSL 验证结果:", response.status_code)
自定义证书
# 使用自定义 CA 证书验证
response = requests.get("https://internal-api.example.com", verify="/path/to/corporate-ca-bundle.crt")
print("自定义证书验证成功")

五、异常处理

完整异常处理示例

from requests.exceptions import RequestExceptionurl = "https://unstable-api.example.com/data"try:# 设置超时和重试response = requests.get(url, timeout=5)response.raise_for_status()  # 检查 4xx/5xx 错误# 处理成功响应data = response.json()print("获取数据成功:", data["key"])except requests.Timeout:print("错误: 请求超时(5 秒)")
except requests.HTTPError as e:print(f"HTTP 错误: {e.response.status_code} - {e.response.reason}")
except requests.JSONDecodeError:print("错误: 响应不是有效的 JSON")
except RequestException as e:print(f"请求失败: {str(e)}")

六、其他实用功能

1. Cookie 操作

# 手动设置 Cookie
cookies = {"session_id": "abc123xyz"}
response = requests.get("https://api.example.com/cart", cookies=cookies)
print("购物车内容:", response.json())# 获取服务器设置的 Cookie
print("服务器返回的 Cookies:")
for cookie in response.cookies:print(f"{cookie.name}: {cookie.value}")

2. 重定向控制

# 禁用自动重定向
response = requests.get("https://example.com/old-url", allow_redirects=False)
if response.status_code == 301:new_location = response.headers["Location"]print(f"需要手动跳转到: {new_location}")

3. 流式下载大文件

# 分块下载大文件(避免内存溢出)
url = "https://example.com/large-video.mp4"
with requests.get(url, stream=True) as r:r.raise_for_status()with open("video.mp4", "wb") as f:for chunk in r.iter_content(chunk_size=8192):  # 8KB 块f.write(chunk)
print("大文件下载完成")

4. 身份认证

# 使用 Basic 认证
from requests.auth import HTTPBasicAuthresponse = requests.get("https://api.example.com/secured",auth=HTTPBasicAuth("user", "pass"))
print("认证结果:", response.status_code)

七、最佳实践

推荐做法

  1. 会话复用

    # 使用 with 语句自动管理 Session
    with requests.Session() as s:s.headers.update({"User-Agent": "MyApp/1.0"})  # 统一设置请求头s.get("https://api.example.com/ping")          # 测试连接
    
  2. 超时必填

    # 所有请求都应该设置超时
    requests.get("https://example.com", timeout=(3, 10))  # 连接 3 秒,读取 10 秒
    
  3. 资源释放

    # 使用 with 语句确保响应资源释放
    with requests.get("https://example.com", stream=True) as response:# 处理响应内容pass
    
  4. 错误重试

    # 实现简单重试逻辑
    retries = 3
    for _ in range(retries):try:response = requests.get(url, timeout=5)response.raise_for_status()breakexcept (RequestException, Timeout):continue
    

官方文档:https://docs.python-requests.org/


特点说明

  1. 代码注释:每个示例都添加了详细的注释,说明代码用途和关键参数
  2. 场景覆盖:包含常见场景(登录、文件传输、错误处理)和特殊需求(代理、SSL 验证)
  3. 安全提示:在禁用 SSL 验证等危险操作时添加警告说明
  4. 最佳实践:强调超时设置、会话管理和资源释放的重要性

可直接保存为 .md 文件或导入到文档工具中使用。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/diannao/77545.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

【Python 开源】你的 Windows 关机助手——PyQt5 版定时关机工具

🖥️ 你的 Windows 关机助手——PyQt5 版定时关机工具 相关资源文件已经打包成EXE文件,可双击直接运行程序,且文章末尾已附上相关源码,以供大家学习交流,博主主页还有更多Python相关程序案例,秉着开源精神的…

【MySQL】002.MySQL数据库基础

文章目录 数据库基础1.1 什么是数据库1.2 基本使用创建数据库创建数据表表中插入数据查询表中的数据 1.3 主流数据库1.4 服务器,数据库,表关系1.5 MySQL架构1.6 SQL分类1.7 存储引擎1.7.1 存储引擎1.7.2 查看存储引擎1.7.3 存储引擎对比 前言&#xff1a…

滑动窗口(3)—无重复字符的最长子串

文章目录 题目解析方法一:滑动窗口解法二(暴⼒求解)(不会超时,可以通过):附Java代码 力扣题目:无重复字符的最长子串 题目解析 方法一:滑动窗口 思路和算法 我们先用一…

C++字符串操作详解

引言 字符串处理是编程中最常见的任务之一,而在C中,我们有多种处理字符串的方式。本文将详细介绍C中的字符串操作,包括C风格字符串和C的string类。无论你是C新手还是想巩固基础的老手,这篇文章都能帮你梳理字符串处理的关键知识点…

Vulhub-DC-4靶场通关攻略

下载地址:https://www.vulnhub.com/entry/dc-4,313/ 扫描IP地址 arp-sacn -l扫描端口,开启了80和22端口 nmap -p- 192.168.112.140访问80端口 扫描目录,并没有发现敏感目录 尝试爆破 爆破成功,用户名admin 密码happy 登录成功 …

OfficePlus去掉PDF文件右键菜单里的PDF转换

今天在吾爱破解论坛看到一个求助帖,说是OfficePlus,安装后,PDF文件的右键菜单里多了PDF转换,想去掉,不知道怎么弄。底下的回复基本都是百度复制或者AI搜索出的答案,大致就是找注册表里CLASSID下的菜单栏相关…

大模型本地部署系列(3) Ollama部署QwQ[阿里云通义千问]

大家好,我是AI研究者, 今天教大家部署 一个阿里云通义千问大模型。 QwQ大模型简介 QwQ是由阿里云通义千问(Qwen)团队推出的开源推理大模型,专注于提升AI在数学、编程和复杂逻辑推理方面的能力。其核心特点包括&#x…

微信小程序学习实录12:掌握大数据量轨迹展示的MySQL结构设计

获取经纬度信息后,mysql建立数据表po_trajectory,字段包含tra_id、longitude、latitude、tra_time和openid。 为微信小程序创建的 po_trajectory 数据表,字段包含 tra_id、longitude、latitude、tra_time 和 openid,从结构设计上…

计算机系统---性能指标(3)续航与散热

计算机电池续航的性能指标 一、电池基础物理指标 电池容量(核心指标) 单位: 毫安时(mAh):常见于手机/平板,反映电池存储电荷量,需结合电压计算实际能量(如3.7V电池&…

贪心算法之最小生成树问题

1. 贪心算法的基本思想 贪心算法在每一步都选择局部最优的边,希望最终得到整体最优的生成树。常见的两种 MST 算法为 Kruskal 算法 和 Prim 算法。这两者均满足贪心选择性质和最优子结构性质,即: 贪心选择性质:局部最优选择&…

LeetCode hot 100—编辑距离

题目 给你两个单词 word1 和 word2, 请返回将 word1 转换成 word2 所使用的最少操作数 。 你可以对一个单词进行如下三种操作: 插入一个字符删除一个字符替换一个字符 示例 示例 1: 输入:word1 "horse", word2 &q…

2.3 Spark运行架构与流程

Spark运行架构与流程包括几个核心概念:Driver负责提交应用并初始化作业,Executor在工作节点上执行任务,作业是一系列计算任务,任务是作业的基本执行单元,阶段是一组并行任务。Spark支持多种运行模式,包括单…

NO.82十六届蓝桥杯备战|动态规划-从记忆化搜索到动态规划|下楼梯|数字三角形(C++)

记忆化搜索 在搜索的过程中,如果搜索树中有很多重复的结点,此时可以通过⼀个"备忘录",记录第⼀次搜索到的结果。当下⼀次搜索到这个结点时,直接在"备忘录"⾥⾯找结果。其中,搜索树中的⼀个⼀个结点…

使用 VBA 宏创建一个选择全部word图片快捷指令,进行图片格式编辑

使用 VBA 宏批量选择图片 ✅ 第一步:创建 .dotm 加载项文件 1、使用环境 office word 365,文件格式为.docx 图片格式为.PNG 2、创建 .dotm 加载项文件 打开 Word,新建一个空白文档。 按下 Alt F11 打开 VBA 编辑器。 点击菜单栏&#xff…

深度学习的下一个突破:从图像识别到情境理解

引言 过去十年,深度学习在图像识别领域取得了惊人的突破。从2012年ImageNet大赛上的AlexNet,到后来的ResNet、EfficientNet,再到近年来Transformer架构的崛起,AI已经能在许多任务上超越人类,比如人脸识别、目标检测、医…

使用dyn4j做碰撞检测

文章目录 前言一、环境准备添加依赖基本概念 二、实现步骤1.创建世界2.添加物体3.设置碰撞监听器4.更新世界 三、完整代码示例四、优化补充总结 前言 dyn4j 提供了高效的碰撞检测和物理模拟功能,适用于游戏开发、动画制作以及其他需要物理交互的场景。通过简单的 A…

VS Code settings.json 文件中常用的预定义变量‌及其用途说明

VS Code settings.json 常用预定义变量 以下是 Visual Studio Code 配置文件中常用的预定义变量列表: 1. 工作区相关变量 变量描述示例值${workspaceFolder}当前工作区根目录的绝对路径C:/projects/my-project${workspaceFolderBasename}工作区文件夹名称&#x…

elasticSearch-搜索引擎

搜索引擎的优势 有了数据库分页查询,为什么还需要搜索引擎? 搜索引擎速度上很快数据库分页查询,随着数据库数据量增大,页数靠后,会导致搜索速度变慢,但是搜索引擎不会搜索引擎支持分词查询,地…

安装OpenJDK1.8 17 (macos M芯片)

安装OpenJDK 1.8 下载完后,解压,打开 环境变量的配置文件即可 vim ~/.zshrc #export JAVA_HOME/Users/xxxxx/jdk-21.jdk/Contents/Home #export JAVA_HOME/Users/xxxxx/jdk-17.jdk/Contents/Home #export JAVA_HOME/Users/xxxxx/jdk-11.jdk/Contents…

断言与反射——以golang为例

断言 x.(T) 检查x的动态类型是否是T,其中x必须是接口值。 简单使用 func main() {var x interface{}x 100value1, ok : x.(int)if ok {fmt.Println(value1)}value2, ok : x.(string)if ok {//未打印fmt.Println(value2)} }需要注意如果不接受第二个参数就是OK,这…