深入理解Python中的JSON模块:基础大总结与实战代码解析【第102篇—JSON模块】

深入理解Python中的JSON模块:基础大总结与实战代码解析

在Python中,JSON(JavaScript Object Notation)模块是处理JSON数据的重要工具之一。JSON是一种轻量级的数据交换格式,广泛应用于Web开发、API通信等领域。本文将深入探讨JSON模块的基础知识,并通过实战代码解析来帮助读者更好地理解和运用该模块。

image-20240227001521952

1. JSON模块基础知识

1.1 JSON简介

JSON是一种轻量级的数据格式,易于阅读和编写,同时也易于机器解析和生成。它基于键值对的方式组织数据,支持嵌套结构,包括对象和数组。

1.2 JSON模块概述

Python的json模块提供了处理JSON数据的工具,包括序列化(将Python对象转换为JSON字符串)和反序列化(将JSON字符串转换为Python对象)功能。

1.3 基本函数和方法

  • json.dumps(obj, indent=4): 将Python对象序列化为JSON格式的字符串,可选参数indent用于指定缩进空格数。
  • json.dump(obj, fp, indent=4): 将Python对象序列化为JSON格式并写入文件中。
  • json.loads(json_str): 将JSON格式的字符串反序列化为Python对象。
  • json.load(fp): 从文件中读取JSON数据并反序列化为Python对象。

2. 实战代码解析

2.1 JSON序列化示例

让我们从一个简单的Python字典开始,演示如何使用json.dumps进行序列化:

import json# 定义一个Python字典
data = {"name": "John","age": 30,"city": "New York"
}# 序列化为JSON字符串并打印
json_string = json.dumps(data, indent=2)
print(json_string)

上述代码将输出格式化的JSON字符串,包含键值对和缩进:

{"name": "John","age": 30,"city": "New York"
}

2.2 JSON反序列化示例

接下来,我们将演示如何使用json.loads将JSON字符串反序列化为Python对象:

import json# 定义一个JSON字符串
json_string = '{"name": "John", "age": 30, "city": "New York"}'# 反序列化为Python对象并打印
python_object = json.loads(json_string)
print(python_object)

输出结果将是一个Python字典:

{'name': 'John', 'age': 30, 'city': 'New York'}

2.3 从文件读取和写入JSON数据

让我们看一个将JSON数据写入文件并从文件中读取的例子:

import json# 定义一个Python字典
data = {"name": "Alice","age": 25,"city": "London"
}# 将数据写入JSON文件
with open("data.json", "w") as file:json.dump(data, file, indent=2)# 从JSON文件中读取数据
with open("data.json", "r") as file:loaded_data = json.load(file)# 打印加载后的数据
print(loaded_data)

这样,我们就完成了从Python对象到JSON字符串,以及从JSON字符串到Python对象的转换,同时通过文件进行读写。

3. 高级应用:自定义JSON序列化与反序列化

JSON模块不仅仅局限于基本的数据类型序列化,还支持用户自定义类的序列化与反序列化。通过defaultobject_hook参数,我们可以实现更高级的应用。

3.1 自定义序列化

考虑以下场景,有一个自定义的Person类:

class Person:def __init__(self, name, age):self.name = nameself.age = age

我们可以通过自定义一个函数来告诉JSON模块如何序列化这个类的实例:

def person_encoder(obj):if isinstance(obj, Person):return {"name": obj.name, "age": obj.age}raise TypeError("Object of type 'Person' is not JSON serializable")# 创建一个Person实例
person_instance = Person(name="Emma", age=28)# 序列化为JSON字符串
json_string_custom = json.dumps(person_instance, default=person_encoder, indent=2)
print(json_string_custom)

3.2 自定义反序列化

同样,我们可以定义一个函数,告诉JSON模块如何将JSON数据转换为我们期望的自定义类的实例:

def person_decoder(obj):if "name" in obj and "age" in obj:return Person(name=obj["name"], age=obj["age"])return obj# 反序列化JSON字符串
loaded_person = json.loads(json_string_custom, object_hook=person_decoder)
print(loaded_person.__dict__)

这样,我们就实现了自定义类的序列化与反序列化,使得JSON模块更加灵活,可以适应各种数据结构。

4. 异常处理与安全性考虑

在处理JSON数据时,我们也需要考虑一些异常情况,例如处理无效的JSON字符串或避免潜在的安全问题。

4.1 异常处理

在实际应用中,我们可能会遇到无效的JSON字符串,为了防止程序崩溃,可以使用try-except块进行异常处理:

json_str_invalid = '{"name": "Sam", "age": 25,}'try:loaded_data_invalid = json.loads(json_str_invalid)print(loaded_data_invalid)
except json.JSONDecodeError as e:print(f"Error decoding JSON: {e}")

4.2 安全性考虑

当从不受信任的源加载JSON数据时,需要注意防范JSON注入攻击。在这种情况下,可以使用json.JSONEncoder的子类来自定义编码器,确保数据的安全性。

class SafeJSONEncoder(json.JSONEncoder):def default(self, obj):if isinstance(obj, (str, int, float, bool, list, dict, type(None))):return super().default(obj)else:return str(obj)# 使用SafeJSONEncoder编码
unsafe_data = {"user": "admin", "password": "123456"}
json_string_safe = json.dumps(unsafe_data, cls=SafeJSONEncoder, indent=2)
print(json_string_safe)

5. JSON模块在Web开发中的应用

在现代的Web开发中,JSON广泛用于前后端之间的数据交换。在这个背景下,JSON模块成为了连接前后端的桥梁,促使了更加灵活和高效的数据通信方式。

5.1 API交互

许多Web服务和应用程序通过API(Application Programming Interface)进行数据交换,而API通常以JSON格式返回数据。使用JSON模块,我们能够轻松处理从API获取的JSON响应。

import requests
import json# 发送API请求
response = requests.get("https://jsonplaceholder.typicode.com/todos/1")
data_from_api = response.json()# 打印获取的数据
print(json.dumps(data_from_api, indent=2))

5.2 前后端数据交互

在前后端分离的架构中,前端通过JSON与后端进行数据交互。例如,使用Flask框架搭建的后端服务可以轻松将Python对象转换为JSON格式返回给前端:

from flask import Flask, jsonifyapp = Flask(__name__)@app.route('/get_user', methods=['GET'])
def get_user():user_data = {"username": "john_doe", "email": "john@example.com"}return jsonify(user_data)if __name__ == '__main__':app.run(debug=True)

前端通过Ajax等方式请求后端数据,而后端则使用JSON模块处理数据,实现了前后端的高效通信。

7. 高级技巧:自定义JSON序列化器和反序列化器

在一些复杂的应用场景中,我们可能需要更灵活地控制对象的序列化和反序列化过程。为此,我们可以自定义JSON编码器和解码器,通过继承json.JSONEncoder和使用object_hook参数实现更高级的处理逻辑。

7.1 自定义JSON编码器

import json
from datetime import datetimeclass CustomJSONEncoder(json.JSONEncoder):def default(self, obj):if isinstance(obj, datetime):return obj.strftime('%Y-%m-%d %H:%M:%S')return super().default(obj)# 使用自定义编码器
data_with_datetime = {'event': 'meeting', 'time': datetime.now()}
json_string_custom_encoder = json.dumps(data_with_datetime, cls=CustomJSONEncoder, indent=2)
print(json_string_custom_encoder)

在上述例子中,我们自定义了一个JSON编码器,用于将datetime对象转换为特定格式的字符串。通过传递cls=CustomJSONEncoder参数,我们告诉json.dumps使用我们定义的编码器。

7.2 自定义JSON解码器

import json
from datetime import datetimedef custom_decoder(obj):if 'time' in obj:obj['time'] = datetime.strptime(obj['time'], '%Y-%m-%d %H:%M:%S')return obj# 使用自定义解码器
json_string_custom_decoder = '{"event": "meeting", "time": "2024-02-27 15:30:00"}'
decoded_data = json.loads(json_string_custom_decoder, object_hook=custom_decoder)
print(decoded_data)

在这个例子中,我们定义了一个自定义的解码器函数custom_decoder,用于将JSON中的特定字段(例如时间戳)转换为Python对象。通过传递object_hook=custom_decoder参数,我们指定了解码时使用自定义的解码器。

8. JSON Schema验证

除了序列化和反序列化,JSON模块还支持使用JSON Schema验证JSON数据的有效性。JSON Schema是一种用于描述JSON数据结构的规范。

from jsonschema import validate# 定义JSON Schema
schema = {"type": "object","properties": {"name": {"type": "string"},"age": {"type": "integer"},"city": {"type": "string"}},"required": ["name", "age"]
}# 待验证的JSON数据
json_data_to_validate = '{"name": "Alice", "age": 28}'# 进行验证
try:validate(instance=json.loads(json_data_to_validate), schema=schema)print("JSON data is valid against the schema.")
except Exception as e:print(f"Validation failed: {e}")

在上述例子中,我们使用jsonschema库验证JSON数据是否符合预定义的JSON Schema。这有助于确保我们的数据满足特定的结构和约束。

9. JSON模块的性能优化

在处理大量数据或对性能要求较高的应用中,优化JSON模块的使用是一个重要的考虑因素。以下是一些性能优化的建议:

9.1 使用ujson替代json

ujson是一个C语言实现的JSON解析器,速度比Python标准库的json模块更快。在安装之前,需要先使用pip进行安装:

pip install ujson

然后,可以将代码中的json替换为ujson,享受更高的性能。

import ujsondata = {"name": "John", "age": 30, "city": "New York"}
json_string = ujson.dumps(data)
loaded_data = ujson.loads(json_string)

9.2 使用生成器减少内存消耗

当处理大型数据集时,可以考虑使用生成器来逐行读取和写入JSON数据,减少内存的占用。

import jsondef read_large_json_file(file_path):with open(file_path, 'r') as file:for line in file:yield json.loads(line)def write_large_json_file(file_path, data_generator):with open(file_path, 'w') as file:for data in data_generator:json.dump(data, file)file.write('\n')# 读取大型JSON文件
large_data_generator = read_large_json_file('large_data.json')# 处理数据并写入新文件
write_large_json_file('processed_large_data.json', processed_data_generator)

9.3 使用json.JSONEncoder自定义优化

通过继承json.JSONEncoder并覆写default方法,可以实现对特定对象的优化处理,提高序列化性能。

import json
from datetime import datetimeclass OptimizedJSONEncoder(json.JSONEncoder):def default(self, obj):if isinstance(obj, datetime):return obj.isoformat()return super().default(obj)# 使用自定义编码器
data_with_datetime = {'event': 'meeting', 'time': datetime.now()}
json_string_optimized_encoder = json.dumps(data_with_datetime, cls=OptimizedJSONEncoder, indent=2)
print(json_string_optimized_encoder)

10. JSON模块与其他模块的集成

JSON模块可以与其他Python模块集成,以实现更复杂的应用。以下是一些集成的示例:

10.1 与Pandas集成

Pandas是一个强大的数据处理库,可以轻松处理数据框。JSON数据可以与Pandas的数据框进行转换。

import pandas as pd
import json# 创建一个数据框
df = pd.DataFrame({'name': ['Alice', 'Bob', 'Charlie'], 'age': [25, 30, 35]})# 将数据框转为JSON字符串
json_string_from_df = df.to_json(orient='records', lines=True)# 将JSON字符串转为数据框
df_from_json = pd.read_json(json_string_from_df, lines=True)
print(df_from_json)

10.2 与数据库集成

在与数据库交互时,可以使用JSON模块方便地将数据转换为JSON格式。

import sqlite3
import json# 连接SQLite数据库
conn = sqlite3.connect('example.db')
cursor = conn.cursor()# 创建表
cursor.execute('''CREATE TABLE IF NOT EXISTS users (id INTEGER PRIMARY KEY, name TEXT, age INTEGER)''')# 插入数据
cursor.execute('''INSERT INTO users (name, age) VALUES (?, ?)''', ('Alice', 28))
cursor.execute('''INSERT INTO users (name, age) VALUES (?, ?)''', ('Bob', 35))# 提交更改
conn.commit()# 查询数据并转为JSON
cursor.execute('''SELECT * FROM users''')
rows = cursor.fetchall()
json_data_from_db = json.dumps(rows, indent=2)
print(json_data_from_db)# 关闭连接
conn.close()

通过以上集成示例,我们展示了JSON模块如何与其他常用模块协同工作,使得在实际项目中更容易实现各种数据处理需求。

11. JSON Web Token (JWT) 与 JSON模块的结合

在Web开发中,JSON Web Token(JWT)是一种用于在用户和服务器之间传递安全信息的开放标准。JWT通常被用于身份验证和信息传递,其内容以JSON格式编码。

JSON模块可以方便地用于JWT的编码和解码过程。

11.1 JWT编码

import json
import jwt
from datetime import datetime, timedelta# 密钥,用于签名
secret_key = "my_secret_key"# 创建payload(负载)
payload = {"user_id": 123,"username": "john_doe","exp": datetime.utcnow() + timedelta(days=1)  # 设置过期时间
}# 使用json.dumps将payload转为JSON字符串,并使用jwt.encode生成JWT
jwt_token = jwt.encode(json.loads(json.dumps(payload)), secret_key, algorithm='HS256')print("JWT Token:", jwt_token)

11.2 JWT解码

import jwt# 解码JWT Token,获取原始payload
decoded_payload = jwt.decode(jwt_token, secret_key, algorithms=['HS256'])print("Decoded Payload:", decoded_payload)

通过上述示例,我们演示了如何使用JSON模块将Python字典转换为JSON字符串,然后使用JWT对其进行编码和解码。JWT的使用在实际Web应用中非常广泛,结合JSON模块使得对JWT的操作更为灵活和方便。

12. JSON模块的异步支持

在异步编程中,Python提供了asyncio库,而JSON模块也提供了对异步编程的支持。aiohttp库是一种常用的异步HTTP客户端库,结合JSON模块,我们可以进行异步的JSON数据交互。

12.1 异步JSON编码

import json
import asyncio
import aiohttpasync def async_json_encode():data = {"name": "Alice", "age": 28}json_string = json.dumps(data)return json_stringasync def main():json_data = await async_json_encode()print("Async JSON Encoding Result:", json_data)# 运行异步主函数
asyncio.run(main())

12.2 异步JSON解码

import json
import asyncio
import aiohttpasync def async_json_decode(json_string):data = json.loads(json_string)return dataasync def main():json_data = '{"name": "Bob", "age": 35}'decoded_data = await async_json_decode(json_data)print("Async JSON Decoding Result:", decoded_data)# 运行异步主函数
asyncio.run(main())

在异步编程中,可以通过asyncioaiohttp库结合使用JSON模块,实现异步的JSON编码和解码,使得在异步环境中更加高效。

总结:

本文深入探讨了Python中的JSON模块,从基础知识到高级应用,以及性能优化和与其他模块的集成,全面展示了JSON模块在实际开发中的重要性和灵活性。以下是本文的主要亮点:

  1. 基础知识概述: 文章以JSON的简介为切入点,详细介绍了Python中的json模块的基础函数和方法,包括序列化、反序列化等基本操作。

  2. 实战代码解析: 通过实际的代码示例,展示了JSON模块的基本使用,包括对象的序列化与反序列化、文件的读写操作,使读者能够快速上手使用JSON模块。

  3. 高级应用: 文章深入探讨了自定义JSON序列化与反序列化、异常处理与安全性考虑、性能优化等高级应用。通过自定义编码器、解码器以及异常处理等方式,读者可以更灵活地处理复杂的数据场景。

  4. 与其他模块的集成: 文章展示了JSON模块与Pandas、数据库等模块的集成,使得在处理数据时更加灵活,适应不同需求。

  5. JWT与异步支持: 文章介绍了JSON模块与JSON Web Token(JWT)的结合,以及在异步编程中的应用,展示了JSON模块在不同场景下的多样化使用。

  6. 总结与展望: 最后,文章对所学内容进行了总结,强调了JSON模块的重要性,并鼓励读者深入探索更多应用领域。

通过这篇文章,读者可以全面了解JSON模块的各种应用场景,从基础到高级,以及与其他模块的协同使用,为读者提供了丰富的知识和实用的技能,帮助其在实际项目中更加高效地处理和交换数据。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/706364.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

WinForms中的Timer探究:Form Timer与Thread Timer的差异

WinForms中的Timer探究:Form Timer与Thread Timer的差异 在Windows Forms(WinForms)应用程序开发中,定时器(Timer)是一个常用的组件,它允许我们执行定时任务,如界面更新、周期性数据…

Matlab 矩阵基础

Matlab 基础 MATLAB 是“矩阵实验室matrix laboratory”的缩写。其他编程语言大多一次处理一个数字,MATLAB 主要用于处理整个矩阵和数组。 所有 MATLAB 变量都是多维数组,无论数据类型如何。矩阵是常用于线性代数的二维数组。 若要创建一个包含单行中…

osi模型,tcp/ip模型(名字由来+各层介绍+中间设备介绍)

目录 网络协议如何分层 引入 osi模型 tcp/ip模型 引入 命名由来 介绍 物理层 数据链路层 网络层 传输层 应用层 中间设备 网络协议如何分层 引入 我们已经知道了网络协议是层状结构,接下来就来了解了解下网络协议如何分层 常见的网络协议分层模型是OSI模型 和 …

Flink CDC 3.0 Starrocks建表失败会导致任务卡主!

Flink CDC 3.0 Starrocks建表失败会导致任务卡主! 现象 StarRocks建表失败,然后任务自动重启,重启完毕后数据回放,jobMaster打印下面日志后,整个任务会卡主 There are already processing requests. Wait for proce…

windows 连接 Ubuntu 失败 -- samba服务

1. windows10连接ubuntu的时候,提示不允许一个用户使用一个以上用户名与服务器或共享资源的多重连接,中断与此服务器或共享资源的所有连接,然后再试一次 2. 换一台同事的电脑却又可以连上,我之前一直能用的,隔一段时间…

PostgreSQL创建数据库、数据库管理员用户、该库的只读用户

1.创建用户: create user pgdbAdmin with password "Pgdb_15432";2.创建数据库: create database pgdb owner pgdbAdmin;3.创建SCHEMA; create schema pgdbAdmin;4.赋予数据库管理员用户权限: grant all privileges…

UE5 C++ 单播 多播代理 动态多播代理

一. 代理机制,代理也叫做委托,其作用就是提供一种消息机制。 发送方 ,接收方 分别叫做 触发点和执行点。就是软件中的观察者模式的原理。 创建一个C Actor作为练习 二.单播代理 创建一个C Actor MyDeligateActor作为练习 在MyDeligateAc…

【蓝桥杯】包子凑数(DP)

一.题目描述 二.输入描述 三.输出描述 四.问题分析 几个两两互质的数,最大公约数是1,最小公倍数是他们的乘积。 两个互质的数a和b最小不能表示的数就是(a-1)(b-1)-1,即,两个互质的数…

uniapp_微信小程序日历

一、需求要求这样 二、代码实现 <view class"calender" click"showriliall"><text class"lineText">探视日期&#xff1a;</text><text class"middleText">{{timerili}}</text><image src"/s…

Ubuntu服务器fail2ban的使用

作用&#xff1a;限制ssh远程登录&#xff0c;防止被人爆破服务器&#xff0c;封禁登录ip 使用lastb命令可查看到登录失败的用户及ip&#xff0c;无时无刻的不在爆破服务器 目录 一、安装fail2ban 二&#xff0c;配置fail2ban封禁ip的规则 1&#xff0c;进入目录并创建ssh…

CVE-2024-0713 Monitorr 服务配置 upload.php 无限制上传漏洞

### Monitorr是一个自托管的PHP网络应用&#xff0c;可以监控本地和远程网络服务、网站和应用的状态。经过分析&#xff0c;该系统存在文件上传漏洞&#xff0c;攻击者可以通过该漏洞上传webshell至目标系统从而获取目标系统权限。 漏洞的位置在 assets\php\upload.php &#…

非阻塞式 I/O 模型的工作原理【NIO】-2

优化上一篇文上的代码。 import java.io.IOException; import java.net.InetSocketAddress; import java.nio.ByteBuffer; import java.nio.channels.*; import java.util.Iterator; import java.util.Set;public class NonBlockingServer {public static void main(String[] …

JG/T 263-2010 建筑门窗用未增塑聚氯乙烯彩色型材检测

建筑门窗用未增塑聚氯乙烯彩色型材是指以未增塑聚氯乙烯型材为基材&#xff0c;以共挤、覆膜、涂装、通体着色工艺加工的建筑门窗用型材。 JG/T 263-2010建筑门窗用未增塑聚氯乙烯彩色型材检测项目 测试项目 测试标准 外观与颜色 JG/T 263 尺寸和偏差 JG/T 263 共挤层厚…

【c++leetcode】1382. Balance a Binary Search Tree

问题入口 DSW (DAY, STOUT & WARREN) ALGORITHM 时间复杂度O(n) class Solution { public:int makeVine(TreeNode* grand, int cnt 0){auto n grand->right;while (n ! nullptr){if(n->left ! nullptr){auto old_n n;n n->left;old_n->left n->righ…

服务器如何使用https 自签证书

前言 在使用自签名证书&#xff08;Self-Signed Certificate&#xff09;配置 HTTPS 的情况下&#xff0c;您可以按照以下步骤进行操作。请注意&#xff0c;自签名证书在生产环境中可能不是最佳选择&#xff0c;因为它们不受任何第三方信任机构的验证。在生产环境中&#xff0…

力扣hot100题解(python版18-21题)

18、矩阵置零 给定一个 *m* x *n* 的矩阵&#xff0c;如果一个元素为 0 &#xff0c;则将其所在行和列的所有元素都设为 0 。请使用 原地 算法**。** 示例 1&#xff1a; 输入&#xff1a;matrix [[1,1,1],[1,0,1],[1,1,1]] 输出&#xff1a;[[1,0,1],[0,0,0],[1,0,1]]示例…

CSS常见选择器

CSS&#xff08;层叠样式表&#xff09;中包含了多种用于选择和定位HTML文档中元素的选择器&#xff0c;以便为这些元素应用样式。以下是CSS中常见的一些选择器及其详细解析&#xff1a; 1. 基础选择器 元素&#xff08;标签&#xff09;选择器&#xff1a; p {color: red; }这…

Stable Diffusion WebUI 折腾新篇章

原文&#xff1a;https://blog.iyatt.com/?p13123 1 前言 第一次玩 Stable Diffusion WebUI 是三十几天前&#xff0c;当时还在用四年半前&#xff08;大学前暑假&#xff09;买的轻薄本&#xff0c;而在半年前独显还坏了&#xff0c;所以是纯纯的用 CPU 折腾&#xff0c;刚…

【Android】View事件体系基础

文章目录 坐标系View滑动layout方法offserLeftAndRight() 和 offsetTopAndBottom()LayoutParams(布局参数)View动画scrollTo/scrollBy 解析Activity的构成 坐标系 分为Android坐标系和View坐标系 可以用 getWidth() 和 getHeight() 获取View自身的宽度和高度 对于ViewgetX() …

【c语言】内存函数

欢迎关注个人主页&#xff1a;逸狼 创造不易&#xff0c;可以点点赞吗~ 如有错误&#xff0c;欢迎指出~ 目录 memcpy函数的使用和模拟实现 memcpy函数的使用 memcpy函数的模拟实现 memmove的使用和模拟实现 memmove的使用 memmove的模拟实现 memset函数的使用 memcmp函数…