python全栈开发-json和pickle模块(数据的序列化)

一、什么是序列化?

  我们把对象(变量)从内存中变成可存储或传输的过程称之为序列化,在Python中叫pickling,在其他语言中也被称之为serialization,marshalling,flattening等等,都是一个意思。

  为什么要序列化?

  1、持久保存状态

  需知一个软件/程序的执行就在处理一系列状态的变化,在编程语言中,'状态'会以各种各样有结构的数据类型(也可简单的理解为变量)的形式被保存在内存中。

内存是无法永久保存数据的,当程序运行了一段时间,我们断电或者重启程序,内存中关于这个程序的之前一段时间的数据(有结构)都被清空了。

在断电或重启程序之前将程序当前内存中所有的数据都保存下来(保存到文件中),以便于下次程序执行能够从文件中载入之前的数据,然后继续执行,这就是序列化。

具体的来说,如,虚拟机状态的挂起等。

  2、跨平台数据交互

序列化之后,不仅可以把序列化后的内容写入磁盘,还可以通过网络传输到别的机器上,如果收发的双方约定好实用一种序列化的格式,那么便打破了平台/语言差异化带来的限制,实现了跨平台数据交互。

反过来,把变量内容从序列化的对象重新读到内存里称之为反序列化,即unpickling。

  如果我们要在不同的编程语言之间传递对象,就必须把对象序列化为标准格式,比如XML,但更好的方法是序列化为JSON,因为JSON表示出来就是一个字符串,可以被所有语言读取,也可以方便地存储到磁盘或者通过网络传输。JSON不仅是标准格式,并且比XML更快,而且可以直接在Web页面中读取,非常方便。

JSON表示的对象就是标准的JavaScript语言的对象,JSON和Python内置的数据类型对应如下:

二、json序列化

1、dumps序列化和loads反序列化

dumps()序列化 

import  json   #导入json模块

info = {'name':"qianduoduo","age":22,
}
with open("test.json","w") as f:  #以普通模式写入
f.write(json.dumps(info)) #把内存对象转为字符串
#写到文件中  
#test.json文件中的内容
{"name": "qianduoduo", "age": 22}

loads()反序列化

import json   #导入json模块
 
with open("test.json","r") as f:  #以普通模式读
data = json.loads(f.read())   #用loads反序列化
print(data["age"])     #date.get("age")   一样的
#输出
22

2、dump序列化和load反序列化

dump()序列化

import  jsoninfo = {'name':"qianduoduo","age":22
}
with open("test.json","w") as f:   #文件以写的方式打开json.dump(info,f)    #第1个参数是内存的数据对象 ,第2个参数是文件句柄
#test.json文件中的内容
{"name": "qianduoduo", "age": 22}

 load()反序列化

import jsonwith open("text.txt","r") as f:   #以读的方式打开文件data = json.load(f)  #输入文件对象
print(data.get("age"))   #date["age"]
#输出
22

3、序列化函数(不支持的,直接报错)

总结:

  1、dumps和loads是成对使用的,dump和load是成对使用的。

  2、dumps和loads由于序列化的是内容,所以后面要加s,但是dump和load序列化的内容是对象,所以单数。

  3、json只能处理简单的数据类型,例如:字典、列表、字符串等,不能处理函数等复杂的数据类型。

  为什么不能处理复杂的因为python 和别的语言定义函数,类完全不一样,特性也不一样

  4、json是所有语言通用的,所有语言都支持json,如果我们需要python跟其他语言进行数据交互,那么就用json格式。

三、pickle序列化

1、dumps序列化和loads反序列化

dumps()序列化

import pickleinfo = {'name':"qianduoduo","age":22,
} 
with open("test.json","wb") as f:   #以二进制的形式写入data = pickle.dumps(info)   #序列化成字符串f.write(data)   #写入text.txt 文件中
#输出到test.json文件中的内容   我们看不懂的二级制
�}q (X   nameqX
qianduoduoqX   ageqKu.

loads()反序列化

import picklewith open("text.txt","rb") as f: #以二进制的模式读data = pickle.loads(f.read())   #反序列化操作
print(data.get("age"))    #date["age"]  是一样的
#输出
22

2、dump序列化和load反序列化

dump()序列化

import pickleinfo = {'name':"qianduoduo","age":22,
}
with open("text.txt","wb") as f:pickle.dump(info,f)  #序列化
#输出
�}q (X   nameqX
qianduoduoqX   ageqKu.

load()反序列化

import picklewith open("text.txt","rb") as f:data = pickle.load(f)  #反序列化成内存对象
print(data.get("age"))     #or   date["age"]  一样的
#输出
22

3、序列化函数

序列化

import pickledef sayhi(name):   #函数print("hello:",name)
info = {'name':"duoduo","age":22,"func":sayhi    #"func"对应的值sayhi,是函数名  如果sayhi加()就执行这个函数
}
with open("test.json","wb") as f:data = pickle.dumps(info)f.write(data)
#输出test.json
�}q (X   nameqX
qianduoduoqX   ageqKX   funcqc__main__
sayhi

反序列化

import pickledef sayhi(name):   #在反序列化中必须写上此函数,不然会报错,因为在加载的时候,函数没有加载到内存print("hello:",name)with open("test.json","rb") as f:data = pickle.loads(f.read())print(data["age"])
data.get("func")("qianduoduo")  #执行函数sayhi
#输出
22
hello: qianduoduo   #输出的函数体中的逻辑也是可以变的,但是函数名必须要相同,这又是要注意的地方

 小结:

  1、json值支持简单的数据类型,pickle支持python所有的数据类型。

  2、pickle只能支持python本身的序列化和反序列化,不能用作和其他语言做数据交互,而json可以。

  3、pickle序列化的是整个的数据对象,所以反序列化函数时,函数体中的逻辑变了,是跟着新的函数体逻辑。

  4、pickle和json在3.0中只能dump一次和load一次,dump在2.7里面可以dump多次,load多次,anyway,以后只记住,只需要dump一次,load一次就可以了。

    Pickle的问题和所有其他编程语言特有的序列化问题一样,就是它只能用于Python,并且可能不同版本的Python彼此都不兼容,因此,只能用Pickle保存那些不重要的数据,不能成功地反序列化也没关系。

转载于:https://www.cnblogs.com/ManyQian/p/8733209.html

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/250601.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

Gale-Shapley---婚姻匹配算法算法

原文链接:http://blog.csdn.net/cscmaker/article/details/8291131 (一)问题的引出: 有N男N女,每个人都按照他对异性的喜欢程度排名。现在需要写出一个算法安排这N个男的、N个女的结婚,要求两个人的婚姻应该…

大数据排重

注意用来排重的那个集合放到Set中, 可以是HashSet,或者其他Set(推荐使用HashSet),因为Set的contains效率更高,比list高很多 -----------------------------------------------------------------------------------------------------------------------…

大前端成长路径

路径(持续更新): 以下是我不同时期的博客链接可以和我的GitHub共同食用大家可以对比一下,我学的过程是缓慢型的… learning: 0个月 2018年09月开始接触前端,前端三剑客一个不知道一个不懂,于是对着W3C、菜鸟教程.一个一个敲开始啃红宝书《JavaScript高级程序设计》(第3版) le…

工具:meson+ninja(安装问题解决)

问题1:Python版本问题 报错信息: NOTICE: You are using Python 3.6 which is EOL. Starting with v0.62.0, Meson will require Python 3.7 or newer ubuntu 18默认的python3是3.6. 解决方案1:从源码安装python 3.7 wget https://www.pyth…

ListMapSet的操作和遍历

List&Map&Set的操作和遍历 Java的三大集合即:Set、List、Map。 Set:代表无序、不可重复的集合,常用的有HashSet(哈希表实现)、TreeSet(红黑树实现);List:代表有序…

PHP中的魔术方法

概述 在面向对象编程中,PHP提供了一系列的魔术方法,这些魔术方法为编程提供了很多便利。PHP中的魔术方法通常以__(两个下划线)开始,并且不需要显示的调用而是由某种特定的条件出发。这篇文章简单总结了PHP中提供的魔术方法。 开始之前 在总结…

执行caffe的draw_net.py出现“GraphViz's executable dot not found”的解决方法

执行caffe的draw_net.py出现“GraphVizs executable "dot" not found”的解决方法 控制台输入如下指令画网络图:python ../../../python/draw_net.py train.prototxt train.png --rankdirTB (Top-Bottom形式,纵向图)pyt…

配置 --- vscode自定义代码段Snippets

目标 在vscode中输入vbs-vue 然后产生一个自己想要的模板 写好模板 在线上写好模板传送门: https://snippet-generator.app/ 1是标题,对应 2是前缀.对应在vue中使用的快捷键 vbs-vue3就是需要显示的代码段了 在vscode中配置 1.ctrlshiftp2.选择 Preferences: Configure U…

centos6安装composer

需要使用到curl,没有的话需要 yum -y install curl ###安装一、下载:curl -sS https://getcomposer.org/installer | php (如果是网络原因多试几次) 二、移动composer.phar移动到环境下让其变成可执行:mv compose…

透明图与元素居中

1,定位让元素居中 1. 透明度 opacity 默认值是1 不透明 0是全透明转载于:https://www.cnblogs.com/Shinigami/p/9709382.html

配置 --- vscode中react格式化解决方案

选择右下角的语言 在弹出框搜react选择 JavaScript React(或者根据需求选择 TypeScript React) 快捷键, windows下 Alt SHIFT F

【商城购物车】购物车逻辑

转载于:https://www.cnblogs.com/xuzhengzong/p/8746677.html

PHP递归实现无限极分类

PHP递归实现无限极分类 摘要 今天在编码的时候要用到二级的栏目分类,所以顺便就把无限极分类给整理了一下,采用的是递归方法 //实现无限级分类public function getTree(){$categorys Category::all();return $this->makeTree($categorys, cate_id,…

IO NIO

1,Java NIO Java non-blocking IO 即 非阻塞IO,线程在等待的时候,可以做其他的事情。 2,IO 对比NIO IO 是面向流,NIO 是面向缓冲 面向流是指每次从流中读出一个或者多个字节,直到全部读出为止 面向缓冲区是指将数据先存到一个缓存区 IO 是阻…

react --- 生命周期 给子组件传递数据

子组件 /src/components/LifeCycle.js import React, { Component } from reactexport class LifeCycle extends Component {constructor(props) {super(props);// 常用于初始化状态(状态初始化、属性初始化)console.log("1.组件构建函数执行");}componentWillMoun…

Vue---mock.js 使用

mockjs 概述 在我们的生产实际中,后端的接口往往是较晚才会出来,并且还要写接口文档,于是我们的前端的许多开发都要等到接口给我们才能进行,这样对于我们前端来说显得十分的被动,于是有没有可以制造假数据来模拟后端接…

Java 的抽象类

Java 的抽象类 用abstract关键字来修饰一个类时,这个类叫做抽象类;用abstract来修饰一个方法时,该方法叫做抽象方法。 抽象方法:只有方法的声明,没有方法的实现。以分号结束:abstract int abstractMethod…

react --- 按需加载组件

问题描述 使用 antd库时使用按钮,须导入如下 import Button from antd/lib/button import antd/dist/antd.css这样会导入全局的样式. 解决方案,配置按需加载 1.安装 react-app-rewired取代 react-scripts, 可以扩展webapack 的配置, 类似vue.config.jsnpm install react-ap…

flask 实现异步非阻塞----gevent

我们都知道,flask不支持异步非阻塞的请求,我们可以创建一个新项目去测试一下,推荐大家使用pycharm去开发我们的flask 使用特别的方便。 rom flask import Flask import time app Flask(__name__) app.route(/) def hello_world():time.slee…

Axure下拉框级联操作

现实生活中有很多的下拉框是级联操作的,即因为第一个下拉框的选择,影响到后面的下拉框的选择的列表的数据。或许在代码中,这些操作相对比较简单,通过前一个下拉框的选择项来控制后一个下拉框的数据的动态添加。那么,如…