python中利用pickle模块保存格式化数据

有时候需要保存复杂的格式化的数据,比如保存一个字典,这就可以用pickle模块进行保存。

pickle模块简介

pickle模块是python专用的持久化模块,可以持久化保存包括自定义数据在内的各种数据,适合python本身复杂数据的保存

具体来说,pickle模块可以把python对象直接保存到文件里,而不需要先把它们转成字符串再保存。pickle模块会创建一个python语言专用的二进制格式,不需要使用者考虑任何文件细节,它会帮你完成读写对象操作。

主要用法介绍

主要有以下几种用法对文件进行读写操作。其中,dumps()和loads()操作的是bytes类型,而使用dump()和load()读写文件时,要使用rb或wb模式,也就是直接收bytes类型的数据。

1. pickle.dump(obj, file)

    将python数据转换并保存到pickle格式的文件内

import pickle with open('data.pickle', 'wb') as f:pickle.dump(data, f)f.close()

2. pickle.dumps(obj)

    将python数据转换为pickle格式的bytes字串

import pickledata = {'k1':'v1', 'k2':222}
s = pickle.dumps(data)
print(s)

3. pickle.load(file)

    从pickle格式的文件种读取数据并转换为python的类型

import picklewith open('data.pickle', 'rb') as f:data = pickle.load(f)f.close()

4. pickle.loads(bytes_object)

    将pickle格式的bytes字串转换为python的类型

import pickledata = {'k1':'v1', 'k2':222}
s = pickle.dumps(data)
data2 = pickle.loads(s)

注意:上述保存的文件的后缀随意,可以是'.pkl',也可以是'.pickle'

实例应用

在实际应用中,比如需要将所有的音素进行编号,进行音素和id之间的一一对应,这就可以用pickle模块,保存一个mapping.pkl文件

import picklewith open('config/english_mapping.pkl', 'rb') as fp:phn2idx = pickle.load(fp)fp.close()'''{'<sos>': 0, '<eos>': 1, 'a': 2, 'aa': 3, 'aa1': 4, 'aa2': 5, 'aa3': 6, 'aa4': 7, 'aa5': 8, 'aa6': 9, 'b': 10, 'c': 11, 'd': 12, 'e': 13, 'e1': 14, 'e2': 15, 'e3': 16, 'e4': 17, 'e5': 18, 'e6': 19, 'eo': 20, 'f': 21, 'g': 22, 'gw': 23, 'h': 24, 'i': 25, 'i1': 26, 'i2': 27, 'i3': 28, 'i4': 29, 'i5': 30, 'i6': 31, 'j': 32, 'k': 33, 'k1': 34, 'k2': 35, 'k3': 36, 'k4': 37, 'k5': 38, 'k6': 39, 'kw': 40, 'l': 41, 'm': 42, 'm1': 43, 'm2': 44, 'm3': 45, 'm4': 46, 'm5': 47, 'm6': 48, 'n': 49, 'n1': 50, 'n2': 51, 'n3': 52, 'n4': 53, 'n5': 54, 'n6': 55, 'ng': 56, 'ng1': 57, 'ng2': 58, 'ng3': 59, 'ng4': 60, 'ng5': 61, 'ng6': 62, 'o': 63, 'o1': 64, 'o2': 65, 'o3': 66, 'o4': 67, 'o5': 68, 'o6': 69, 'oe': 70, 'oe1': 71, 'oe2': 72, 'oe3': 73, 'oe4': 74, 'oe5': 75, 'p': 76, 'p1': 77, 'p2': 78, 'p3': 79, 'p6': 80, 's': 81, 'sil': 82, 't': 83, 't1': 84, 't2': 85, 't3': 86, 't6': 87, 'u': 88, 'u1': 89, 'u2': 90, 'u3': 91, 'u4': 92, 'u5': 93, 'u6': 94, 'w': 95, 'yu': 96, 'yu1': 97, 'yu2': 98, 'yu3': 99, 'yu4': 100, 'yu5': 101, 'yu6': 102, 'z': 103}'''

参考:

 一文带你搞懂Python中pickle模块 - 知乎 (zhihu.com)

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/bicheng/49443.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

Error和Exception区别

Error类型的错误通常为虚拟机相关错误,如系统崩溃,内存不足,堆栈溢出等,编译器不会对这类错误进行检测,JAVA应用程序也不对这类错误进行捕获,一旦这类错误发生,通常应用程序会被终止,仅靠应用程序本身无法恢复; Exception 类的错误是可以在应用程序中进行捕获并处理的…

数学建模(6)——预测类模型目录

预测模型是一类通过分析和建模历史数据来预测未来结果的算法或模型。这些模型广泛应用于各种领域&#xff0c;包括金融、医疗、市场营销、气象、制造业等。以下是一些常见的预测模型&#xff1a; 1. 回归模型 线性回归&#xff08;Linear Regression&#xff09;&#xff1a;…

好用的电脑屏幕监控软件推荐,什么软件能够监控电脑?

在当今信息化时代&#xff0c;电脑屏幕监控软件成为了企业管理、家长监管以及教育培训等领域的必备工具。通过实时监控电脑屏幕&#xff0c;这类软件可以有效提高工作效率&#xff0c;防止信息泄露&#xff0c;保障网络安全。本文将详细盘点几款主流的电脑屏幕监控软件&#xf…

Linux shell编程学习笔记66:ping命令 超详细的选项说明

0 前言 网络信息是电脑网络信息安全检查中的一块重要内容&#xff0c;Linux和基于Linux的操作系统&#xff0c;提供了很多的网络命令&#xff0c;今天我们研究最常用的ping命令。 1 ping命令 的功能、格式和选项说明 1.1 ping命令 的功能 简单来说&#xff0c; ping 命令 会…

全网最适合入门的面向对象编程教程:23 类和对象的 Python 实现-抛出异常

全网最适合入门的面向对象编程教程&#xff1a;23 类和对象的 Python 实现-抛出异常 摘要&#xff1a; 本文主要介绍了在使用Python面向对象编程时&#xff0c;抛出异常的应用场景、raise语句的使用方法和raise语句语法格式&#xff0c;并举出相应示例辅助讲解。 原文链接&am…

数据结构从入门到精通二 ~ 数组和链表

1. 前言 在计算机科学和软件工程领域&#xff0c;数据结构是指在计算机中组织和存储数据的方式&#xff0c;数组和链表是其中最基础也是最常用的两种数据结构之一。 数组&#xff08;Array&#xff09;&#xff1a;是一种线性表数据结构&#xff0c;它使用连续的内存空间来存储…

【PyTorch】图像二分类项目

【PyTorch】图像二分类项目 【PyTorch】图像二分类项目-部署 【PyTorch】图像多分类项目 【PyTorch】图像多分类项目部署 图像分类是计算机视觉中的一项重要任务。在此任务中&#xff0c;我们假设每张图像只包含一个主对象。在这里&#xff0c;我们的目标是对主要对象进行分类。…

【环境搭建】使用openSfM+MVSNet重建稠密点云

本帖详细介绍了如何使用openSfM+MVSNet对真实采集的数据进行稀疏重建与稠密重建,并针对一些真实场景下可能遇到的问题进行了整理。 目录 1. 背景2. 数据采集3. 使用openSfM进行稀疏重建3.1 输入文件3.2 稀疏重建4. 使用MVSNet进行稠密重建5. Q&A:为什么我的重建效果不好…

检索增强生成Retrieval-Augmented Generation(RAG)简介

检索增强生成Retrieval-Augmented Generation&#xff08;RAG&#xff09;简介 引言 在自然语言处理领域&#xff0c;生成式任务&#xff08;如文本生成、机器翻译等&#xff09;一直备受关注。传统的生成模型如GPT、BERT等虽然取得了显著成果&#xff0c;但在处理长文本、知…

C#数组复习

一、一维数组 using System.Collections; using System.Collections.Generic; using UnityEngine;public class ShuZu : MonoBehaviour {#region 知识点一 基本概念//数组是存储一组相同类型数据的集合//数组分为 一维、二维、交错数组//一般情况 一维数组 就简称为数组#en…

ACE之Proactor框架

简介 Proactor使用的是异步io&#xff0c;其实现与Reactor相似&#xff0c;也使用桥接模式 组成 #mermaid-svg-QFvK6qGqdiFGE0Le {font-family:"trebuchet ms",verdana,arial,sans-serif;font-size:16px;fill:#333;}#mermaid-svg-QFvK6qGqdiFGE0Le .error-icon{fil…

OpenAI从GPT-4V到GPT-4O,再到GPT-4OMini简介

OpenAI从GPT-4V到GPT-4O&#xff0c;再到GPT-4OMini简介 一、引言 在人工智能领域&#xff0c;OpenAI的GPT系列模型一直是自然语言处理的标杆。随着技术的不断进步&#xff0c;OpenAI推出了多个版本的GPT模型&#xff0c;包括视觉增强的GPT-4V&#xff08;GPT-4 with Vision&…

PeRF: Preemption-enabled RDMA Framework——论文泛读

ATC 2024 Paper 论文阅读笔记整理 问题 远程直接内存访问&#xff08;RDMA&#xff09;为数据密集型应用程序提供了高吞吐量、低延迟和最小的CPU使用率。各种数据密集型应用程序&#xff0c;如大数据分析[4,5]、机器学习[2,11,15,33]、分布式存储[21,27,28,41]和键值存储[20,…

Maven Release Plugin 的具体用法

Maven Release Plugin&#xff08;Maven 发布插件&#xff09;是一个用于帮助在Maven项目中执行版本发布流程的插件。它的主要功能是简化项目版本的发布和管理&#xff0c;确保版本号的正确性&#xff0c;并自动处理与版本发布相关的任务。以下是Maven Release Plugin的具体用法…

[用AI日进斗金系列]用码上飞在企微接单开发一个项目管理系统!

今天是【日进斗金】系列的第二期文章。 先给不了解这个系列的朋友们介绍一下&#xff0c;在这个系列的文章中&#xff0c;我们将会在企微的工作台的“需求发布页面”中寻找有软件开发需求的用户 并通过自研的L4级自动化智能软件开发平台「码上飞CodeFlying」让AI生成应用以解…

基于面向对象重构模型训练器

引言 深度学习领域我们常用jupyter来演练代码&#xff0c;但实际生产环境中不可能像jupyter一样&#xff0c;所有代码逻辑都在面向过程编程&#xff0c;这会导致代码可复用性差&#xff0c;维护难度高。 前面这篇文章 基于pytorch可视化重学线性回归模型 已经封装了数据加载器…

代理模式详解

1.代理模式的作用 能通过代理对象间接实现对目标对象的访问&#xff0c;在不改变源代码的情况下对目标对象的方法进行增强。 什么是通过代理对象间接实现对目标对象的访问? 举个生活中的例子:例如你买车是通过4s店(代理对象)&#xff0c;而不是直接去车工厂(目标对象)&#…

leetcode 116. 填充每个节点的下一个右侧节点指针

leetcode 116. 填充每个节点的下一个右侧节点指针 题目 给定一个 完美二叉树 &#xff0c;其所有叶子节点都在同一层&#xff0c;每个父节点都有两个子节点。二叉树定义如下&#xff1a; struct Node { int val; Node *left; Node *right; Node *next; } 填充它的每个 next …

QT 关于QTableWidget的常规使用

目录 一、初始化 二、封装功能用法 三、结语 一、初始化 1、设置表头 直接在ui设计界面修改或者使用QT封装的函数修改&#xff0c;代码如下&#xff1a; QStringList recList {"第一列", "第二列", "第三列"}; ui->tableWidget->setH…

STM32 智能家居自动化控制系统教程

目录 引言环境准备智能家居自动化控制系统基础代码实现&#xff1a;实现智能家居自动化控制系统 4.1 数据采集模块 4.2 数据处理与控制模块 4.3 通信与网络系统实现 4.4 用户界面与数据可视化应用场景&#xff1a;家居控制与优化问题解决方案与优化收尾与总结 1. 引言 智能家…