python全栈开发-json和pickle模块(数据的序列化)

2018-06-18 02:15:51来源:未知 阅读 ()

新老客户大回馈,云服务器低至5折

一、什么是序列化?

  我们把对象(变量)从内存中变成可存储或传输的过程称之为序列化,在Python中叫pickling,在其他语言中也被称之为serialization,marshalling,flattening等等,都是一个意思。

  为什么要序列化?

  1、持久保存状态

  需知一个软件/程序的执行就在处理一系列状态的变化,在编程语言中,'状态'会以各种各样有结构的数据类型(也可简单的理解为变量)的形式被保存在内存中。

内存是无法永久保存数据的,当程序运行了一段时间,我们断电或者重启程序,内存中关于这个程序的之前一段时间的数据(有结构)都被清空了。

在断电或重启程序之前将程序当前内存中所有的数据都保存下来(保存到文件中),以便于下次程序执行能够从文件中载入之前的数据,然后继续执行,这就是序列化。

具体的来说,如,虚拟机状态的挂起等。

  2、跨平台数据交互

序列化之后,不仅可以把序列化后的内容写入磁盘,还可以通过网络传输到别的机器上,如果收发的双方约定好实用一种序列化的格式,那么便打破了平台/语言差异化带来的限制,实现了跨平台数据交互。

反过来,把变量内容从序列化的对象重新读到内存里称之为反序列化,即unpickling。

  如果我们要在不同的编程语言之间传递对象,就必须把对象序列化为标准格式,比如XML,但更好的方法是序列化为JSON,因为JSON表示出来就是一个字符串,可以被所有语言读取,也可以方便地存储到磁盘或者通过网络传输。JSON不仅是标准格式,并且比XML更快,而且可以直接在Web页面中读取,非常方便。

JSON表示的对象就是标准的JavaScript语言的对象,JSON和Python内置的数据类型对应如下:

二、json序列化

1、dumps序列化和loads反序列化

dumps()序列化 

import  json   #导入json模块

info = {
     'name':"qianduoduo",
     "age":22,
}
with open("test.json","w") as f:  #以普通模式写入
f.write(json.dumps(info)) #把内存对象转为字符串
#写到文件中  
#test.json文件中的内容
{"name": "qianduoduo", "age": 22}

loads()反序列化

import json   #导入json模块
 
with open("test.json","r") as f:  #以普通模式读
data = json.loads(f.read())   #用loads反序列化
print(data["age"])     #date.get("age")   一样的
#输出
22

2、dump序列化和load反序列化

dump()序列化

import  json
 
info = {
    'name':"qianduoduo",
     "age":22
}
with open("test.json","w") as f:   #文件以写的方式打开
  json.dump(info,f)    #第1个参数是内存的数据对象 ,第2个参数是文件句柄
#test.json文件中的内容
{"name": "qianduoduo", "age": 22}

 load()反序列化

import json
 
with open("text.txt","r") as f:   #以读的方式打开文件
  data = json.load(f)  #输入文件对象
print(data.get("age"))   #date["age"]
#输出
22

3、序列化函数(不支持的,直接报错)

总结:

  1、dumps和loads是成对使用的,dump和load是成对使用的。

  2、dumps和loads由于序列化的是内容,所以后面要加s,但是dump和load序列化的内容是对象,所以单数。

  3、json只能处理简单的数据类型,例如:字典、列表、字符串等,不能处理函数等复杂的数据类型。

  为什么不能处理复杂的因为python 和别的语言定义函数,类完全不一样,特性也不一样

  4、json是所有语言通用的,所有语言都支持json,如果我们需要python跟其他语言进行数据交互,那么就用json格式。

三、pickle序列化

1、dumps序列化和loads反序列化

dumps()序列化

import pickle
 
info = {
    'name':"qianduoduo",
    "age":22,
} 
with open("test.json","wb") as f:   #以二进制的形式写入
  data = pickle.dumps(info)   #序列化成字符串
  f.write(data)   #写入text.txt 文件中
#输出到test.json文件中的内容   我们看不懂的二级制
?}q (X   nameqX
qianduoduoqX   ageqKu.

loads()反序列化

import pickle

with open("text.txt","rb") as f: #以二进制的模式读
  data = pickle.loads(f.read())   #反序列化操作
print(data.get("age"))    #date["age"]  是一样的
#输出
22

2、dump序列化和load反序列化

dump()序列化

import pickle

info = {
    'name':"qianduoduo",
    "age":22,
}
with open("text.txt","wb") as f:
  pickle.dump(info,f)  #序列化
#输出
?}q (X   nameqX
qianduoduoqX   ageqKu.

load()反序列化

import pickle

with open("text.txt","rb") as f:
  data = pickle.load(f)  #反序列化成内存对象
print(data.get("age"))     #or   date["age"]  一样的
#输出
22

3、序列化函数

序列化

import pickle

def sayhi(name):   #函数
  print("hello:",name)
info = {
   'name':"duoduo",
   "age":22,
   "func":sayhi    #"func"对应的值sayhi,是函数名  如果sayhi加()就执行这个函数
}
with open("test.json","wb") as f:
  data = pickle.dumps(info)
  f.write(data)
#输出test.json
?}q (X   nameqX
qianduoduoqX   ageqKX   funcqc__main__
sayhi

反序列化

import pickle

def sayhi(name):   #在反序列化中必须写上此函数,不然会报错,因为在加载的时候,函数没有加载到内存
  print("hello:",name)

with open("test.json","rb") as f:
  data = pickle.loads(f.read())
  print(data["age"])
data.get("func")("qianduoduo")  #执行函数sayhi
#输出
22
hello: qianduoduo   #输出的函数体中的逻辑也是可以变的,但是函数名必须要相同,这又是要注意的地方

 小结:

  1、json值支持简单的数据类型,pickle支持python所有的数据类型。

  2、pickle只能支持python本身的序列化和反序列化,不能用作和其他语言做数据交互,而json可以。

  3、pickle序列化的是整个的数据对象,所以反序列化函数时,函数体中的逻辑变了,是跟着新的函数体逻辑。

  4、pickle和json在3.0中只能dump一次和load一次,dump在2.7里面可以dump多次,load多次,anyway,以后只记住,只需要dump一次,load一次就可以了。

    Pickle的问题和所有其他编程语言特有的序列化问题一样,就是它只能用于Python,并且可能不同版本的Python彼此都不兼容,因此,只能用Pickle保存那些不重要的数据,不能成功地反序列化也没关系。

 

标签:

版权申明:本站文章部分自网络,如有侵权,请联系:west999com@outlook.com
特别注意:本站所有转载文章言论不代表本站观点,本站所提供的摄影照片,插画,设计作品,如需使用,请与原作者联系,版权归原作者所有

上一篇:Python爬虫学习==>第九章:正则表达式基础

下一篇:python 定时修改数据库