最近在做一个CNN的项目，文件夹里有20w张图片要读入并保存到一个data文件（不然每次都读20w文件太麻烦）。 折腾了一个下午，发现了一个极好用的包 h5py：将数据储存在hdf5文件中。 这东西有多好用呢？ 速度，内存占用，压缩程度都比cPickle+gzip来的优秀。 相比之下上面两个变逗比了 ...
分类：
编程语言 时间：
2017-10-01 20:37:42
阅读次数：
565
Python序列化的概念很简单。内存里面有一个数据结构，你希望将它保存下来，重用，或者发送给其他人。你会怎么做？这取决于你想要怎么保存，怎么重用，发送给谁。很多游戏允许你在退出的时候保存进度，然后你再次启动的时候回到上次退出的地方。（实际上，很多非游戏程序也会这..
分类：
编程语言 时间：
2017-08-01 14:31:03
阅读次数：
135
#!/usr/bin/python# -*- coding: UTF-8 -*-# @date: 2017/7/22 23:41 # @name: Python_learn# @author：vickey-wuimport osimport jsontry: import cPickle as pi ...
分类：
编程语言 时间：
2017-07-23 09:57:52
阅读次数：
129
Output RESTART: /Users/zhouxin/Desktop/cPickle.py {'Xiaopeng Yang': (18000001219L, '18700000019@139.com')}>>> It also creates AddressList.data. About ...
分类：
其他好文 时间：
2017-06-30 17:11:11
阅读次数：
180
除了cPickle,cjson外还有没有更高效点的序列化库了 http://blog.csdn.net/chen_lovelotus/article/details/7228745 msgpack最快，而且是跨语言的,二进制,但只能打包简单的list,dict,int,string,unicode， ...
分类：
Web程序 时间：
2017-04-10 00:53:06
阅读次数：
271
在之前对Python对象的介绍中 (面向对象的基本概念，面向对象的进一步拓展)，我提到过Python“一切皆对象”的哲学，在Python中，无论是变量还是函数，都是一个对象。当Python运行时，对象存储在内存中，随时等待系统的调用。然而，内存里的数据会随着计算机关机和消失，如何将对象保存到文件，并 ...
分类：
编程语言 时间：
2017-04-09 22:43:47
阅读次数：
440
>>> import cPickle as pickle >>> t1 = ('this is a string', 42, [1, 2, 3], None) >>> t1 ('this is a string', 42, [1, 2, 3], None) >> ...
分类：
编程语言 时间：
2017-01-21 22:27:16
阅读次数：
278
目标： 1.使用序列化cPickle 2.账户中钱要大于花费的钱，否则提示请存钱 2.编写函数，实现存钱，花钱，查询及退出功能 1.序列化 pickle是python实现序列化的模块，次模块存在使用C语言编写模块，用法相同，但执行效率更高，所以优先使用C模块编写的序列化模块cPickle。 2.编写 ...
分类：
编程语言 时间：
2017-01-06 22:17:38
阅读次数：
566
作者：Vamei 出处：http://www.cnblogs.com/vamei 欢迎转载，也请保留这段声明。谢谢！ 谢谢reverland纠错 在之前对Python对象的介绍中 (面向对象的基本概念，面向对象的进一步拓展)，我提到过Python“一切皆对象”的哲学，在Python中，无论是变量还是 ...
分类：
编程语言 时间：
2016-12-24 20:15:55
阅读次数：
157
使用python 的cPickle 库中的load函数，可以读取pkl文件的内容 上述代码有时会出现EOFError错误 此时将代码更改为一下形式即可解决（就是将前两行代码合成一行就行了） 以mnist为例，inf的类型为元祖tuple，他又包含了三个元祖，分别对应训练集，验证集，测试集。每个元祖中 ...
分类：
编程语言 时间：
2016-08-24 13:07:54
阅读次数：
3198
