DT大数据梦工厂联系方式:新浪微博:www.weibo.com/ilovepains/微信公众号:DT_Spark博客:http://.blog.sina.com.cn/ilovepains一:sparkSQL 下的Parquet意义再思考存储空间包括:内存和磁盘,计算方面如果说HDFS是大数据时代分布式文件系统存储的事实标准的话,parquet则是整个大数据时代文件存储格式的事实标准。1、 速度...
分类:
数据库 时间:
2016-05-13 02:00:33
阅读次数:
275
mysql各种存储引擎(一)mysql各种存储引擎一
MyISAM
MyISAM文件格式
MyISAM文件修复
MyISAM表的存储格式
Innodb存储引擎
支持事物
自动增长列
外键约束
存储结构MyISAMMyISAM文件格式
frm文件 存储表的结构定义数据
MYD文件 具体的数据文件
MYI文件 表索引文件 myISAM存储引擎只缓存索引,对数据文件采用操作系统缓存,如果索引数据超过系统...
分类:
数据库 时间:
2016-05-12 18:00:19
阅读次数:
162
YUV格式,从输入源端理解,对应码流的采样格式,主要的采样格式有YCbCr 4:2:0、YCbCr 4:2:2、YCbCr 4:1:1和 YCbCr 4:4:4等;
从输出端理解,可以理解为解码后视频数据在解码器内存中的组织布局。
YUV码流的存储格式其实与其采样的方式密切相关.
YUV格式有三大类:planar,semi-planar 和packed。
(1) planar(平面)格式...
分类:
其他好文 时间:
2016-05-12 13:16:59
阅读次数:
469
protobuf是由Google开发的一套对数据结构进行序列化的方法,可用做通信协议,数据存储格式,等等。其特点是不限语言、不限平台、扩展性强
Netty也提供了对Protobuf的天然支持,我们今天就写一个简单的示例,简单地了解一下Netty对Google的protoBuf的支持
我们的示例场景很简单的:客户端发送一个信息,这个信息用Protobuf来做序列化,然后服务器端接...
分类:
Web程序 时间:
2016-05-12 11:38:43
阅读次数:
281
一、JSON格式化 1. JSON是什么 JSON是一种数据的存储格式,用来沟通客户端Javascript和服务端PHP的交互。我们把用PHP生成JSON后的字符串传给前台Javascript,Javascirpt就可以很容易的将其反JSON然后应用。 2. 如何使用JSON PHP操作JSON可以 ...
分类:
Web程序 时间:
2016-05-11 15:04:25
阅读次数:
231
实际项目数据存储往往会用到相对复杂的存储格式,不仅仅是简单的字符串,本章学习的是如何在程序中使用成熟的数据格式,如Json,xml等来实现与程序业务相关的数据存储。 一、json数据序列化存储 json全程JavaScript Object Notation ,是一种轻量级的数据交换语言,易于阅读。 ...
分类:
Web程序 时间:
2016-05-11 13:16:13
阅读次数:
200
使用方便性。实际上,一个成熟的工程中一定是对数据持久化进行了封装的,因此底层使用的到底是core data还是sqlite,不应该被业务逻辑开发者关心。因此,即使习惯写SQL查询的人,也应该避免在业务逻辑中直接编写SQL语句。 存储性能,在写入性能上,因为都是使用的sqlite格式作为磁盘存储格式, ...
分类:
数据库 时间:
2016-05-06 21:41:48
阅读次数:
438
在 php 中使用 json_encode() 内置函数(php > 5.2)可以使用得 php 中数据可以与其它语言很好的传递并且使用它。这个函数的功能是将数值转换成json数据存储格式。01 <?php02 $arr = array03 (04 'Name'=>'希亚',05 'Age'=>20 ...
分类:
Web程序 时间:
2016-05-04 06:33:11
阅读次数:
195
浅尝key-value数据库(二)——MongoDB的优与劣 浅尝key-value数据库(二)——MongoDB的优与劣 MongoDB的名字取自英文单词"humongous"的中间五个字母,是一个C++开发的基于分布式文件存储的数据库开源项目。他的文件存储格式是BSON(Binary JSON) ...
分类:
数据库 时间:
2016-04-30 06:33:50
阅读次数:
249
protobuf是什么
protobuf,全称Google protocol buffer,Google公司内部的混合语言数据标准,用于RPC系统和持续数据存储系统
它是一种轻便高效的结构化数据存储格式,可以用于结构化数据串行化,或者说序列化,适合做数据存储或RPC数据交换格式,可用于通讯协议、数据存储等领域的语言无关、平台无关、可扩展的序列化结构数据格式。目前提供了 C++、Java、Pyt...
分类:
其他好文 时间:
2016-04-29 18:42:33
阅读次数:
200