继上篇rtp中的时间戳和负载类型之后，升入到了nalu的分片打包问题，这里做下笔记（1）fu-a的打包格式1.基于RTP协议的打包及解包（1）单个NAL打包H.264NALU单元常由[start code][NALU header][NALU payload]三部分组成，其中start code 用...
分类：
其他好文 时间：
2014-12-04 21:25:35
阅读次数：
238
分片:1. 在job.submit() 提交job之后 会调用submitter.submitJobInternal(Job.this, cluster);2. 在submitJobInternal()函数中 会给job创建分片int maps = writeSplits(job, submitJo...
分类：
其他好文 时间：
2014-12-04 19:38:42
阅读次数：
161
列表是最通用的Python复合数据类型，列表中包含以逗号分隔，并在方括号（[]）包含的项目。在一定程度上，列表相似C语言中的数组，它们之间的一个区别是，所有属于一个列表中的项目可以是不同的数据类型的。存储在一个列表中的值可以使用切片（分片）操作符来访问（[]和[:]）用索引从0开始，在列表的开始位置...
分类：
编程语言 时间：
2014-12-02 11:45:58
阅读次数：
217
因为之前搭建的MongoDB分片没有采用副本集，最近现网压力较大，所以准备研究一 下，于是在自己电脑的虚拟机中搭建环境，但是发现之前VMware设置的是DHCP，所以每次重新resume后虚拟机中IP都变了，导致之前已经搭建好 的mongodb环境老是出问题又要重新搭建很麻烦，所以设置一下静态静态I...
分类：
系统相关 时间：
2014-12-01 14:13:33
阅读次数：
314
本文主要介绍在一台win7电脑上模拟mongo分片。如果有多台服务器，可以将每个mongo部署在单台电脑上。我们将配置3个mongo分片，3个配置服务器，1个路由服务器。如下图所示进行配置，介绍如何增加分片、移除分片。...
分类：
数据库 时间：
2014-12-01 10:09:59
阅读次数：
257
分片是指报表的纵向或横向（或双向）同时被分成了多个区域，每个区域重复规则不同，而又可能相互运算。多源是指一个报表的数据来源来自多个物理数据表（或类似数据体），甚至是多个物理数据库。这里的“多个”常常不是两个三个，而是七八个乃至十几个。多源关联分片是比较常见的报表特征。严格意义上的多源报表，指的是.....
分类：
其他好文 时间：
2014-11-30 21:17:51
阅读次数：
274
elasticsearch用于构建高可用和可扩展的系统。扩展的方式可以是购买更好的服务器(纵向扩展)或者购买更多的服务器（横向扩展）,Elasticsearch能从更强大的硬件中获得更好的性能，但是纵向扩展也有一定的局限性。真正的扩展应该是横向的，它通过增加节点来传播负载和增加可靠性。对于大多数.....
分类：
其他好文 时间：
2014-11-30 15:29:46
阅读次数：
254
采用 TCP 协议进行数据传输是不会造成 IP 分片的，因为一旦 TCP 数据超过了 MSS，则在传输层会对 TCP 数据包进行分段，自然到了 IP 层的数据报肯定不会超过 MTU，所以就不用分片了。而对于 UDP 数据报，如果 UDP 组成的 IP 数据报长度超过了 MTU，那么 IP 数据报显然就要进行分片，因为 UDP 不能像 TCP 一样自己进行分段。传输层中的 TCP 会分段，网络层中的 IP 会分片。IP 层的分片更多的是为运输层的 UDP 服务的，由于 TCP 自己会避免 IP 的分片，所以使...
分类：
其他好文 时间：
2014-11-27 20:33:49
阅读次数：
265
AS3.0中使用Socket使用tcp服务器协议，它是一种流协议，不停的将分片传输给客户端，P作为流，发包是不会整包到达的，而是源源不断的。它不同于UDP服务器协议，UDP作为数据包协议，整包到达。 如果要使用Socket接收数据我们必须使用ProgressEvent.SOCKET_DATA...
分类：
其他好文 时间：
2014-11-27 18:16:36
阅读次数：
213
上一篇分析了split的生成，现在接着来说具体的split具体内容及其相关的文件和类。以FileSplit(mapred包下org/apache/hadoop/mapreduce/lib/input/FileSplit.java)为例，它继承了InputSplit接口，包括以下属性：1 publ.....
分类：
其他好文 时间：
2014-11-26 18:17:27
阅读次数：
270
