码流（Data Rate）是指视频文件在单位时间内使用的数据流量，也叫码率，是视频编码中画面质量控制中最重要的部分。同样分辨率下，视频文件的码流越大，压缩比就越小，画面质量就越好。 一、简介 H.264的主要目标...
分类：
其他好文 时间：
2014-07-22 09:10:35
阅读次数：
1562
# Storm介绍
Storm为分布式实时计算提供了一组通用原语，可被用于“流处理”之中，实时处理消息并更新数据库。这是管理队列及工作者集群的另一种方式。 Storm也可被用于“连续计算”（continuous computation），对数据流做连续查询，在计算时就将结果以流的形式输出给用户。它还可被用于“分布式RPC”，以并行的方式运行昂贵的运算。 Storm的主工程师Nathan Marz表示：
Storm可以方便地在一个计算机集群中编写与扩展复杂的实时计算，Storm之于实时处理，就好比Hadoo...
分类：
编程语言 时间：
2014-07-08 15:48:49
阅读次数：
633
在飞速发展的云计算大数据时代，Spark是继Hadoop之后，成为替代Hadoop的下一代云计算大数据核心技术，目前Spark已经构建了自己的整个大数据处理生态系统，如流处理、图技术、机器学习、NoSQL查询等方面都有自己的技术，并且是Apache顶级Project，可以预计的是2014年下半年.....
分类：
其他好文 时间：
2014-07-03 10:43:37
阅读次数：
181
Spark是发源于美国加州大学伯克利分校AMPLab的集群计算平台，它立足于内存计算，性能超过Hadoop百倍，从多迭代批量处理出发，兼收并蓄数据仓库、流处理和图计算等多种计算范式，是罕见的全能选手。Spark采用一个统一的技术堆栈解决了云计算大数据的如流处理、图技术、机器学习、NoSQL查询...
分类：
其他好文 时间：
2014-07-03 10:19:26
阅读次数：
208
现有的hadoop生态系统中存在的问题1）使用mapreduce进行批量离线分析；2）使用hive进行历史数据的分析；3）使用hbase进行实时数据的查询；4）使用storm进行实时的流处理；5）。。。。。。导致：维护成本高、学习成本高Spark的出现弥补了Hadoop生态系统中的缺陷，使用spar...
分类：
其他好文 时间：
2014-06-28 14:08:46
阅读次数：
306
1、 服务器端处理流程
接触一种技术，首先都要熟悉它的生命周期，这样才能从大局上看每个流程的细节。才有居高临下，势如劈竹的架势。加深我们对这种技术的理解。现在来看看socket服务器的生命周期。
socket程序，一般情况下，都是服务器与客户端成双成对出现。
服务器端socket的生命周期为：监听服务器端口，接受客户端连接，获取客户端输入、输出流，处理业务逻辑、发...
分类：
编程语言 时间：
2014-06-14 00:40:32
阅读次数：
459
java IO
是以文件相对程序的流向定义的javaIO流可分为三类1、输入流，输出流2、字节流，字符流3、节点流，处理流（这里用到了装饰着模式）public class
IOtest { public static void main(String[] args) throws Except...
分类：
编程语言 时间：
2014-06-11 11:41:53
阅读次数：
371
作者在工作中遇到了类似流式数据实时接入的业务场景，所以对淘宝的实时数据仓库这一块做了一些调研和了解。本文从业务场景和设计上介绍了淘宝的TimeTunnel工具，文中的图片来自淘宝数据仓库团队交流过程中的sildes，也参考了一些相关文档。
业务背景
TimeTunnel（简称TT）是一个基于thrift通讯框架搭建的实时数据传输平台，具有高性能、实时性、顺序性、高可靠性、高可用性、可扩展性等特点（基于Hbase）。
目前TimeTunnel在阿里巴巴广泛的应用于日志收集、数据监控、广告反馈、量子统计、数据...
分类：
其他好文 时间：
2014-05-22 10:58:59
阅读次数：
334
相关读书笔记、心得文章列表 Java 流在处理上分为字符流和字节流。字符流处理的单元为 2
个字节的 Unicode 字符，分别操作字符、字符数组或字符串，而字节流处理单元为 1 个字节，操作字节和字节数组。Java 内用 Unicode
编码存储字符，字符流处理类负责将外部的其他编码的字符流和 j...
分类：
编程语言 时间：
2014-05-15 21:56:12
阅读次数：
469
Java 流在处理上分为字符流和字节流。字符流处理的单元是2个字节的Unicode字符，操作字符、字符数组或字符串，而字节流处理单元为1个字节，操作字节和字节数组。...
分类：
编程语言 时间：
2014-05-13 23:04:32
阅读次数：
338
