太好了~~ 基本IO Graphs:IO graphs是一个非常好用的工具。基本的Wireshark IO graph会显示抓包文件中的整体流量情况，通常是以每秒为单位（报文数或字节数）。默认X轴时间间隔是1秒，Y轴是每一时间间隔的报文数。如果想要查看每秒bit数或byte数，点击“Unit”，在“...
分类：
其他好文 时间：
2014-07-09 14:40:10
阅读次数：
305
# Storm介绍
Storm为分布式实时计算提供了一组通用原语，可被用于“流处理”之中，实时处理消息并更新数据库。这是管理队列及工作者集群的另一种方式。 Storm也可被用于“连续计算”（continuous computation），对数据流做连续查询，在计算时就将结果以流的形式输出给用户。它还可被用于“分布式RPC”，以并行的方式运行昂贵的运算。 Storm的主工程师Nathan Marz表示：
Storm可以方便地在一个计算机集群中编写与扩展复杂的实时计算，Storm之于实时处理，就好比Hadoo...
分类：
编程语言 时间：
2014-07-08 15:48:49
阅读次数：
633
总体访问流程图终端设备注册流程Android设备注册流程到googlePlay或亚马逊应用商店或者豌豆荚、Citrix官网，下载思杰WorxHome应用。并在设备上安装。当系统提示您安装该应用程序，单击下一步，然后单击安装。安装WorxHome之后，点击启动。输入您的认证信息，如设备管理器服务器..
分类：
其他好文 时间：
2014-07-08 12:07:04
阅读次数：
364
GPU代表的是图形处理单元，但是，这些小小芯片除了处理图形功能，还有其它用处。比如，Google使用GPU来为人脑建模，Salesforce则依赖GPU分析Twitter微博数据流。GPU很适合并行处理运算，也就是同时执行成千上万个任务。怎么做呢？你得开发一个新软件，让它挖掘GPU芯片的潜力。最近美...
分类：
系统相关 时间：
2014-07-07 21:38:17
阅读次数：
271
作者：唐风 Base 64是一种比较古老的编码方式，在通信中非常常见。它实现很简单。 What？ “Base64是一种基于64个可打印字符来表示二进制数据的表示方法（来自维基）”。这句话我一开始没有看懂，现在我用我懂的方式再解释一下：我们可以把通信的数据流分为两种，“二进制流”和“文本流”。（注意，...
分类：
其他好文 时间：
2014-07-07 17:16:02
阅读次数：
161
项目原理概述利用sqoop将数据从MySQL导入到HDFS中,利用mahout的LDA的cvb实现对输入数据进行聚类,并将结果更新到数据库中。数据流向图如下mahout算法分析输入数据格式为的matrix矩阵,key为待聚类文本的数字编号，value为待聚类文本的单词向量Vector, Vector...
分类：
其他好文 时间：
2014-07-07 10:43:16
阅读次数：
1186
XML技术：与数据相关技术，在企业中xml技术常用来存储数据和传输数据 ，流行原因 à xml与任何编程语言无关 xml 可用于 php、java、.net 任何编程语言 * 通过标签来 标记数据 什么是标记语言？ aaa 典型标记语言 HTML à用标记 修饰文本信息 XML标记...
分类：
其他好文 时间：
2014-07-06 18:31:44
阅读次数：
190
全球范围来看，移动及互联网流量的增长速度是空前的，导致此现象的缘由包括云服务的增长及其宽带和基于互联网的视频点播服务的增长。Cisco预计，从2012至2017年，全球互联网IP流量将增至三倍，达到每月120艾字节，而移动数据流量将增长13倍，达到每月逾11艾字节...
分类：
其他好文 时间：
2014-07-02 11:28:06
阅读次数：
214
拥塞控制与流量控制的区别
拥塞控制的任务是确保子网能够承载所到达的流量。这是一个全局性问题，涉及到各方面的行为，包括所有的主机、所有的路由器、路由器内部的存储转发处理过程，以及所有可能会削弱子网承载容量的其它因素。
与此相反，流控制只与特定的发送方和特定的接收方之间的点到点流量有关。它的任务是，确保一个快速的发送方不会持续地以超过接收方吸收能力的速率传输数据。流...
分类：
其他好文 时间：
2014-07-01 06:09:47
阅读次数：
219
前言
在做需求时，经常遇到多个目录，也就是多个维度进行join，这里分析一下，数据是怎么流动的。
1、多目录输入
使用MultipleInputs.addInputPath() 对多目录制定格式和map
2、数据流分析
map按行读入数据，需要对不同的输入目录，打上不同的标记（这个方法又叫reduce端连接），map在输出后会进行partition和sort，按照key进行排序，然后输...
分类：
其他好文 时间：
2014-06-29 23:09:07
阅读次数：
348
