用HTTP协议传输媒体文件可以分两个阶段,第一个阶段是Progressive Download(渐进式下载方式)阶段,第二个阶段是HTTP streaming(HTTP流化)阶段。其中,第一个阶段可以看成第二个阶段的前身。Progressive Download 渐进式下载是一种顺序流式传输,它是....
分类:
Web程序 时间:
2015-01-20 23:31:30
阅读次数:
310
XMPP全称:可扩展通讯和表示协议
简介:可扩展通讯和表示协议 (XMPP) 可用于服务类实时通讯、表示和需求响应服务中的XML数据元流式传输。XMPP以Jabber协议为基础,而Jabber是即时通讯中常用的开放式协议。XMPP
is the IETF's formalization of the base XML streaming protocols for instant mes...
分类:
其他好文 时间:
2015-01-15 12:55:40
阅读次数:
277
今天写了一个SparkStreaming的测试代码,简单的测试流式读取HDFS中的文件,然后统计WordCount。代码如下:packagecom.company.scala.lk
importorg.apache.spark.streaming._
/**
*Createdbykaion15/1/14.
*/
objectSparkStreamingTest{
defloadFile():Unit={
valssc=newStrea..
分类:
其他好文 时间:
2015-01-14 18:21:00
阅读次数:
256
典型大数据计算模式与系统
典型大数据计算模式
典型系统
大数据查询分析计算
HBase,Hive,Cassandra,Impala,Shark,Hana等
批处理计算
Hadoop MapReduce,Spark等
流式计算
Scribe,Flume,Storm,S4, Spark S...
分类:
其他好文 时间:
2015-01-13 21:33:30
阅读次数:
382
引言 前提和设计目标 硬件错误 流式数据访问 大规模数据集 简单的一致性模型 “移动计算比移动数据更划算” 异构软硬件平台间的可移植性 Namenode 和 Datanode 文件系统的名字空间 (namespace) 数据复制 副本存放: 最最开始的一步 副本选择 安全模式 文件系统元数据的持久化...
分类:
其他好文 时间:
2015-01-08 11:12:54
阅读次数:
166
前几天,模拟了一个tcp发送与接收16进制的小程序。由于需求的改变现在需要接收二进制流式数据,下面记录一下客户端接收数据的实现的源码。package client;
import java.io.DataInputStream;
import java.io.IOException;
import java.io.InputStream;
import java.net.Socket;
pu...
分类:
其他好文 时间:
2015-01-07 18:52:51
阅读次数:
120
在网页制作中,往往会显示指定宽度的表格,可以采用Bootstrap中的网格来实现。Bootstrap 提供了一套响应式、移动设备优先的流式网格系统,随着屏幕或视口(viewport)尺寸的增加,系统会自动分为最多12列。下面是 Bootstrap 网格的基本结构:1 2 3 4 ...
分类:
Web程序 时间:
2015-01-07 13:03:55
阅读次数:
186
由于本人要开发 分布式日志系统,所以想整体下关于开源的日志系统
1. 背景介绍
许多公司的平台每天会产生大量的日志(一般为流式数据,如,搜索引擎的pv,查询等),处理这些日志需要特定的日志系统,一般而言,这些系统需要具有以下特征:
(1) 构建应用系统和分析系统的桥梁,并将它们之间的关联解耦;
(2) 支持近实时的在线分析系统和类似于Hadoop之类的离线分析系统;
...
分类:
其他好文 时间:
2014-12-29 18:25:17
阅读次数:
307
(1)服务器段代码如下:
#include
#include
#include
#include
#include
#include
#include
#include
#include
#include
#define BUFSIZE 512
/*
* 错误报告
*/
static void bail(const char *on_wh...
分类:
系统相关 时间:
2014-12-28 20:53:19
阅读次数:
172