Spark Streaming 是基于spark的流式批处理引擎，其基本原理是把输入数据以某一时间间隔批量的处理，当批处理间隔缩短到秒级时，便可以用于处理实时数据流。本节描述了Spark Streaming作业的执行流程。图1 Spark Streaming作业的执行流程具体流程：客户端提交作业后启...
分类：
其他好文 时间：
2014-08-30 13:52:19
阅读次数：
292
php框架水平，具体点的就是大名鼎鼎的ZF框架。别急，先还是熟悉下OSC吧，主要是热身下商城的那些业务流的知识，基本的数据流程。自己做模板的话CSS2.0水平还不能太低。JS框架JQ吧相对简单点。当然，学好ZF是必须的和重要的，但是没有商城业务流程的经验也是白扯的。当然，如果你还不知道MVC那先恶补...
分类：
其他好文 时间：
2014-08-29 10:37:37
阅读次数：
193
经过一天的学习，基本已经对JAVA--IO有了一定的认识，现在就和大家分享一下。 JAVA.IO包中定义了多种流的类型（类或抽象类）来实现输入和输出功能，可以从不同的角度对其进行分类： 按数据流的方向不同可以分为输入流和输出流 按处理数据单位的不同可以分为字节流和字符流 按照功能的不同可...
分类：
编程语言 时间：
2014-08-26 22:42:16
阅读次数：
322
概念：Java语言中数据流是接收和发送数据的管道。流是一位单项的。流的分类：按照字节字符：InputStream和OutputStream是字节输入输出流的抽象父类。Reader和Writer是字符输入和输出流的抽象父类。按照是直接否从特定的地方（如磁盘，内存、设备）相连分为节点流和处理流 节点流....
分类：
编程语言 时间：
2014-08-25 21:00:14
阅读次数：
321
Java输入输出流分类：Java2012-04-01 11:2819529人阅读评论(6)收藏举报java网络存储磁盘jdkio目录(?)[-]什么是IO数据流的基本概念数据流输入流Input Stream输出流数据流分类标准IO命令行参数标准输入输出数据流javaIO层次体系结构非流式文件类--F...
分类：
编程语言 时间：
2014-08-25 19:12:04
阅读次数：
334
1.open
#include FILE *fopen(const char *restrict pathname,const char *restrict type)FILE *freopen(const char *restrict pathname,const char *restrict type,FILE *restrict fp);FILE *fdopen(int fd,co...
分类：
其他好文 时间：
2014-08-25 14:59:34
阅读次数：
242
众所周知，在互联网诞生之初都是各个高校和科研机构相互通讯，并没有网络流量控制方面的考虑和设计，IP协议的原则是尽可能好地为所有数据流服务，不同的数据流之间是平等的。然而多年的实践表明，这种原则并不是最理想的，有些数据流应该得到特别的照顾，比如，远程登录的交互数据流应该比数据下载有更高的优先级。
针对不同的数据流采取不同的策略，这种可能性是存在的。并且，随着研究的发展和深入，人们已...
分类：
系统相关 时间：
2014-08-24 19:27:02
阅读次数：
358
在工作中我们会有很多报表，是二维的表格，很难对其进行二次的分析。这个时候我们需要将其转化为一维表格，SQL SERVER的data tools中的SSIS可以轻松搞定这个功能。 在ssis中的数据流任务中有一个工具叫做逆透视，只要将报表转化成标准的sql表格作为数据源，即可用“逆透视”工具进行转换....
分类：
其他好文 时间：
2014-08-24 00:08:31
阅读次数：
231
netcat是网络工具中的“瑞士军刀”，它能通过TCP和UDP在网络中读写数据。通过与其他工具结合和重定向，你可以在脚本中以多种方式使用它。使用netcat命令所能完成的事情令人惊讶。netcat所做的就是在两台电脑之间建立链接并返回两个数据流，在这之后所能做的事就看你的想像力了。你能建立一个服务器...
分类：
Web程序 时间：
2014-08-23 16:44:31
阅读次数：
349
经过前面的系列文章中的三个例子，尽管代码简单，但是我想应该还有些地方没有100%弄明白，我们现在得回过头来补充一些必备的数学、图形学知识
1、图形管道
第一个例子中我有提到顶点着色和片段着色在整个图形绘制过程中属于一个环节，整个过程叫做管道，这个管道的所有环节包括:
在整个管道中，只有顶点着色与片段着色是可编程的，顶点数据和帧缓存是具体的数据，剩下的环节是固定功能的环节，即不能用cg去编程的环节。
[图片]
2、数据流
[图片]...
分类：
其他好文 时间：
2014-08-22 17:54:19
阅读次数：
258
