最近在搞关于数据分析的项目，做了一点总结。下图是系统的数据流向。容易出现错误的地方。1、数据进入hadoop仓库有四种来源，这四种是最基本的数据，简称ods，original data source，后续 的数据都是有这些组合而来a、日志文件b、http接口c、DB查询d、建表指向最后数据都是以ha...
分类：
其他好文 时间：
2014-10-11 21:06:06
阅读次数：
242
TCP的数据流大致可以分为两类，交互数据流与成块的数据流。交互数据流就是发送控制命令的数据流，比如relogin，telnet，ftp命令等等；成块数据流是用来发送数据的包，网络上大部分的TCP包都是这种包。
很明显，TCP在传输这两种类型的包时的效率是不一样的，因此为了提高TCP的传输效率，应该对这两种类型的包采用不同的算法。
总之，TCP的传输原则是尽量减少小分...
分类：
编程语言 时间：
2014-10-11 20:23:36
阅读次数：
846
为了对avi进行读写，微软提供了一套API，总共50个函数，他们的用途主要有两类，一个是avi文件的操作，一类是数据流streams的操作。 1、打开和关闭文件 AVIFileOpen ，AVIFileAddRef， AVIFileRelease 2、从文件中读取文件信息 通过AVIFileInfo可以获取avi文件的一些信息，这个函数返回一个AVIFILEINFO结构，通过AVIFile...
分类：
编程语言 时间：
2014-10-11 19:02:45
阅读次数：
410
Cobar是提供关系型数据库（MySQL）分布式服务的中间件，它可以让传统的数据库得到良好的线性扩展，并看上去还是一个数据库,对应用保持透明。产品在阿里巴巴稳定运行3年以上。接管了3000+个MySQL数据库的schema。集群日处理在线SQL请求50亿次以上。集群日处理在线数据流量TB级别以上。D...
分类：
数据库 时间：
2014-10-11 14:07:55
阅读次数：
252
考点1：
指令对应控制部分、数据流对应主存模块和处理器。
D
B
考点2：
CC
准确时间计算：t（第一条指令全部）+（n-1）*最长时间
估算时间：（n+2）*最长时间
考点3：
C
1字节byte=8位bit
注意是按字节编制
按位编址
按字编址（跟操作系统的位数有关）
的区别
考点4：
寻址方式：
A
考点5
C
考...
分类：
其他好文 时间：
2014-10-11 13:52:25
阅读次数：
181
数据库管理系统概述 下图描述了一个完整的DBMS结构，其中单线框表示系统构成，双线框表示内存中的数据结构，实线表示控制和数据流，虚线只表示数据流。由于图很复杂，因此分几个步骤来考虑细节。 首先，在顶部有两个命令源将命令发给DBMS: 1、通常的用户和应用程序，发出查询数据或修改数据命令。 2、数据库...
分类：
数据库 时间：
2014-10-08 23:41:27
阅读次数：
305
使用CSV文件记录数据 class CSVFileOperation { private string fileFullName;//CSV文件路径，包括文件名、扩展名 public CSVFileOperation(string fileFullNam...
分类：
其他好文 时间：
2014-10-08 17:26:15
阅读次数：
596
数据流图的画法 数据流图也称为数据流程图date flow diagram , DFD，是一种便于用户理解和分析系统数据流程的图形工具，他摆脱了系统和具体内容，精确的在逻辑上描述系统的功能、输入、输出和数据存储等，是系统逻...
分类：
其他好文 时间：
2014-10-08 13:48:05
阅读次数：
419
一,数据流图的元素
二,分层的数据流图
具体过程:
1,画系统的输入输出
把整个软件系统看作一个大的加工,确定与外部实体之间的输入和输出数据流,这个结果成为顶层图;
2,画系统的内部:
将顶层图中的加工分解成若干个加工,并用数据流连接这些加工.这张图称为0层图.而从一个加工画出一张数据流图
的过程就是对该加工的分解过程....
分类：
其他好文 时间：
2014-10-08 11:26:45
阅读次数：
274
字节流类功能简单介绍DataInputStream包含了读取Java标准数据类型的输入流DataOutputStream包含了写Java标准数据类型的输出流ByteArrayInputStream从字节数组读取的输入流ByteArrayOutputStream写入字节数组的输出流FileInputS...
分类：
编程语言 时间：
2014-10-07 17:14:53
阅读次数：
174
