五一三天假除了背单词，也抽空复习了下UML，毕竟还有一两周要半期考试了……（哪里来的半期考试啊syllabus明明里提都没有提啊T_T）今天先来看——领域模型。首先领域模型长这样（后面还有九个图啊千万不要搞混了）那么为什么要有领域模型呢，不是前面已经有用例图了嘛。书上在后面的内容稍微提到了这点，表示...
分类：
其他好文 时间：
2014-05-10 08:46:57
阅读次数：
360
从Physical plan到Map-Reduce Plan
注：因为我们重点关注的是Pig On Spark针对RDD的执行计划，所以Pig物理执行计划之后的后端参考意义不大，这些部分主要分析流程，忽略实现细节。
入口类MRCompiler，MRCompilier按照拓扑顺序遍历物理执行计划中的节点，将其转换为MROperator，每个MROperator都代表一个map-reduce
j...
分类：
其他好文 时间：
2014-05-10 08:46:07
阅读次数：
366
Spark计算速度远胜于Hadoop的原因之一就在于中间结果是缓存在内存而不是直接写入到disk，本文尝试分析Spark中存储子系统的构成，并以数据写入和数据读取为例，讲述清楚存储子系统中各部件的交互关系。
分类：
其他好文 时间：
2014-05-09 05:14:32
阅读次数：
405
Explain
Explain是Pig提供的调试工具，使用explain可以输出Pig Lation的执行计划。值得一提的是，explain支持-dot选项，将执行计划以DOT格式输出， (DOT是一种图形描述语言，请参考http://zh.wikipedia.org/zh/DOT%E8%AF%AD%E8%A8%80)
代码实现详见org.apache.pig.impl.plan.DotPla...
分类：
其他好文 时间：
2014-05-07 06:03:35
阅读次数：
350
本文是Pig系统分析系列中的最后一篇了，主要讨论如何扩展Pig功能，不仅介绍Pig本身提供的UDFs扩展机制，还从架构上探讨Pig扩展可能性。
补充说明：前两天同事发现twitter推动的Pig On Spark项目：Spork，准备研究下。
UDFs
通过UDFs（用户自定义函数），可以自定义数据处理方法，扩展Pig功能。实际上，UDFS除了使用之前需要register/define外，和...
分类：
其他好文 时间：
2014-05-07 05:10:44
阅读次数：
567
关于数据库迁移的方法、步骤和心得在项目中经常会遇到系统完全更换后的历史数据迁移问题，以示对客户历史工作的尊重，何况很多数据仍有保留的必要。那怎么做历史数据迁移呢？系统分析：1、分析原有的业务系统精确到大致的系统功能模块、大致的处理流程即可2、分析现有的业务系统精确到大致的系统功能模块、大致的处理流程...
分类：
数据库 时间：
2014-05-06 00:46:15
阅读次数：
404
更多可参考Linux输入子系统分析input子系统架构总结1、定义一个staticstructinput_dev结构体staticstructinput_dev*mybutton_dev;2、初始化时分配input_dev结构体mybutton_dev=input_allocate_device();//分配input_dev/*能产生的事件类型
1.#defineEV_SYN0x00/*表示设备支持所..
分类：
其他好文 时间：
2014-05-04 17:38:36
阅读次数：
471
状态图（Statechart digram）是系统分析的一种常用工具，系统分析员在对系统建模时，最先考虑的不是基于活动之间的控制流，而是基于状态之间的控制流，因为系统中对象的状态变化最易被发现和理解。
状态机
要想画出状态图，首先得了解状态机，状态机是展示状态与状态转换的图。
状态图
一个状态图表示一个状态机，主要用于表现从一个状...
分类：
其他好文 时间：
2014-05-04 09:38:01
阅读次数：
239
在对一个软件系统进行设计和建模的时候，通常是从构造系统的基本词汇开始，包括构造这些词汇的基本属性和行为。系统分析师如果要对所设计的系统清晰认识，还有考虑这些基本词汇之间的关系。而如果把这些行为可视化为图，就是通常所说的类图。
类图（Class Diagram）是描述类、接口、协作以及它们之间关系的图，用来显示系统中的各个类的静态结构。
类图包括3方面内容：
1.类...
分类：
其他好文 时间：
2014-05-03 21:52:49
阅读次数：
335
