官方定义：hadoop是一个开发和运行处理大规模数据的软件平台。核心词语是平台，也就是说我们有大量的数据，又有好几个电脑，我们知道应该把处理数据的任务分解到各个电脑上，但是不知道怎样分配任务，怎样回收结果，hadoop大概就帮助我们做了这件事。1、HDFS我们首先应该考虑的是海量数据怎么保存，怎么管...
分类：
其他好文 时间：
2015-10-02 07:56:58
阅读次数：
237
11729 - Commando War链接：https://uva.onlinejudge.org/external/117/11729.pdf题意：有若干个战士需要分配任务，分配任务必须独立，完成任务也需要时间，问至少需要多少时间来完成所有任务。题解:简单的贪心，因为分配任务的时间是固定的，所以...
分类：
其他好文 时间：
2015-09-12 22:21:38
阅读次数：
282
今天结合JStorm官方Demo，进一步研磨学习了JStorm提交任务到分配任务的过程，下面是自己的一些认识与理解。
Topology是JStorm对有向无环图的抽象，其内部封装了数据源spout和数据处理对象bolt，以及spout和bolt、bolt和bolt之间的关系。
1) Demo中SequenceTopology对象的SetBuilder(TopologyBuilder b...
分类：
Web程序 时间：
2015-08-16 16:43:23
阅读次数：
237
一、为什么使用EJB ?
企业Bean运行在EJB容器中，企业Bean实际上就是一个封装了业务逻辑的Java类，那么我们为什么要使用EJBne ?
1.最重要的原因：分布式。简要的说，分布式可以将分布在各处的资源综合利用，但是对于用户来说展现的是一个统一的整体；分布式可以动态分配任务，分散...
分类：
其他好文 时间：
2015-07-30 13:37:39
阅读次数：
128
今天是2015-07-22，学校制定的时间开始于07.182015-07-18我们组我担任组长，所以小组内的事情基本由我来分配今天我带领大家制定了项目计划（运动类app），制定了计划随后的分配任务就好办了2015-07-19今天昨天的努力分案分配完成我担任的任务为主界面的设计，我的计划为侧滑菜单，主...
分类：
其他好文 时间：
2015-07-22 12:25:52
阅读次数：
207
我们在2015年6月3号对我队的项目进行了用户调研，用户调研情况如下：一、用户调研1、用户调研方法：通过QQ与微信询问广州商学院的同学2、用户调研结果：二、冲刺第一阶段总结：第一阶段冲刺已经结束了，在过程中每个人都遇到了不同的困难，都互相协助的解决了相应的问题，我认为我们组还是比较和谐的，在分配任务...
分类：
其他好文 时间：
2015-06-18 21:36:48
阅读次数：
133
tbschedule项目其实可以分为两部分：
schedule管理控制台。负责控制、监控任务执行状态
实际执行job的客户端机器。
在实际使用时，首先要启动zookeeper, 然后部署tbschedule web界面的管理控制台，最后启动实际执行job的客户机器。这里zookeeper并不实际控制任务调度，它只是负责与N台执行job的客户端通讯，协调、管理、监控这些机器的运行信息。实际分配任务的是...
分类：
其他好文 时间：
2015-06-17 18:18:03
阅读次数：
27762
之前文章中介绍了python中multiprocessing模块中自带的进程池Pool，并对进程池中的数据结构和各个线程之间的合作关系进行了简单分析，这节来看下客户端如何对向进程池分配任务，并获取结果的。 我们知道，当进程池中任务队列非空时，才会触发worker进程去工作，那么如何向进程池中的任务....
分类：
编程语言 时间：
2015-06-13 22:51:33
阅读次数：
181
之前文章中介绍了python中multiprocessing模块中自带的进程池Pool，并对进程池中的数据结构和各个线程之间的合作关系进行了简单分析，这节来看下客户端如何对向进程池分配任务，并获取结果的。 我们知道，当进程池中任务队列非空时，才会触发worker进程去工作，那么如何向进程池中的...
分类：
编程语言 时间：
2015-06-13 21:38:26
阅读次数：
194
