[转载]大数据人才流失： 科研为何陷入困境已有 5 次阅读2014-5-13
12:27|系统分类:观点评述推荐到群组无论无处不在的“大数据”概念引起怎样的联想，逐步增长的数据规模确是改变着我们和世界的交互方式。这在工业界、政界、媒体、学术界，几乎任何领域，都是事实。逐渐增强的对大数据进行收集、处理...
分类：
其他好文 时间：
2014-05-16 21:34:11
阅读次数：
254
很多时候，我们测试时，如果进行大数据量的并发测试时，单个电脑的ＣＰＵ和内存可能无法承受，这个时候，我们需要进行一个分布式的测试，比如10000个并发，使用三台电脑来进行并发
Jmeter提供了这种功能，你可以很轻松的实现Jmeter的这种分布式测试1 首先确何所有的电脑上都安装Jmeter2 在所....
分类：
其他好文 时间：
2014-05-16 18:02:34
阅读次数：
253
1、分层：
分层是企业应用系统中最常见的一种架构模式，将系统在横向维度上切分成几个部分，每个部分负责一部分比相对比较单一的职责 ，然后通过上层对下层的依赖和调用组成一个完整的系统。
分层结构无处不在，例如网络7层通信协议，计算机硬件、操作系统、软件也可以看做是分层结构。在大型网站中也采用分层结构。将网站分为应用层、服务层、数据访问层， 通过分层，可以将一个庞大的系统...
分类：
Web程序 时间：
2014-05-15 05:25:27
阅读次数：
381
高并发，大数据量，你的系统考虑哪些问题？1，订票系统案例，某航班只有一张机票，假定有1w个人打开你的网站来订票，问你如何解决并发问题(可扩展到任何高并发网站要考虑的并发读写问题)问题，1w个人来访问，票没出去前要保证大家都能看到有票，不可能一个人在看到票的时候别人就不能看了。到底谁能抢到，那得看这个...
分类：
其他好文 时间：
2014-05-14 13:54:11
阅读次数：
197
超大规模数据中心TCO（总拥有成本）优化是另一个重要驱动因素。“横向扩展”的概念基本上是在一个集群中采用一系列统一的硬件元件，将应用负载分解成具有相同处理功能的子任务，然后在基础的硬件元件上执行这些功能。通过复制统一的硬件元素，即可为持续增加的应用负载如系统吞吐量、相关数据组大小等等几乎所有与基础设施资源扩展相关的方方面面提供支持。横向扩展的架构...
分类：
其他好文 时间：
2014-05-13 06:39:55
阅读次数：
365
商业智能（BI，Business Intelligence），它是一套完整的解决方案，用来将企业中现有的数据进行有效的整合，快速准确的提供报表并提出决策依据，帮助企业做出明智的业务经营决策。本文分析了BI系统与大数据分析结合的趋势和软件架构方案。...
分类：
其他好文 时间：
2014-05-12 23:53:15
阅读次数：
463
学习大数据的处理，有必要读一下有关大数据的书籍。这里，我列举了几本书，仅供参考。
1 ZooKeeper: Distributed Process Coordination
这本书针对的是初级或者高级的开发，面向Zookeeper编程的工程师们。如果你的工程中（如HBase）涉及到Zookeeper的应用，有必要了解一下Zookeeper的管理知识和一些基本解...
分类：
其他好文 时间：
2014-05-12 22:46:32
阅读次数：
662
Thrift 是什么？
Thrift源于大名鼎鼎的facebook之手，在2007年facebook提交Apache基金会将Thrift作为一个开源项目，对于当时的facebook来说创造thrift是为了解决facebook系统中各系统间大数据量的传
输通信以及系统之间语言环境不同需要跨平台的特性...
分类：
其他好文 时间：
2014-05-12 20:35:23
阅读次数：
296
Hadoop集群（第9期）_MapReduce初级案例1、数据去重
"数据去重"主要是为了掌握和利用并行化思想来对数据进行有意义的筛选。统计大数据集上的数据种类个数、从网站日志中计算访问地等这些看似庞杂的任务都会涉及数据去重。下面就进入这个实例的MapReduce程序设计。1.1
实例描述 对数.....
分类：
其他好文 时间：
2014-05-11 16:02:24
阅读次数：
538
