对于业界的大数据存储及分布式处理系统来说，Hadoop 是耳熟能详的卓越开源分布式文件存储及处理框架，对于 Hadoop 框架的介绍在此不再累述，读者可参考Hadoop 官方简介。使用和学习过老 Hadoop 框架（0.20.0 及之前版本）的同仁应该很熟悉如下的原 MapReduce 框架图：图 ...
分类：
其他好文 时间：
2015-07-31 18:02:16
阅读次数：
154
一、大访问量，并发高1.负载均衡lvs+dr（directive-route）直接路由2.高可用 keepalived二、大数据存储1.分布式存储（MFS，FDFS，NFS）2.mysql（主从，分区）3.内存缓存（redis，memecache）三、网站加速1.CDN，智能DNS，反向代理（squ...
分类：
Web程序 时间：
2015-06-17 11:07:21
阅读次数：
183
Apache HBase 是Hadoop database的简称，hbase 是一个分布式，可扩展的，面向大数据存储的数据库。?? ????HBase 基本概念 ? ? ? ?1、region? ? ? ? ?region 是部分数据，所以是所有数据的一...
分类：
其他好文 时间：
2015-05-13 13:16:41
阅读次数：
273
摘要：本文介绍了Hadoop 自0.23.0版本后新的MapReduce框架（Yarn)原理、优势、运作机制和配置方法等；着重介绍新的Yarn框架相对于原框架的差异及改进。编者按：对于业界的大数据存储及分布式处理系统来说，Hadoop 是耳熟能详的卓越开源分布式文件存储及处理框架，对于 Hadoop...
分类：
其他好文 时间：
2015-05-04 21:55:55
阅读次数：
163
新型应用对数据库的新要求-高并发性的读写请求下的低延时-有效的大数据存储和存取需求（pb级别）-高扩展性和高可用性-更小的管理和操作花费传统关系型数据库的限制-由于关系型数据库的逻辑复杂性，使得随着数据大小增大，有很多的死锁或者并发问题出现，使得读写速度下降-容量限制，传统数据库无法处理大数据-多表...
分类：
数据库 时间：
2015-04-27 21:43:37
阅读次数：
214
在生产中我们一般希望文件系统能帮我们解决以下问题，如：1.超大数据存储；2.数据高可用（冗余备份）；3.读/写高性能；4.海量数据计算。最好还得支持多平台多语言，支持高并发。 由于单台服务器无法满足以上要求，...
分类：
其他好文 时间：
2015-04-18 11:39:52
阅读次数：
128
第一步、开启数据库的FILESTREAM支持实际环境为Sharepoint2010 和 SQL Server2008 R2；数据库默认安装的时候可能没有开启FILESTREAM，此时需要我们核实是否已经开启。打开SQL配置管理器，如下图所示在开启FILESTREAM之后，在数据库中执行下列语句EXE...
分类：
其他好文 时间：
2015-02-25 14:09:45
阅读次数：
111
说到数据格式化框架，就不得不提到 Google 的 Protocol Buffers，Facebook 的 Thrift，还有 Apache Hadoop 推出的 Avro。Microsoft 最近开源的 Bond 也是一种用于数据格式化的可扩展框架，其适用的应用场景包括服务间通信、大数据存储和处理...
分类：
其他好文 时间：
2015-01-12 18:58:17
阅读次数：
371
原 Hadoop MapReduce 框架的问题对于业界的大数据存储及分布式处理系统来说，Hadoop 是耳熟能详的卓越开源分布式文件存储及处理框架，对于 Hadoop 框架的介绍在此不再累述，读者可参考Hadoop 官方简介。使用和学习过老 Hadoop 框架（0.20.0 及之前版本）的同仁应该...
分类：
其他好文 时间：
2015-01-07 00:32:51
阅读次数：
254
