TheBig Data Zoneis presented bySplunk, the maker of
data analysis solutions such asHunk, an analytics tool for Hadoop, and theSplunk
Web Framework.Liv...
分类：
其他好文 时间：
2014-05-08 19:31:55
阅读次数：
596
HTTPS（Secure Hypertext Transfer
Protocol）安全超文本传输协议它是一个安全通信通道，它基于HTTP开发，用于在客户计算机和服务器之间交换信息。它使用安全套接字层(SSL)进行信息交换，简单来说它是HTTP的安全版。http与https的区别在于http一般使用的...
分类：
其他好文 时间：
2014-05-08 11:40:59
阅读次数：
309
import java.io.IOException;import
org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import
org.apache.hadoop.io.Text;import org.ap...
分类：
其他好文 时间：
2014-05-08 11:27:24
阅读次数：
309
一、Combiner作用1、combiner最基本是实现本地key的聚合，对map输出的key排序，value进行迭代。如下所示：map: (K1, V1) →
list(K2, V2)combine: (K2, list(V2)) → list(K2, V2)reduce: (K2, list(V...
分类：
其他好文 时间：
2014-05-08 09:37:49
阅读次数：
472
上一篇，我们利用了一台服务器模拟了硬件存储，并提供给了我们的两台虚拟机，FS1和FS2来去连接；接下来，我们继续在这一篇中完成接下来的SMB3.0的CLuster的搭建和结合到我们公有云提供租户的方式，在SCVMM中去使用。FS1,FS2添加文件共享&Cluster角色在服务器角色界面，勾寻..
分类：
其他好文 时间：
2014-05-08 03:10:28
阅读次数：
401
不卖关子了，接着前面两篇，我们这篇要完成SMB3.0在群集下的建立，及如何联合SCVMM来去使用这个高可用的共享存储，并通过模板去部署租户虚拟机。部署SMB共享存储打开服务器管理器，并切换到群集管理器，然后配置Role选择FileServerSMB3.0需要选择Scale-OutFileServerforapplica..
分类：
其他好文 时间：
2014-05-08 02:45:41
阅读次数：
433
接着我们前几篇搭建公有云的文章，我们实现了基本的网络架构和通信，主要解决了租户方面的网络问题，那么这么多租户的虚拟机，存放在哪呢？那么很自然地就涉及到存储的问题，我们如何给租户去提供一个高可用的，且高效的存储方式，那么就有了我们今天的这个Demo，基于SMB3.0做..
分类：
其他好文 时间：
2014-05-08 02:40:42
阅读次数：
473
默认情况下，hive的元数据信息存储在内置的Derby数据中。Facebook将hive元数据存储在关系数据库1、安装好mysql ，sudo apt-get
install mysql-server2、创建mysql用户hadoop $mysql-uroot-p 进入root用户 mysql>.....
分类：
数据库 时间：
2014-05-07 20:40:00
阅读次数：
554
应用场景：图片等资源需要设置权限，如：只有认证过的用户才能访问自己的图片。
解决办法：使用Nginx的防盗链模块http_secure_link可以实现，该模块默认情况下不包含，故在安装时要加上--with-http_secure_link_module
该模块根据两个参数控制权限访问，一个是过期时间（即该链接在这个时间之前可访问，过期后无法访问），该参数主要出于安全考虑。
另一个是通过md...
分类：
其他好文 时间：
2014-05-07 15:53:18
阅读次数：
268
参考书籍： Hadoop in action, 吴超沉思录1.Hbase简介
1.面向列的分布式数据库 2. 以HDFS作为文件系统 3. 利用MapReduce处理Hbase中海量数据 4. ZookKeeper作为协调工具 5.
sqoop提供Hbase到关系型数据库中数据导入功能 ...
分类：
其他好文 时间：
2014-05-07 00:35:59
阅读次数：
424
