这篇文章不提原理，讲讲hadoop及其周边项目的作用。hadoop这个词已经流行好多年了，一提到大数据就会想到hadoop，那么hadoop的作用是什么呢？官方定义：hadoop是一个开发和执行处理大规模数据的软件平台。核心词语是平台，也就是说我们有大量的数据，又有好几个电脑，我们知道应该把处理数据...
分类：
其他好文 时间：
2014-07-19 21:30:03
阅读次数：
179
大数据我们都知道hadoop，可是还会各种各样的技术进入我们的视野：Spark，Storm，impala，让我们都反映不过来。为了能够更好的架构大数据项目，这里整理一下，供技术人员，项目经理，架构师选择合适的技术，了解大数据各种技术之间的关系，选择合适的语言。 我们可以带着下面问题来阅读本文章： 1...
分类：
其他好文 时间：
2014-07-19 21:05:50
阅读次数：
236
用oracle账号登陆ORACLE数据库服务器
方法一:
查看表空间的名字及文件所在位置：
select tablespace_name, file_id, file_name,round(bytes/(1024*1024),0) total_space
from dba_data_files order by tablespace_name;
修改数据库dat...
分类：
数据库 时间：
2014-07-18 22:24:47
阅读次数：
435
作为企业Hadoop应用的核心产品之一，Hive承载着公司95%以上的离线统计，甚至很多企业里的离线统计全由Hive完成；Hive在企业云计算平台发挥的作用和影响越来越大，如何优化提速已经显得至关重要；Hive作业的规模决定着优化层级，一个Hive作业的优化和一万个Hive作业的优化截然不同；后续文...
分类：
其他好文 时间：
2014-07-17 13:13:40
阅读次数：
266
美国零售商Target在基于购买记录分析的基础上，分析出一位少女怀孕，进而推送孕期相关的产品广告到这户人家，这位少女的父亲对此颇为不满。当然，最后证明他女儿真怀孕了，这位父亲也颇为尴尬。基于过去销售记录进行预测，并非需要大数据技术，传统的BI也许就能解决，但这个妇..
分类：
其他好文 时间：
2014-07-17 10:28:42
阅读次数：
214
Microsoft Azure云服务推出机器学习的模块，用户只需上传数据，利用机器学习模块提供的一些算法接口和R语言或别的语言接口，就能利用Microsoft Azure强大的云计算能力来实现自己的机器学习的任务。本文浅尝了该机器学习模块，参照官方实例和帮助文档，完成了一个简单的应用实例，具体步骤如...
分类：
其他好文 时间：
2014-07-16 18:25:20
阅读次数：
240
在前面的博文实践记录之-Rsync镜像备份介绍了镜像备份工具Rsync的安装和使用．但在大数据时代，rsync的不足之处也暴露出来．首先．rsync本身实现不了实时备份．靠系统的crontab实现的话也受限于1分钟．因此这就导致了服务端和客户端数据可能出现不一致，更无法在应用故障时做到..
分类：
其他好文 时间：
2014-07-16 16:44:36
阅读次数：
391
在云计算中，有三种基本服务模型：软件即服务(SaaS)、平台即服务(PaaS)和基础架构即服务(IaaS)。此外，还有三种基本的部署模型：公有、混合和私有。虚拟化通常被用于上述的这些云计算模型和部署中，以实现其诸多优势，包括成本效益、增加运行时间、改善灾难恢复和应用隔离。 在云部署中处理虚拟化...
分类：
其他好文 时间：
2014-07-16 13:56:07
阅读次数：
155
2013-5-3 Yongwu Shen
Future AI system would be the one that is able to grow from the rootby itself, rather than being created brick by brick like existing ones.
Building an AI system in the future w...
分类：
其他好文 时间：
2014-07-16 08:51:57
阅读次数：
347
