深入浅出Hive企业级架构优化、Hive Sql优化、压缩和分布式缓存(企业Hadoop应用核心产品)课程讲师：Cloudy课程分类：Hadoop适合人群：初级课时数量：10课时用到技术：Hive涉及项目：Hive企业级优化咨询qq：1840215592一、课程环境：Cloudera Hadoop ...
分类：
其他好文 时间：
2015-03-13 12:37:36
阅读次数：
239
声明：代码来自《Hadoop应用技术开发详解》4.7.2，版权归作者所有。1. 概述 文件在Hadoop中表示为一个Path对象，可以把路径看做是Hadoop文件系统的URI，例如：hdfs://master:9000/user/hadoop/study/mr/WordCount/input/fi....
分类：
其他好文 时间：
2015-02-02 17:51:33
阅读次数：
273
网上有一些都是在Linux下使用安装Eclipse来进行hadoop应用开发，但是大部分Java程序员对linux系统不是那么熟悉，所以需要在windows下开发hadoop程序，所以经过试验，总结了下如何在windows下使用Eclipse来开发hadoop程序代码。 1、 需要下载hadoop的专门插件jar包hadoop版本为2.3.0，hadoop集群搭建在centos6x上面，插件包下载...
Greenplum Hadoop应用案例视频教程活动时间：12月11日~12日活动规则：全场课程（品牌学习套餐除外）6折，VIP会员可享受折上折（例如：VIP5本身可以买课程7.5按照活动可享受低至4.5折），客户购买课程后联系修改价格咨询QQ:1840215592基于Greenplum Hadoo...
分类：
其他好文 时间：
2014-12-12 14:50:50
阅读次数：
216
基于Greenplum Hadoop分布式平台的大数据解决方案及商业应用案例剖析适合人群：高级课时数量：96课时用到技术：MapReduce、HDFS、Map-Reduce、Hive、Sqoop涉及项目：Greenplum Hadoop大数据分析平台联系qq：1840215592Hadoop视频教程...
分类：
其他好文 时间：
2014-11-05 12:15:18
阅读次数：
187
GridGain最近在2014年的Spark峰会上发布了Hadoop内存片内加速技术，可以为Hadoop应用带来内存片内计算的相关收益。
该技术包括两个单元：和Hadoop HDFS兼容的内存片内文件系统，以及为内存片内处理而优化的MapReduce实现。这两个单元对基于磁盘的HDFS和传统的MapReduce进行了扩展，为大数据处理情况提供了更好的性能。...
分类：
其他好文 时间：
2014-10-16 17:15:42
阅读次数：
235
在使用Maven构建Hadoop应用的时候出现：Missingartifactlog4j:log4j:jar:1.2.15:compile而在pom.xml的配置是<dependency>
<groupId>log4j</groupId>
<artifactId>log4j</artifactId>
<version>1.2.15</version>
</dependency>..
分类：
其他好文 时间：
2014-10-08 08:29:05
阅读次数：
231
因为一些缘故，这节内容到现在才写，其实弄hadoop有一段时间了，可以编写一些小程序了，今天来还是来说说环境的搭建....
说明一下：这篇文章的步骤是接上一篇的hadoop文章的：http://blog.csdn.net/enson16855/article/details/37725771 ，如果不是按照上篇的方式安装hadoop，可能会有些错误~百度一下就能解决的哈~
准备环境：
不用多...
《大 数据技术丛书：Hadoop应用开发技术详解》共12章。第1～2章详细地介绍了Hadoop的生态系统、关键技术以及安装和配置；第3章是 MapReduce的使用入门，让读者了解整个开发过程；第4～5章详细讲解了分布式文件系统HDFS和Hadoop的文件I/O；第6章分析了 MapReduce的工...
分类：
其他好文 时间：
2014-07-24 11:25:42
阅读次数：
337
Hadoop任务提交分析
分析工具和环境
下载一份hadoop的源码，这里以hadoop-1.1.2为例。本地IDE环境为eclipse，导入整个目录，然后可以在IDE里面看到目录结构了，要分析任务提交过程，需要找到入口代码，很明显，对于熟悉Hadoop应用程序开发的同学来说很容易的知道任务的提交是从job的配置开始的，所以需要这样一份提交Job的代码，在src/examples里...
分类：
其他好文 时间：
2014-07-21 22:21:28
阅读次数：
302
