Hadoop是2013年最热门的技术之一,通过北风网robby老师<深入浅出Hadoop实战开发>、<Hadoop应用开发实战>两套课程的学习,普通Java开发人员可以在最快的时间内提升工资超过15000.成为一位完全精通Hadoop应用开发的高端人才。 Hadoop是什么,为什么要学习Hadoop ...
分类:
编程语言 时间:
2016-04-12 07:04:40
阅读次数:
214
课程内容 本文链接: 张丹博客 http://www.fens.me 用Maven构建Hadoop项目 http://blog.fens.me/hadoop-maven-eclipse/程序源代码下载:https://github.com/bsspirit/maven_hadoop_template ...
分类:
Web程序 时间:
2016-04-09 20:24:54
阅读次数:
529
数据金字塔与角色 数据分析 使用统计方法,有目的地对收集到的数据进行分析处理,并且解读分析结果 数据挖掘 数据挖掘是以查找隐藏在数据中的信息为目标的技术,是应用算法从大型数据库中提取知识的过程,这些算法确定信息项之间的隐性关联,并且向用户显示这些关联数据挖掘思想来源:假设检验,模式识别,人工智能,机 ...
分类:
其他好文 时间:
2016-04-09 18:50:26
阅读次数:
158
Hadoop学习笔记内容说明_00 1、 观看云帆大数据梦琪老师的《企业级 Hadoop 1.x 应用开发基础课程》2014年4月左右版本。 2、 博客是在梦琪老师的随堂笔记上改动的,方便的是自己以后回顾学习,也或许能给需要改方面帮助的同行提供些许帮助,在此非常感谢梦琪老师。 3、 本系列是在Cen
分类:
其他好文 时间:
2016-03-04 15:57:51
阅读次数:
197
目录结构知识点还是挺全的,可以按照点学习。 一、Hadoop入门,了解什么是Hadoop 二、分布式文件系统HDFS,是数据库管理员的基础课程 1、Hadoop产生背景 2、Hadoop在大数据、云计算中的位置和关系 3、国内外Hadoop应用案例介绍 4、国内Hadoop的就业情况分析及课程大纲介
分类:
其他好文 时间:
2016-02-12 14:00:10
阅读次数:
196
操作系统:Ubuntu Server 14.04.3 LTSStep1: 添加Hadoop专用用户(optional, 出于安全性考虑), 本例中用户名为hmStep2: 安装相关软件包:ssh: 本例使用openssh-server, openssh-client.java: 本例使用openjd...
分类:
其他好文 时间:
2016-01-21 19:08:49
阅读次数:
129
1.概述 在Hadoop应用,随着业务指标的迭代,而使其日趋复杂化的时候,管理Hadoop的相关应用会变成一件头疼的事情,如:作业的依赖调度,任务的运行情况的监控,异常问题的排查等,这些问题会是的我们日常的工作变得复杂。那么,在没有条件和精力去开发一套调度系统的情况下,我们去选择一款第三方开源的调....
分类:
其他好文 时间:
2015-11-15 12:12:03
阅读次数:
174
在前面一篇文章中介绍了如果在完全分布式的环境下搭建Hadoop0.20.2,现在就再利用这个环境完成开发。 首先用hadoop这个用户登录linux系统(hadoop用户在前面一篇文章中创建的),然后下载eclipse的tar.gz包到/home/hadoop/这个目录下,直接解压缩,于是...
分类:
系统相关 时间:
2015-11-03 17:45:36
阅读次数:
205
起初是用maven的build来cleanpackage项目,生成jar包,然后在hadoop上运行,出现classNotFound错误。提示没有找到redis.jedis.redis..错误。错误原因:生成的jar包里,没有打进去maven依赖。解决办法:重建了maven项目,把单独的运行在mapreduce上的程序打包,用runnablejar来..
分类:
编程语言 时间:
2015-09-25 11:27:03
阅读次数:
205
《大数据:互联网大规模数据挖掘与分布式处理》电子版 http://www.db2china.net/club/thread-47659-1-1.html《Hadoop应用开发技术详解》电子版 http://www.db2china.net/club/thread-40775-1-1.html《京东大...
分类:
其他好文 时间:
2015-09-23 19:14:03
阅读次数:
179