第1章 大数据概述本章将从故事说起，让大家明白大数据是与我们的生活息息相关的，并不是遥不可及的，还会介绍大数据的特性，以及大数据对我们带来的技术变革，大数据处理过程中涉及到的技术以及大数据典型应用。第2章 初识Hadoop本章节将带领大家认识Hadoop以及Hadoop生态系统、Hadoop的发展史 ...
分类：
其他好文 时间：
2019-06-28 01:04:10
阅读次数：
139
结合理论和实践，《Hadoop权威指南第四版》由浅入深，全方位介绍了Hadoop 这一高性能的海量数据处理和分析平台。5部分24 章，第Ⅰ部分介绍Hadoop 基础知识，第Ⅱ部分介绍MapReduce,第Ⅲ部分介绍Hadoop 的运维，第Ⅳ部分介绍Hadoop 相关开源项目，第Ⅴ部分提供了三个案例。 ...
分类：
其他好文 时间：
2019-06-04 19:21:46
阅读次数：
317
1．HIVE和HBASE区别 1. 两者分别是什么？ Apache Hive是一个构建在Hadoop基础设施之上的数据仓库。通过Hive可以使用HQL语言查询存放在HDFS上的数据。HQL是一种类SQL语言，这种语言最终被转化为Map/Reduce. 虽然Hive提供了SQL查询功能，但是Hive不 ...
分类：
其他好文 时间：
2019-05-15 00:27:15
阅读次数：
155
一、发行版本 ? Hadoop发行版本分为开源 社区版 和 商业版 ，社区版是指由Apache软件基金会维护的版本，是官方维护的版本体系。商业版Hadoop是指由第三方商业公司在社区版Hadoop基础上进行了一些修改、整合以及各个服务组件兼容性测试而发行的版本，比较著名的有cloudera的CDH、 ...
分类：
其他好文 时间：
2019-04-14 16:33:00
阅读次数：
168
第1章 大数据概述本章将从故事说起，让大家明白大数据是与我们的生活息息相关的，并不是遥不可及的，还会介绍大数据的特性，以及大数据对我们带来的技术变革，大数据处理过程中涉及到的技术以及大数据典型应用。第2章 初识Hadoop本章节将带领大家认识Hadoop以及Hadoop生态系统、Hadoop的发展史 ...
分类：
其他好文 时间：
2019-03-10 09:33:09
阅读次数：
729
如图： 是通过网上提供的ISO 镜像文件进行的安装，不过没能使用 JDK安装好后，配置环境变量， 格式化hdfs namenode -format 运行案例PI 遇到异常： 配置hostname ，主机名称要和配置文件一致 这个问题是配置文件中没有修改为主机名称host160 此问题是配置文件 需要 ...
分类：
其他好文 时间：
2019-02-28 18:24:59
阅读次数：
196
最新在学习hadoop 、storm大数据相关技术，发现网上hadoop 、storm 相关学习视频少之又少，更可恶的是不少机构使用段海涛老师Hadoop视频进行商业买卖，气愤至急，我这里整理了传智播客段海涛老师的hadoop学习视频，分享出来给大家学习交流。 ps：传智播客是个不错的学习地方，段海 ...
分类：
其他好文 时间：
2019-01-29 20:45:26
阅读次数：
219
Hadoop基础知识小总结 这是本人（学生党）在学习hadoop半个学期后根据教科书后习题做的一个小总结，如有发现错误还请各位海涵并指出，我会及时改过来的，谢谢！ 目录 Hadoop基础知识小总结... 1 第一章... 2 1、简述hadoop平台的发展过程... 2 2、简述Hasoop名称和及 ...
分类：
其他好文 时间：
2019-01-20 22:30:38
阅读次数：
404
Yarn是一个分布式的资源管理系统，用以提高分布式的集群环境下的资源利用率，这些资源包括内存、IO、网络、磁盘等。其产生的原因是为了解决原MapReduce框架的不足。最初MapReduce的committer们还可以周期性的在已有的代码上进行修改，可是随着代码的增加以及原MapReduce框架设计的不足，在原MapReduce框架上进行修改变得越来越困难，所以MapReduce的committe
分类：
其他好文 时间：
2019-01-07 17:41:15
阅读次数：
128
1. 两者分别是什么？ Apache Hive是一个构建在Hadoop基础设施之上的数据仓库。通过Hive可以使用HQL语言查询存放在HDFS上的数据。HQL是一种类SQL语言，这种语言最终被转化为Map/Reduce. 虽然Hive提供了SQL查询功能，但是Hive不能够进行交互查询--因为它只能 ...
分类：
其他好文 时间：
2018-12-23 22:15:11
阅读次数：
210
