码迷,mamicode.com
首页 >  
搜索关键字:hadoop是什么    ( 61个结果
入门Hadoop---Hadoop是什么?
简单概括:Hadoop是由Apache组织使用Java语言开发的一款应对大数据存储和计算的分布式开源框架。 Hadoop的起源 2003-2004年,Google公布了部分GFS和MapReduce思想的细节,受此启发的Doug Cutting等人用2年的业余时间实现了DFS和MapReduce机制 ...
分类:其他好文   时间:2019-09-15 10:32:13    阅读次数:141
HDFS读写原理
Hadoop 是什么 Hadoop 是一个开源的大数据框架同时也是一个分布式计算的解决方案。Hadoop = HDFS (分布式文件系统)+MapReduce(分布式计算) HDFS HDFS 概念 数据块 NameNode DataNode 数据块: 数据块是一个抽象的块,而不是整个文件。默认大小 ...
分类:其他好文   时间:2019-08-25 12:00:12    阅读次数:120
大数据平台CDH搭建学习(5.10.0)
又是一个周末,本来是已经打开wegame,更新一下许久未碰的lol,后来实在等不下去了,还是想想写写博客,正好最近也在学习CDH;刚刚就像女生买东西一样,毫不犹豫地买了3个云主机,好了,废话不多说,下面我们正式开始CDH搭建大数据平台。 一、Hadoop是什么? Hadoop是一个分布式系统架构,由 ...
分类:其他好文   时间:2019-08-10 09:20:16    阅读次数:494
大数据技术之_03_Hadoop学习_01_入门_大数据概论+从Hadoop框架讨论大数据生态+Hadoop运行环境搭建(开发重点)
第1章 大数据概论1.1 大数据概念1.2 大数据特点(4V)1.3 大数据应用场景1.4 大数据发展前景1.5 大数据部门业务流程分析1.6 大数据部门组织结构(重点)第2章 从Hadoop框架讨论大数据生态2.1 Hadoop是什么2.2 Hadoop发展历史2.3 Hadoop三大发行版本2. ...
分类:其他好文   时间:2019-01-29 20:33:45    阅读次数:228
什么是hadoop
面试现在这家公司的时候,领导说有意让我接触大数据这块的项目,当时可把我高兴的。虽然来这快两年了也没接触大数据,词倒是听了几个。hadoop念着挺顺口,到底是个什么东西呢。搜索了一波,总结如下。 hadoop是什么? Hadoop就是一个分布式计算的解决方案. 能看懂吗。看不懂的继续往下看看 hado ...
分类:其他好文   时间:2019-01-18 16:23:25    阅读次数:216
Hadoop课程
作者:gqk 1,Hadoop的前世今生: 2,hadoop是什么: Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS,Hadoop的框架最核心的设计就是:HDFS和MapReduce。HDFS为海量的数据提供了存储,则MapRedu ...
分类:其他好文   时间:2018-09-05 17:47:59    阅读次数:146
以MapReduce编程五步走为基础,说MapReduce工作原理
在之前的Hadoop是什么中已经说过MapReduce采用了分而治之的思想,MapReduce主要分为两部分,一部分是Map——分,一部分是Reduce——合MapReduce全过程的数据都是以键值对的形式存在的如果你想了解大数据的学习路线,想学习大数据知识以及需要免费的学习资料可以加群:784789432.欢迎你的加入。每天下午三点开直播分享基础知识,晚上20:00都会开直播给大家分享大数据项目
分类:其他好文   时间:2018-06-15 22:43:07    阅读次数:183
20180521早课记录14-Hadoop
1.hadoop是什么狭义:Hadoop软件(HDFS、MapReduce、Yarn)广义:以hadoop为主的生态圈2.hadoop三大组件是什么?分别做什么HDFS:分布式文件管理系统存储MapReduce:执行引擎计算Yarn:资源(memorycpu)和作业调度平台资源3.hdfs在部署时,要配置信任关系,请问root和hadoop用户部署时,区别是什么注意authorized_keys权
分类:其他好文   时间:2018-05-21 14:44:20    阅读次数:167
Hadoop初探
前言 Hadoop是什么? 用百科上的话说:“Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。” 可能有些抽象,这个问题可以在一步步学习Hadoop的各种知识以后再回过头来重新看待。 Ha ...
分类:其他好文   时间:2018-05-17 15:59:49    阅读次数:152
一文读懂大数据两大核心技术
今天小编给大家先分享一下大数据的两大核心技术,知己知彼才能百战不殆,学习大数据技术也是一样的道理,要先有一个清晰的了解,才能确保自己全身心的投入学习。 Hadoop是什么? Hadoop在2006年开始成为雅虎项目,随后晋升为顶级Apache开源项目。它是一种通用的分布式系统基础架构,具有多个组件: ...
分类:其他好文   时间:2018-04-13 20:40:14    阅读次数:165
61条   上一页 1 2 3 4 ... 7 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!