码迷,mamicode.com
首页 >  
搜索关键字:hadoop sqoop    ( 14272个结果
111
import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.*;import org.apache.hadoop.hbase.client.*;import org.apache.hadoop.hbase.ut ...
分类:其他好文   时间:2020-11-06 01:37:17    阅读次数:15
知乎 HBase 实践
知乎HBase实践前言HBase是一个基于Hadoop面向列的非关系型分布式数据库(NoSQL),设计概念来源于谷歌的BigTable模型,面向实时读写、随机访问大规模数据集的场景,是一个高可靠性、高性能、高伸缩的分布式存储系统,在大数据相关领域应用广泛.HBase系统支持对所存储的数据进行透明切分,从而使得系统的存储以及计算具有良好的水平扩展性.知乎从2017年起开始逐渐采用HBase系统存储各
分类:其他好文   时间:2020-11-06 01:07:32    阅读次数:22
Hbase配置手册
环境: 操作系统:ubuntu 12.10 64bit jdk:sun jdk 1.6 64bit hadoop:apache hadoop 1.02 hbase:apache hbase 0.92 先决条件:配置apache hadoop append,默认这个属性是false,需要设置为true ...
分类:其他好文   时间:2020-11-04 18:45:23    阅读次数:16
本文将大数据学习门槛降到了地平线
可能是Hadoop hdfs mapreduce最亲民的介绍
分类:其他好文   时间:2020-10-30 13:03:28    阅读次数:17
群起集群
配置 slaves [xiaoran@hadoop102 hadoop-2.7.2]$ vim etc/hadoop/slaves 添加(注意:一定不能有多余的空格和空行) hadoop102 hadoop103 hadoop104 同步所有节点配置文件 [xiaoran@hadoop102 had ...
分类:其他好文   时间:2020-10-29 10:44:54    阅读次数:27
hadoop基础概念之Hadoop核心组件
认知和学习Hadoop,我们必须得了解Hadoop的构成,我根据自己的经验通过Hadoop构件、大数据处理流程,Hadoop核心三个方面进行一下介绍: 一、 Hadoop组件 由图我们可以看到Hadoop组件由底层的Hadoop核心构件以及上层的Hadoop生态系统共同集成,而上层的生态系统都是基于 ...
分类:其他好文   时间:2020-10-29 10:11:31    阅读次数:19
Hadoop框架:HDFS高可用环境配置
在单点或者少数节点故障的情况下,集群还可以正常的提供服务,HDFS高可用机制可以通过配置Active/Standby两个NameNodes节点实现在集群中对NameNode的热备来消除单节点故障问题,如果单个节点出现故障,可通过该方式将NameNode快速切换到另外一个节点上。
分类:其他好文   时间:2020-10-29 09:35:04    阅读次数:15
启动YARN并运行MapReduce程序(伪分布式模式)
配置集群 配置yarn-env.sh Linux系统中获取JDK的安装路径 [xiaoran@hadoop101 hadoop-2.7.2]$ echo $JAVA_HOME /opt/module/jdk1.8.0_144 修改JAVA_HOME路径 [xiaoran@hadoop101 hado ...
分类:其他好文   时间:2020-10-27 11:36:17    阅读次数:28
Hadoop基础之环境搭建
Hadoop基础之环境搭建 环境搭建 本地环境 可以用于开发的单节点模式,没有分布式的概念 伪分布式环境 一个节点表示一整个集群,但是分布式的概念,一个节点充当分布式里的所有角色 完全分布式 一个集群中有N个节点,他们分别充当分布式中不同的角色,完成不同的任务 伪分布式环境搭建 下载安装包 Hado ...
分类:其他好文   时间:2020-10-26 11:17:07    阅读次数:16
国内大数据企业排名
数据仓库及管理——星环 Transwarp - 首页星环主要从事大数据时代核心平台数据库软件的研发与服务,是唯一被Gartner列为国际主流Hadoop发行版厂商。其产品Transwarp Data Hub提供高速SQL引擎Transwarp Inceptor, No...
分类:其他好文   时间:2020-10-24 11:51:18    阅读次数:41
14272条   上一页 1 ... 16 17 18 19 20 ... 1428 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!