hue启动coordinator时报错,页面返回undefinied错误框: 后台日志报错: runcpserver.log 解决方法: /opt/cloudera/parcels/CDH-5.16.1-1.cdh5.16.1.p0.3/lib/hue/apps/oozie/src/oozie/mo ...
分类:
其他好文 时间:
2019-05-13 20:11:36
阅读次数:
245
/opt/cloudera/parcels/CDH/lib/hue/apps/beeswax/src/beeswax/conf.py ...
分类:
其他好文 时间:
2019-05-13 10:38:50
阅读次数:
209
一、部署可参考文档:http://archive.cloudera.com/cdh5/cdh/5/oozie-4.0.0-cdh5.3.6/DG_QuickStart.html1、解压oozie安装包:oozie-4.0.0-cdh5.3.6-src.tar.gzext-2.2.zip##解压[ro... ...
分类:
其他好文 时间:
2019-05-10 15:10:31
阅读次数:
162
一、定义agent,并运行1、配置文件#计划##收集hive的日志,存到hdfs/opt/cdh-5.3.6/hive-0.13.1-cdh5.3.6/logs/hive.log命令:tail -f source:Exec source 在启动时运行一个给定的Unix命令,并期望该进程在标准输出上不... ...
分类:
其他好文 时间:
2019-05-08 14:44:10
阅读次数:
214
包下载: 步骤: 集成spark CDH版本是5.14.0 spark安装版本是:2.1.0 包下载: parcel包下载 http://archive.cloudera.com/spark2/parcels/ 安装spark2 还要注意的是:在spark historyserver这台机器上,创建 ...
分类:
其他好文 时间:
2019-05-08 13:20:31
阅读次数:
159
一、安装sqoop1、解压##解压[root@hadoop-senior cdh]# tar zxf sqoop-1.4.5-cdh5.3.6.tar.gz -C /opt/cdh-5.3.6/2、/opt/cdh-5.3.6/sqoop-1.4.5-cdh5.3.6/conf/sqoop-env.... ...
分类:
其他好文 时间:
2019-05-06 16:05:55
阅读次数:
169
大数 据 主要 具有 四方 面的 典型 特征—— 规模 性( Volume)、 多样性( Variety)、 高速 性( Velocity) 和 价值 性( Value), 即 所谓 的" 4V"。 大数据时代的关键技术:(1) 大数 据 采集 技术(2) 大 数据 预处理 技术(3) 大数 据 存... ...
分类:
其他好文 时间:
2019-05-03 18:46:39
阅读次数:
288
Apache Hadoop的服务的部署比較繁琐。须要手工编辑配置文件、下载依赖包等。Cloudera Manager以GUI的方式的管理CDH集群,提供向导式的安装步骤。因为须要对Hive,HBase,Impala,Spark进行功能測试,就採用了Cloudera Manager方式进行安装。 Cl ...
分类:
其他好文 时间:
2019-04-23 09:17:26
阅读次数:
362
linux内核高级优化脚本可以用于hadoop生态圈环境的组件安装linux内核调优具体的每一步的解释请参考03搭建cdh备注:使用与centos6和centos7两个系统版本执行[root@lb01scripts]#pwd/opt/scripts[root@lb01scripts]#lltotal12-rw-r--r--1rootroot3837Apr2214:34adlinuxopt.sh-r
分类:
系统相关 时间:
2019-04-22 15:21:16
阅读次数:
256
cdh版本:5.14主要参照官方文档:https://www.cloudera.com/documentation/enterprise/5-14-x/topics/sentry.html一.部署sentry服务1.配置:官方建议将hivemetastore的heapsize至少设为10GB:SettheHMSheapsizetoatleast10GB.Thisisrequiredbecauseb
分类:
其他好文 时间:
2019-04-15 19:55:11
阅读次数:
826