Hadoop CDH版本的安装:参考文档http://archive.cloudera.com/cdh5/cdh/5/hadoop-2.6.0-cdh5.7.0/ 下载地址:http://archive.cloudera.com/cdh5/cdh/5/ 安装的版本为:hadoop-2.6.0-cdh ...
分类:
其他好文 时间:
2020-02-13 19:31:10
阅读次数:
79
本篇介绍cdh安装之前需要的一些必要配置,当然这些配置也可以用shell脚本来配置。在安装之前请先配置好yum源,在文中用的统一都是阿里源。 系统:centos7 主机3台: master.com.cn 192.168.1.110 salver1.com.cn 192.168.1.111 salve ...
分类:
其他好文 时间:
2020-02-12 16:16:53
阅读次数:
106
1.环境 CDH 5.16.1 Spark 2.3.0 cloudera4 Kafka 2.1.0+kafka4.0.0 2.Log4j—— Flume 2.1 Log4j 产生日志 ~~~ import org.apache.log4j.Logger; / @ClassName LoggerGen ...
分类:
Web程序 时间:
2020-02-04 00:37:16
阅读次数:
104
1.环境 CDH 5.16.1 Spark 2.3.0.cloudera4 2.核心概念 官网: https://spark.apache.org/docs/2.3.0/streaming programming guide.html GitHub: https://github.com/apach ...
分类:
其他好文 时间:
2020-02-02 23:57:50
阅读次数:
161
1. 字符串的声明是使用 package main import "fmt" func main() { /* Go中的字符串是一个字节的切片。 可以通过将其内容封装在“”中来创建字符串。Go中的字符串是Unicode兼容的,并且是UTF-8编码的。 字符串是一些字节的集合。 理解为一个字符的序列。 ...
分类:
其他好文 时间:
2020-02-01 10:31:14
阅读次数:
86
thin 客户端的实例代码 示例 CDH PQS的相关设置 https://docs.cloudera.com/documentation/enterprise/6/6.2/topics/phoenix_configuring_pqs.html kerberos 401:https://server ...
分类:
其他好文 时间:
2020-01-14 00:00:37
阅读次数:
144
1 解压软件包 2 copy server包到对应节点 3 scp /mnt/software/phoenix-4.14.1-cdh5.16.1-server.jar hadoop002:/opt/cloudera/parcels/CDH/lib/hbase/lib/ 4 添加配置 <propert ...
分类:
其他好文 时间:
2020-01-12 13:34:10
阅读次数:
105
首先要有HIVE_HOME环境变量, 如果是apache,直接配置为解压目录;如果是CDH,设置如下: # export HIVE_HOME=/opt/cloudera/parcels/CDH-5.16.1-1.cdh5.16.1.p0.3/lib/hive 执行导入 # bin/import-hi ...
分类:
其他好文 时间:
2020-01-11 16:58:15
阅读次数:
411
原文链接: 组件端口及说明 CDH 7180: Cloudera Manager WebUI端口7182: Cloudera Manager Server 与 Agent 通讯端口 Hadoop 50070:HDFS WEB UI端口8020 : 高可用的HDFS RPC端口9000 : 非高可用的 ...
分类:
其他好文 时间:
2020-01-07 19:56:27
阅读次数:
135
Python 是一门非常优美的语言,其简洁易用令人不得不感概人生苦短。在本文中,作者 Gautham Santhosh 带我们回顾了 17 个非常有用的 Python 技巧,例如查找、分割和合并列表等。这 17 个技巧都非常简单,但它们都很常用且能激发不一样的思路。 很多读者都知道 Python 是 ...
分类:
编程语言 时间:
2019-12-31 12:22:37
阅读次数:
78