为了进一步打造提升(大数据躺过的坑)本微信公众平台的博文高质量水平,特邀请善于分享、主动、敢于专研尝试新技术新领域的您,一起共同维护好我们的知识小天地。目前涉及领域有:大数据领域:Hadoop、Hive、HBase、Zookeeper、Flume、Sqoop、Kafka、Spark、Storm、Ze ...
分类:
微信 时间:
2018-05-31 14:37:52
阅读次数:
383
前面博客 全网最详细的Git学习系列之介绍各个Git图形客户端(Windows、Linux、Mac系统皆适用ing)(图文详解) 全网最详细的Git学习系列之安装各个Git图形客户端(Windows、Linux、Mac系统皆适用ing)(图文详解) 使用 Git命令有时候确实不怎么方便,特别是每次都 ...
分类:
其他好文 时间:
2018-05-31 14:36:56
阅读次数:
336
不多说,直接上干货! 这里,怎么创建,见 Spark编程环境搭建(基于Intellij IDEA的Ultimate版本)(包含Java和Scala版的WordCount)(博主强烈推荐) 这里, 我重点说下spark项目,因为,对于hadoop这样的,我已经写了大量博客了。 比如,我目前用得较多的s ...
分类:
其他好文 时间:
2018-05-31 13:45:44
阅读次数:
193
首先,对于Apache Kylin的安装,我有话要说。 由于Apache Kylin本身只是一个Server,所以安装部署还是比较简单的。但是它的前提要求是Hadoop、Hive、HBase必须已经安装且能正常工作。 以下,是我集群环境的情况 Apache kylin的官网安装文档 注意:本博文,立 ...
分类:
Web程序 时间:
2018-05-31 13:44:00
阅读次数:
342
为什么要写这篇博客? 首先,对于spark项目,强烈建议搭建,用Intellij IDEA(Ultimate版本),如果你还有另所爱好尝试Scala IDEA for Eclipse,有时间自己去玩玩。但最好追随大流。 对于hadoop项目,强烈建议用eclipse。 其次,出于有博友给我留言的索求 ...
分类:
编程语言 时间:
2018-05-31 13:43:53
阅读次数:
273
第一步:卸载CentOS中自带openjdk Centos 6.5下的OPENJDK卸载和SUN的JDK安装、环境变量配置 第二步:安装Intellij IDEA 若是3节点如,master、slave1、slave2,则建议将其安装在master节点上 到https://www.jetbrains ...
分类:
系统相关 时间:
2018-05-31 13:43:20
阅读次数:
247
kettle的下载 ?Kettle可以在http://kettle.pentaho.org/网站下载 http://sourceforge.net/projects/pentaho/files/Data%20Integration/7.1/pdi-ce-7.1.0.0-12.zip/download ...
前期博客 hadoop-2.6.0.tar.gz + spark-1.6.1-bin-hadoop2.6.tgz + zeppelin-0.5.6-incubating-bin-all.tgz(master、slave1和slave2)(博主推荐)(图文详解) hadoop-2.7.3.tar.gz ...
分类:
其他好文 时间:
2018-05-31 13:20:11
阅读次数:
219
大数据领域两大最主流集群管理工具Ambari和Cloudera Manger Cloudera安装搭建部署大数据集群(图文分五大步详解)(博主强烈推荐) Ambari安装搭建部署大数据集群(图文分五大步详解)(博主强烈推荐) 前期博客 CDH版本大数据集群下搭建Hue(hadoop-2.6.0-cd ...
分类:
其他好文 时间:
2018-05-31 13:18:44
阅读次数:
878
不多说,直接上干货! 直接yum install mysql的话会报错,原因在于yum安装库里没有直接可以用的安装包,此时需要用到MariaDB了,MariaDB是MySQL社区开发的分支,也是一个增强型的替代品。 安装ossec时需要使用到mysql-server,直接安装报错: 原因是yum安装 ...
分类:
数据库 时间:
2018-05-28 00:59:42
阅读次数:
942