1. 安装至少3台centos65虚拟机 2. 配置静态ip: $ vi /etc/sysconfig/network-scripts/ifcfg-eth0 ...
分类：
其他好文 时间：
2018-03-18 00:41:08
阅读次数：
157
在安装Spark之前，我们需要在自己的系统当中先安装上jdk和scala 可以去相应的官网上下载： JDK：http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html scala：http:/ ...
分类：
系统相关 时间：
2017-10-01 19:57:23
阅读次数：
247
Hive产生背景 1）MapReduce的编程不便，需通过Java语言等编写程序 2） HDFS上的文缺失Schema(在数据库中的表名列名等)，方便开发者通过SQL的方式处理结构化的数据，而不需要Java等编写程序 Hive是什么 1）facebook开源，最初为解决海量的结构化日志数据统计问题 ...
分类：
其他好文 时间：
2017-08-06 14:15:00
阅读次数：
238
spark 环境搭建 下载的压缩文件放在~/software/ 解压安装在~/app/ 一：分布式文件系统搭建HDFS 1，下载Hadoop HDFS环境搭建 使用版本：hadoop-2.6.0-cdh5.7.0 下载：wget http://archive.cloudera.com/cdh5/cd ...
分类：
其他好文 时间：
2017-07-18 10:03:51
阅读次数：
163
今天稍微没那么忙了，趁着这个时间，准备把spark的启动过程总结一下（），分享给大家。现在使用的spark1.4.1版本 当然前提是你已经把spark环境搭建好了。 1、我们启动spark的时候一般会使用官方提供的启动脚本，start-all.sh ,那我们先来看看，这个脚本做了什么。 # Star... ...
分类：
其他好文 时间：
2016-12-09 19:15:12
阅读次数：
167
首先到官网下载openfire+spark 下载地址：http://www.igniterealtime.org/downloads/index.jsp 选择MAC版下载dmg文件。 双击运行dmg文件，安装完成后，到finder->系统偏好设置->openfire->开启， 默认是开启的，然后点击 ...
分类：
移动开发 时间：
2016-07-02 11:39:31
阅读次数：
242
http://www.linuxidc.com/Linux/2015-02/113486.htm http://www.cnblogs.com/lijingchn/p/5574476.html http://www.linuxidc.com/Linux/2015-02/113486p2.htm ht ...
分类：
其他好文 时间：
2016-06-14 00:53:31
阅读次数：
122
使用Scala+IntelliJ IDEA+Sbt搭建开发环境提示搭建开发环境常遇到的问题：1.网络问题，导致sbt插件下载失败，解决方法，找到一个好的网络环境，或者预先从我提供的网盘中下载jar(链接：http://pan.baidu.com/s/1qWFSTze 密码：lszc)将下载的.ivy2压缩文件，解压后，放到你的用户目录下。2.版本匹配问题，版本不匹配会遇到各种问题，解决方法，按照如下...
分类：
其他好文 时间：
2015-08-04 13:28:25
阅读次数：
118
配置这个遇到太多问题了，写下来分享首先到官网下载openfire+spark下载地址：http://www.igniterealtime.org/downloads/index.jsp安装 openfire 后如果不是如下图就安装spark会弹出一个框点详细信息下载java环境，安装好，就会和下图一...
分类：
移动开发 时间：
2015-04-12 06:41:55
阅读次数：
174
