spark是个啥?Spark是一个通用的并行计算框架,由UCBerkeley的AMP实验室开发。Spark和Hadoop有什么不同呢?Spark是基于map reduce算法实现的分布式计算,拥有Hadoop MapReduce所具有的优点;但不同于MapReduce的是Job中间输出和结果可以保存...
分类:
其他好文 时间:
2015-03-20 12:49:49
阅读次数:
306
1 运行模式:单机模式(standalone): 单机模式是Hadoop的默认模式。当首次解压Hadoop的源码包时,Hadoop无法了解硬件安装环境,便保守地选择了最小配置。在这种默认模式下所有3个XML文件均为空。当配置文件为空时,Hadoop会完全运行在本地。因为不需要与其他节点交互,单机模式...
分类:
其他好文 时间:
2015-03-18 17:55:24
阅读次数:
124
一、Hadoop的运行模式单机模式(standalone)
单机模式是Hadoop的默认模式。当首次解压Hadoop的源码包时,Hadoop无法了解硬件安装环境,便保守地选择了最小配置。在这种默认模式下所有3个XML文件均为空。当配置文件为空时,Hadoop会完全运行在本地。因为不需要与其他节点交互,单机模式就不使用HDFS,也不加载任何Hadoop的守护进程。该模式主要用于开发调试MapRedu...
分类:
系统相关 时间:
2015-03-18 14:04:49
阅读次数:
213
需要在windows2008R2或者windows2012R2系统中进行安装,插入vCenter安装光盘或加载ISO文件
安装欢迎界面
选择接受许可协议
部署模式,中小规模时选择嵌入式部署,大规模是可以将PlatformServicesController进行外部部署
输入本机的FQDN名称或者IP地址
..
安装vClient一、打开vCenterServer6.0安装光盘的引导程序,选择“vSphereClient”,然后单击“安装”二、正在解压安装包三、选择安装语言,默认即可,单击“确定”四、正在解压安装包五、vClient的安装向导,单击“下一步”六、选择“我接受许可协议中的条款”,单击“下一步”..
分类:
系统相关 时间:
2015-03-17 18:13:43
阅读次数:
434
机器准备 笔者有三台机器,左侧栏为ip,右侧为hostname,三台机器都有一个名为spark的用户。 192.168.248.150?spark-master
192.168.248.153?ubuntu-worker
192.168.248.155?spark-worker1 根据机器信息加入到...
分类:
其他好文 时间:
2015-03-17 08:15:16
阅读次数:
143
VmwarevCenterServerAppliance是基于SUSELinux的vCenter应用程序,用来管理ESXi主机和虚拟机。本次安装主要信息ESXi地址:192.168.200.11/24VCSA地址:192.168.200.251/24网关及DNS:192.168.200.1安装ESXi6.0将ISO文件刻录成光盘,然后插入到要安装ESXi的物理服务器的DVD光驱..
分类:
移动开发 时间:
2015-03-17 02:11:04
阅读次数:
363
当然,在作模板的过程中,我们除了要定义好SELINUX,IPTABLES之后,HOSTS文件维护,用ZOOKEEPER还是RSYNC实现?都要在前期好好规划。。脚本如下,一般改成自己的就可以用。现在就是看看如何进行一次性脚本运行,而不需要手工参与,就全自动啦。。#!/bin/bash#此脚本实现从E...
分类:
其他好文 时间:
2015-03-16 00:57:36
阅读次数:
261
vCenterServer和vCenterServer服务的所有证书都存储在VMwareEndpoint证书存储(VECS)中。
分类:
其他好文 时间:
2015-03-15 07:12:49
阅读次数:
256
Spring 4.xThe first major version of Jackson is no longer supported in Spring 4. The class you want to use is noworg.springframework.http.converter.js...
分类:
移动开发 时间:
2015-03-14 12:23:20
阅读次数:
148