1:Spark生态和安装部署
Spark生态
Spark(内存计算框架)
SparkSteaming(流式计算框架)
Spark SQL(ad-hoc)
Mllib(Machine Learning)
GraphX(bagel将被取代)
安装部署
Spark安装简介
Spark的源码编译
Spark Standalone安装
Spark Standalone H...
分类:
其他好文 时间:
2014-07-22 00:27:35
阅读次数:
317
优化后的代码: public static class Converter { /// /// 转换为其他继承IConvertible的类型 /// /// 转换的类型 /// 要转换的值 /// 是否成功 /// public static T To(this IC...
分类:
其他好文 时间:
2014-07-21 14:24:50
阅读次数:
255
1.xml可扩展标记语言(Extensible Makeup Language)最简单的声明语法: 用encoding属性说明文档的字符编码: 用standalone属性说明文档是否独立: 格式良好的XML文档必须有且仅有一个根标签,其它标签都是这个根标签的子孙标签2.在编写XML文件时,有些内容可...
分类:
其他好文 时间:
2014-07-20 23:04:46
阅读次数:
318
questionI'm playing with a standalone ruby application and can't configure Mongoid 3.0.13 to work.I've run across a couple example apps that have conf...
分类:
其他好文 时间:
2014-07-19 15:29:05
阅读次数:
260
前言: spark最近非常的火热, 本文不讲spark原理, 而是研究spark集群搭建和服务的脚本是如何编写的, 管中窥豹, 希望从运行脚本的角度去理解spark集群. 研究的spark为1.0.1版. spark集群采用standalone模式搭建, 其基础架构为master-slave(w.....
分类:
其他好文 时间:
2014-07-17 23:26:44
阅读次数:
345
使用ESXi经常会遇到这样的问题,我需要建立多个虚拟机,都是linux操作系统,难道必须一个一个安装吗? VMware ESXi、VMware vCenter Server 和 vSphere Client,它们分别是 vSphere 的虚拟化层、管理层和接口层。作为接口层的vSphere Clie...
分类:
其他好文 时间:
2014-07-16 18:57:23
阅读次数:
288
VMware接入Openstack方案分析
在Openstack中Nova项目中目前有两个VMware相关的Driver(ESXDriver,VCDriver)。
从名字上可以清楚的看出来,一个是涉及ESX的Driver,一个是涉及VCenter的Driver。
ESXDriver最早是由Citrix贡献的,VCDriver由Vmware提供。
ESXDriver将ESX作为Hypervi...
分类:
其他好文 时间:
2014-07-16 17:12:43
阅读次数:
306
前言: CDH4不带yarn和spark, 因此需要自己搭建spark集群. 这边简单描述spark集群的安装过程, 并讲述spark的standalone模式, 以及对相关的脚本进行简单的分析.spark官网: http://spark.apache.org/downloads.html*)安装....
分类:
其他好文 时间:
2014-07-16 16:56:22
阅读次数:
235
1首先使用VMwareconverter将vCenter虚拟机转换为vmware工作站2转换的过程虚拟机需要关机34要保证你的存储位置有足够的空间5确认一下信息6转换完毕7将转换完毕的vmware虚拟机文件拷贝到一台windows服务器上8将这台服务器添加为一个VMM库服务器9101112选择转换虚拟机131415定义一..
分类:
其他好文 时间:
2014-07-16 16:44:16
阅读次数:
258
前言本次安装的CentOS是在vCenter中克隆出来的。这样就存在一下问题:问题一:MAC冲突问题描述:可能克隆的系统的网卡eth0与克隆前的系统一直,会造成MAC冲突;解决办法:1、修改cat/etc/udev/rules.d/70-persistent-net.rules中的MAC2、到cd/etc/sysconfig/network-scripts/中..
分类:
其他好文 时间:
2014-07-14 12:27:15
阅读次数:
333