欢迎转载,转载请注明出处,徽沪一郎。概要本篇主要阐述在TaskRunner中执行的task其业务逻辑是如何被调用到的,另外试图讲清楚运行着的task其输入的数据从哪获取,处理的结果返回到哪里,如何返回。准备spark已经安装完毕spark运行在local mode或local-cluster mod...
分类:
其他好文 时间:
2014-07-07 14:20:42
阅读次数:
267
欢迎转载,转载请注明出处,徽沪一郎。楔子在Spark源码走读系列之2中曾经提到Spark能以Standalone的方式来运行cluster,但没有对Application的提交与具体运行流程做详细的分析,本文就这些问题做一个比较详细的分析,并且对在standalone模式下如何实现HA进行讲解。没有...
分类:
其他好文 时间:
2014-07-07 14:05:03
阅读次数:
352
环境中遇到了ora-00600 4000错误,涉及的对象即为cluster table,下面我这里简单模拟了一下。供参考!
++++创建测试表
?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
...
分类:
数据库 时间:
2014-07-03 13:47:38
阅读次数:
400
负载均衡是集群部署中的一种,通过多个节点来承担邮件服务的工作,每个获取Web页面的新请求都被动态路由到一个负载较低的节点上。即把负载压力根据某种算法合理分配到集群中的每一台计算机上,以减轻主服务器的压力,降低对主服务器的硬件和软件要求,适用于大容量用户使用。集群技术解析集群(Cluster)技术是指...
分类:
其他好文 时间:
2014-07-01 18:00:42
阅读次数:
267
配置mongodb分片群集(sharding cluster)Sharding cluster介绍这是一种可以水平扩展的模式,在数据量很大时特给力,实际大规模应用一般会采用这种架构去构建monodb系统。要构建一个 MongoDB Sharding Cluster,需要三种角色:Shard Serv...
分类:
数据库 时间:
2014-06-30 22:41:02
阅读次数:
285
故障重现:某集团准备测试使用SCVMM2012R2来管理当前企业内部异构虚拟环境及群集,计划测试后正式上线,测试途中,添加了一个现有的Hyper-v群集,But,添加失败了,在SCVMM中,无法删除失败的群集,而且继续添加群集。解决思路:首先尝试使用Powershell语句,强行Remove群集,..
分类:
其他好文 时间:
2014-06-29 21:11:05
阅读次数:
424
应用和数据库发展cluster还需要HA软件吗?所谓集群技术(cluster),也有译为群集,涵盖了三个技术方向:高可用HA(HighAvailability);负载均衡LB(LoadBalance);高性能运算HPC(HighPerformanceComputing)。对于商业领域的IT应用主要关心高可用HA和负载均衡LB这两部分。为..
分类:
数据库 时间:
2014-06-28 06:49:09
阅读次数:
396
mongod --port 10001 --logpath cluster/log/shard1.log --logappend --shardsvr -dbpath cluster/data/shard1 --directoryperdb --restmongod --port 10002 --l...
分类:
数据库 时间:
2014-06-27 13:39:45
阅读次数:
221
今天升级一个10g的集群环境到10.2.0.5,网上下载补丁包p8202632_10205_Linux-x86-64.zip,解压后安装执行,中途报错:
I/O ERROR cannt reading or opening file in /tmp/...../temp52
网上查资料如下:
根据MOS的说明,导致这个错误可能有如下原因:
a) Insufficient f...
分类:
数据库 时间:
2014-06-27 09:06:41
阅读次数:
267
??
oracle 10g/11g 命令对比,日志目录对比
oracle 11g 中不再建议使用的命令
Deprecated Command
Replacement Commands
crs_stat
crsctl check cluster -all...
分类:
数据库 时间:
2014-06-26 07:42:07
阅读次数:
530