Spark运行模式 一:Spark 运行架构介绍 相关术语概念详解: Application:指的是用户编写的Spark应用程序,包含了一个Driver功能的代码和分布在集群中多节点上运行的Executor代码。 Driver:Spark中的Driver就是运行Application的main()函 ...
分类:
其他好文 时间:
2019-02-23 10:48:52
阅读次数:
205
环境搭建 目录结构(ad-eureka为子模块) --ad-spring-cloud --ad-eureka --pom.xml --pom.xml 主pom.xml <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://mave ...
分类:
其他好文 时间:
2019-02-11 21:41:46
阅读次数:
210
mysql 和Mongodb区别 MongoDB 一:基于分布式文件存储 二:高负载情况下添加更多节点 三:将数据存储于一个文档 MogoDB对事物的支持比较弱 MogoDB运维慢 mongodb与mysql命令对比 传统的关系数据库一般由数据库(database)、表(table)、记录(reco ...
分类:
数据库 时间:
2019-01-12 16:40:59
阅读次数:
215
环境准备:环境CentOS7安装了JDK1.8这里用的elasticsearch5.2.2为例,你也可以用5.6.1或者更高的版本参考之前的单节点模式http://blog.51cto.com/6989066/2334006(1)先确认slave节点与master节点之间SSH是否是通的,也就是确认节点之间已配置免密码登陆然后使用scp-r/opt/module/elasticsearch-5.2
分类:
其他好文 时间:
2019-01-03 23:08:04
阅读次数:
245
raft共识算法 分布式一致性问题 如果说,服务器只有一个节点,那么,要保证一致性,没有任何问题,因为所有读写都在一个节点上发生。那如果server端有2个、3个甚至更多节点,要怎么达成一致性呢?下面就来介绍其中一种分布式共识算法 raft算法 Raft是什么 1.历史背景 在讲Raft前,有必要提 ...
分类:
编程语言 时间:
2018-12-18 17:23:38
阅读次数:
299
原文链接:醒者呆的博客园,https://www.cnblogs.com/Evsward/p/eos boot.html 区块链公链都是基于p2p网络,本篇文章将建立一个多节点不同职责参与的EOS的测试网络,根据路上发现的可做文章的技术点大做文章。 关键字:EOS组网,全节点,交易确认,boot s ...
分类:
其他好文 时间:
2018-12-14 14:54:47
阅读次数:
154
很少在网上看到关于galera的生产应用实际样例的文章,此文章供大家参考。希望由此能把多节点数据库部署成功。galera和主从架构确实有了很多方便维护的地方,再也不用担心主从节点同步失效而带来数据丢失,数据不一致等问题。在生产用上galera架构以后数据库某个节点故障也不会再去锁表备份来达到主从可用,只需要重新修好节点重启数据库服务。剩下的就交给galera自动增量或者全量同步数据了。
分类:
数据库 时间:
2018-12-07 18:34:08
阅读次数:
267
已经写过一个openresty 使用lua-resty-shell 执行shell 脚本的demo,但是实际上我们可能是多节点运行, 同时需要负载均衡的机制。 lua-resty-shell 支持unix socket 以及tcp soket 的管理,但是在测试的时候发现tcp 有问题,所以只好 使 ...
分类:
系统相关 时间:
2018-12-07 11:51:33
阅读次数:
306
这是 UE4中行为树编辑器 中可用的默认节点。取决于开发项目的不同(如射击游戏),可能会有更多节点。这里介绍五种行为树节点类型: 节点类型 描述 Composite(流程控制节点) 这种节点定义一个分支的根以及该分支如何被执行的基本规则,含Selector、Sequence和Simple Paral ...
分类:
其他好文 时间:
2018-12-05 00:19:23
阅读次数:
496
一、NFS应用场景1、NFS(NetworkFilesystem)是一种基于TCP/IP传输的网络文件系统协议2、通过使用NFS协议,NFS客户机可以像访问本地目录一样访问远程NFS服务器中的共享资源。3、在企业群集架构的工作场景中,特别是中小型网站公司,NFS网络文件系统一般被用来存储共享视频、图片等静态资源文件。列如将网站用户上传的文件放到NFS共享里面,通过网络共享,让网络上的其他服务器能够
分类:
其他好文 时间:
2018-12-05 00:15:58
阅读次数:
488