Hadoop 服务划分 使用三台节点，集群部署规划如下 服务\主机 hadoop1 hadoop2 hadoop3 HDFS NameNode DataNode DataNode SecondaryNameNode DataNode YARN NodeManager ResourceManager ...
分类：
其他好文 时间：
2019-03-30 23:59:19
阅读次数：
346
一、一般我们在做压力测试的时候，分单场景和混合场景，单场景也就是咱们压测单个接口的时候，多场景也就是有业务流程的情况下，比如说一个购物流程，那么这样的场景就是混合场景，就是有多个接口一起来做操作。 1、单场景，一个请求就可以了 2、混合场景，多个请求 3、压测时间，一般场景都是运行10-15分钟，如 ...
分类：
系统相关 时间：
2019-03-25 21:57:58
阅读次数：
866
目前几乎很多大型网站及应用都是分布式部署的，分布式场景中的数据一致性问题一直是一个比较重要的话题。分布式的CAP理论告诉我们“任何一个分布式系统都无法同时满足一致性（Consistency）、可用性（Availability）和分区容错性（Partition tolerance），最多只能同时满足两 ...
分类：
其他好文 时间：
2019-03-18 01:00:06
阅读次数：
208
本文出自： http://www.cnblogs.com/austinspark-jessylu/p/8043726.html 目前几乎很多大型网站及应用都是分布式部署的，分布式场景中的数据一致性问题一直是一个比较重要的话题。分布式的CAP理论告诉我们“任何一个分布式系统都无法同时满足一致性（Con ...
分类：
其他好文 时间：
2019-03-08 17:06:39
阅读次数：
156
redis分布式部署 1.scrapy框架是否可以自己实现分布式？ - 不可以。原因有二。 其一：因为多台机器上部署的scrapy会各自拥有各自的调度器，这样就使得多台机器无法分配start_urls列表中的url。（多台机器无法共享同一个调度器） 其二：多台机器爬取到的数据无法通过同一个管道对数据 ...
分类：
其他好文 时间：
2019-03-06 20:42:10
阅读次数：
194
Q:一个业务服务器，一个数据库，操作：查询用户当前余额，扣除当前余额的3%作为手续费synchronizedlockdb lockQ：两个业务服务器，一个数据库，操作：查询用户当前余额，扣除当前余额的3%作为手续费分布式锁我们需要怎么样的分布式锁？可以保证在分布式部署的应用集群中，同一个方法在同一时 ...
分类：
数据库 时间：
2019-03-06 00:55:59
阅读次数：
271
概述 目前几乎很多大型网站及应用都是分布式部署的，分布式场景中的数据一致性问题一直是一个比较重要的话题。分布式的CAP理论告诉我们“任何一个分布式系统都无法同时满足一致性（Consistency）、可用性（Availability）和分区容错性（Partition tolerance），最多只能同时 ...
分类：
其他好文 时间：
2019-03-06 00:43:57
阅读次数：
173
一 官方 airflow官方分布式部署结构图 airflow进程 webserver scheduler flower（非必须） worker airflow缺点 scheduler单点 通过在scheduler的dags目录变动dag文件来提交流程 官方分布式部署方案 多个webserver 多个 ...
分类：
其他好文 时间：
2019-02-20 09:51:48
阅读次数：
154
一.介绍 前一篇,写的K8S部署环境的文章,下面正式开始部署ASP.NET Core 项目. 二.正式部署ASP.NET Core项目 GitHub地址: https://github.com/gyw1309631798/Deploy-API. 我创建了一个ASP.NET Core 2.1 WebA ...
分类：
Web程序 时间：
2019-02-17 20:19:26
阅读次数：
380
摘自： https://www.cnblogs.com/seesun2012/p/9214653.html 一、分布式 1、CAP理论 任何一个分布式系统都无法同时满足一致性（Consistency）、可用性（Availability）、分期容错性（Partition tolerance）最多同时只 ...
分类：
其他好文 时间：
2019-02-08 18:37:13
阅读次数：
149
