一 、 Hadoop 集群架构设计 二 、 搭建集群 修改IP地址与hostname以及部署zookeeper、hadoop见上一篇博文《Hadoop 完全分布式搭建》。 三 、修改配置文件 修改nna上的core-site.xml <configuration> <!-- 指定hdfs的names ...
分类：
其他好文 时间：
2021-01-19 12:16:24
阅读次数：
0
订单多任务处理 能够让生产者的横向扩展，支持多个服务器； 生产者集群架构，消费端集群架构； 同一个队列的话，消息是被瓜分掉的 设置均衡消费端： channel.BasicQos(0, 1, false); //预取数量设置为1个; 设置false nuget ： 1. 生产者 using Rabbi ...
分类：
其他好文 时间：
2021-01-19 12:11:54
阅读次数：
0
传统微服务架构 在微服务模式下，企业内部服务少则几个到几十个，多则上百个，每个服务一般都以集群方式部署，这时自然产生两个问题： 一、服务发现：服务的消费方(Consumer)如何发现服务的提供方(Provider)？ 二、负载均衡：服务的消费方如何以某种负载均衡策略访问集群中的服务提供方实例？ 三种 ...
分类：
其他好文 时间：
2021-01-18 11:37:22
阅读次数：
0
跨集群数据迁移 用户在腾讯云上自建的ES集群或者在其它云厂商购买的ES集群，如果要迁移至腾讯云ES，用户可以根据自己的业务需要选择适合自己的迁移方案。如果业务可以停服或者可以暂停写操作，可以参考离线迁移的四种方案。 离线迁移 离线迁移需要先停止老集群的写操作，将数据迁移完毕后在新集群上进行读写操作。 ...
分类：
其他好文 时间：
2021-01-18 10:40:16
阅读次数：
0
解决Hadoop HA集群 NameNode 无法自动故障转移（切换active） 在学习 HA 自动化配置，按照hadoop官网:https://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-hdfs/HDFSHighAvaila ...
分类：
其他好文 时间：
2021-01-15 12:13:12
阅读次数：
0
Clickhouse写入问题汇总 Zookeeper相关 当clickhouse在建表时使用了Replicated引擎族时, 会对zookeeper有非常重的依赖, 这时候就要注意zookeeper集群的一些优化项. clickhouse集群两分片两副本(4C8G),实测每分钟80W数据量的情况下, ...
分类：
其他好文 时间：
2021-01-15 11:41:46
阅读次数：
0
1.什么是脑裂？ 所谓脑裂问题（类似于精神分裂），就是同一个集群中的不同节点，对于集群的状态有了不一样的理解。 2.哨兵模式造成的redis脑裂现象原因？ 举例（1主1从2哨兵的情况）,由于网络原因或者一些特殊原因，哨兵失去了对master节点器的感知，将会通过选举进行故障转移，将slave节点提升 ...
分类：
其他好文 时间：
2021-01-14 11:30:39
阅读次数：
0
1、业务隔离 不同的业务使用不同的redis集群，或者协议使用redis的不同db。 2、良好的Redis Key的设计 格式：业务标识：系统名称：模块名称：关键词简写 比如：保险：用户管理：用户申请：手机号 Redis Key：bx:um:reg:mobile 以上在实际的生产环境中，应该同时存在 ...
分类：
其他好文 时间：
2021-01-14 10:52:46
阅读次数：
0
1. Nacos下载路径：https://github.com/alibaba/nacos/releases 2. 放到自己可以找到的目录下，解压，目录情况如下 3. 进入conf文件夹，配置Nacos a. 数据库初始化 新建名称为“nacos”的数据库，数据库名称可以随意。 友情提示：请注意数据 ...
刚刚我们成功部署了一个ASP.NET Core WebAPI项目到K8S集群中，由于在yaml中我们设置了两个Pod副本，他们分别运行在了k8s-node1和k8s-node2中： 这里我们来看看整个部署的过程，大体上过一遍流程，能够有个大概印象就可以，下图主要参考自CloudMan的《每天5分钟玩 ...
分类：
其他好文 时间：
2021-01-13 11:28:46
阅读次数：
0
