Clickhouse写入问题汇总 Zookeeper相关 当clickhouse在建表时使用了Replicated引擎族时, 会对zookeeper有非常重的依赖, 这时候就要注意zookeeper集群的一些优化项. clickhouse集群两分片两副本(4C8G),实测每分钟80W数据量的情况下, ...
分类:
其他好文 时间:
2021-01-15 11:41:46
阅读次数:
0
1.什么是脑裂? 所谓脑裂问题(类似于精神分裂),就是同一个集群中的不同节点,对于集群的状态有了不一样的理解。 2.哨兵模式造成的redis脑裂现象原因? 举例(1主1从2哨兵的情况),由于网络原因或者一些特殊原因,哨兵失去了对master节点器的感知,将会通过选举进行故障转移,将slave节点提升 ...
分类:
其他好文 时间:
2021-01-14 11:30:39
阅读次数:
0
1、业务隔离 不同的业务使用不同的redis集群,或者协议使用redis的不同db。 2、良好的Redis Key的设计 格式:业务标识:系统名称:模块名称:关键词简写 比如:保险:用户管理:用户申请:手机号 Redis Key:bx:um:reg:mobile 以上在实际的生产环境中,应该同时存在 ...
分类:
其他好文 时间:
2021-01-14 10:52:46
阅读次数:
0
1. Nacos下载路径:https://github.com/alibaba/nacos/releases 2. 放到自己可以找到的目录下,解压,目录情况如下 3. 进入conf文件夹,配置Nacos a. 数据库初始化 新建名称为“nacos”的数据库,数据库名称可以随意。 友情提示:请注意数据 ...
刚刚我们成功部署了一个ASP.NET Core WebAPI项目到K8S集群中,由于在yaml中我们设置了两个Pod副本,他们分别运行在了k8s-node1和k8s-node2中: 这里我们来看看整个部署的过程,大体上过一遍流程,能够有个大概印象就可以,下图主要参考自CloudMan的《每天5分钟玩 ...
分类:
其他好文 时间:
2021-01-13 11:28:46
阅读次数:
0
cratedb 支持自定义函数,但是当前只有js 引擎(基于graalvm),而且需要企业license (当然我们可以使用免费的3节点的集群) 自定义函数格式 CREATE [OR REPLACE] FUNCTION function_name ( [ [arg_name] arg_type ] ...
分类:
数据库 时间:
2021-01-12 11:24:26
阅读次数:
0
hdfs 上传小文件到集群 上传大文件到集群 hdfs每个block默认为128m,大于128m的会进行分块存储,下载时为完整下载 文件在hdfs的实际路径 查看HDFS在磁盘存储文件内容 文件删除与验证 ...
分类:
其他好文 时间:
2021-01-12 11:13:14
阅读次数:
0
主从概念 ?个master可以拥有多个slave,?个slave?可以拥有多个slave,如此下去,形成了强?的多级服务器集群架构 master用来写数据,slave用来读数据,经统计:网站的读写比率是10:1 通过主从配置可以实现读写分离 master和slave都是一个redis实例(redis ...
分类:
其他好文 时间:
2021-01-12 10:40:05
阅读次数:
0
一.问题描述 某集群数据节点服务器频繁无法连接,服务器间出现可ping通但ssh无法连接的情况,使用带外地址登录后远程控制也无法显示正常界面,重启后会短暂恢复。 二.排查问题 重启服务器后检查服务器SSH状态均为正常,无奈只能去Redhat官网提case并sosreport收集日志等信息反馈后等待分 ...
分类:
系统相关 时间:
2021-01-11 10:32:06
阅读次数:
0
1、//配置分组主机 vim /etc/ansible/hosts 内容:# 方法一 主机+端口+密码 [webservers] 192.168.16.1 ansible_ssh_port=22 ansible_ssh_user=root ansible_ssh_pass="123456" # 方法 ...
分类:
其他好文 时间:
2021-01-08 11:23:03
阅读次数:
0