1.集群的数据迁移 在工作中经常会遇到redis集群的扩容的场景，因为当一个集群服务器中的内存不够用无法支撑更大数据量的缓存或者并发量不够（个人理解），就会将原有的集群扩展。集群扩容需要将集群中原有的master节点上的槽位以及数据迁移到新加入的master节点上。 每个槽都把要里面的数据迁移完才能 ...
分类：
其他好文 时间：
2020-10-09 21:40:42
阅读次数：
46
1.需要安装redis/rediscluster #!/usr/bin/env python3.7.4 # -*- coding:utf-8 -*- # # File: rds2rdsCluster.py # Project: 将单点redis的数据迁移到cluster # Author: Aven ...
分类：
其他好文 时间：
2020-09-23 23:56:52
阅读次数：
56
https://www.yuque.com/cdhongit/wzu20x Sqoop 数据迁移工具 由于传统数据库的成熟以及广泛的应用，目前大多数场景下数据管理与分析系统都是建立在关系型数据库基础之上的，数据的采集、加工、处理都是在关系型数据库总完成的。要实现大数据的处理与分析还需要把数据从关系型 ...
分类：
其他好文 时间：
2020-09-18 03:34:42
阅读次数：
44
概述平常在请求服务的时候，负载均衡一般会用到随机访问，但是随机访问的缺点是负载不均衡，有的服务请求的次数多，有的少；轮询，请求分配均衡，但是如果性能好的机器，想多分配些不行，导致资源白白浪费；权重轮询，权重静态配置，不灵活。hash取模策略，如果某台机器宕机，就会导致返回服务失败。分库分表的时候采取hash取模，如果是增加机器或者是减少机器，数据迁移就会全局迁移，因为机器数据增加或者减少，导致取模
分类：
编程语言 时间：
2020-09-18 00:48:54
阅读次数：
48
MySQL是世界上最流行的开源关系数据库，带货直播源码使用MySQL，可实现分钟级别的数据库部署和弹性扩展，不仅经济实惠，而且稳定可靠，易于运维。云数据库MySQL提供备份恢复、监控、容灾、快速扩容、数据传输等全套解决方案，简化了带货直播源码数据库运维工作，能更加专注于带货直播源码的业务发展。带货直播源码一、易于使用的托管部署带货直播源码需要的存储业务，只需在MySQL管理控制台中单击几下，即可在
分类：
数据库 时间：
2020-09-17 22:14:35
阅读次数：
34
input { stdin{ } elasticsearch { hosts => ["http://127.0.0.1:9200"] user => "admin" index => "*" password => "admin" #设置为true，将会提取ES文档的元数据信息，例如index、t ...
分类：
其他好文 时间：
2020-09-17 21:46:29
阅读次数：
33
最近做了greenplum 4.3 --> greenplum 6.9 的迁移升级, 踩坑无数, 先写个总结: 迁移方案: 构建新集群, 再将老集群数据迁移到新集群。 坑 自带的gptransfer不能用, 执行时会报一个参数不存在。 最终只能回到原始的pg_dump。 理想的方式是gptransf ...
分类：
其他好文 时间：
2020-09-14 18:51:04
阅读次数：
50
1.问题背景 最近测试用mongoshake工具做MongoDB数据迁移,mongoshake在迁移完成提供了一个脚本comparison.py来做数据校验,在校验过程中发现结果比对存在一个库数据不一致,下意识以为mongoshake存在缺陷导致迁移丢数据,理论上这种基础功能不应该存在错误,多次重新 ...
分类：
数据库 时间：
2020-08-17 17:01:03
阅读次数：
80
一、redis集群节点修改 #添加和删除节点的流程 1.新节点添加槽位 2.源节点中的数据进行迁移 3.源节点数据迁移完毕 4.迁移下一个槽位的数据，依次循环 1.添加节点 1）准备新机器 [root@db02 ~]# mkdir /service/redis/{6381,6382} [root@d ...
分类：
其他好文 时间：
2020-08-07 21:42:57
阅读次数：
70
.net core出来已经有很长一段时间了，而EentityFrameworkCore（后面简称EFCore）是.net framework的EntityFramework在.net core中的实现，至于EntityFramework是什么，这里就不介绍了。 本文主要介绍EFCore的CodeFi ...
分类：
其他好文 时间：
2020-07-27 23:59:58
阅读次数：
139
