数据库常用架构和同步工作原理:服务器: 一主多从 适用于读取操作比较多的数据库 双机热备 一台主服务器,一台备用服务器,主服务器把用户操作记录到二进制文件中,备用服务器复制 数据库分库分表设计方法:单表或者库数据量太大或者硬件不能升级或者无法升级业务拆分:如 :用户,商品,订单垂直拆分:如:床上用品 ...
分类:
数据库 时间:
2021-07-26 16:41:04
阅读次数:
0
一、页目录和槽 接上一篇,现在知道记录在页中按照主键大小顺序串成了单链表。 那么我使用主键查询的时候,最顺其自然的办法肯定是从第一条记录,也就是 Infrimum 记录开始,一直向后找,只要存在总会找到。这种在数据量少的时候还好说,一旦数据多了,遍历耗时一定非常长。 于是,作者又想到了一个好办法,灵 ...
分类:
数据库 时间:
2021-07-26 16:37:12
阅读次数:
0
内存不够: 1,确认系统已占用内存是否正常,排除数据量过大导致的问题,此时系统内存不足导致 std::bad_alloc 内存剩余: 1,确认接口调用时,调用和背调接口的的参数是否一致,动态库库调用中若不一致,编译链接通过,但执行可能导致 std::bad_alloc 2,确认是否使用vector, ...
这是一个SpringBoot框架,使用了r2dbc持久化层,mysql 5.7数据库,证明了一小时可insert六百万数据。r2dbc连接池设置:initial 20, max 200. 以下是jmeter压测工具截图,150个用户,间隔10秒,无限循环: 右上角: 01:00:15 执行时长 Sa ...
分类:
数据库 时间:
2021-07-06 16:22:29
阅读次数:
0
一个 Pg_dump SHELL 脚本 发表于 2010-11-23 | 分类于 PG备份与恢复 | 0 | 阅读次数: 518 最近有个处于开发阶段的项目需要DBA介入,希望DBA对这个项目的数据库进行备份。要到主机帐号后,先对数据库进行一翻熟悉,发现上面有虽然有9个库,但是数据量都不大,除了一个 ...
分类:
系统相关 时间:
2021-07-05 18:21:42
阅读次数:
0
1 5个MySQL使用问题 1)关于count(*) 知识点:MyISAM会直接存储总行数,InnoDB则不会,需要按行扫描。 潜台词是,对于select count(*) from t; 如果数据量大,MyISAM会瞬间返回,而InnoDB则会一行行扫描。 实践:数据量大的表,InnoDB不要轻易 ...
分类:
数据库 时间:
2021-07-02 15:38:31
阅读次数:
0
单细胞转录组 从研究方向看上,发育生物学、免疫、神经生物学、肿瘤是排名靠前的方向,这和我们平时遇到的高频研究方向基本吻合。另外,作为一个新兴的领域,10X 单细胞转录组检测到细胞多,数据庞大,信息复杂,对数据分析带来诸多困难,因此算法类的文章(Computational method)也高达76篇。 ...
分类:
其他好文 时间:
2021-07-01 16:24:49
阅读次数:
0
升级原因 5.7版本的MGR多主模式存在比较严重的问题,无法预知和监控的认证故障,会导致部分行数据无法修改,故急需升级至8.0 升级流程 原集群有5个节点,首先扩容一个5.7.24的节点,将其升级为8.0.20的实例(注意参数的变化,如果数据量比较小,可以采用导出导入的方式,由于mysql8升级非常 ...
分类:
其他好文 时间:
2021-06-30 17:59:42
阅读次数:
0
索引是数据库中用来提高查询效率的一种数据结构,在mysql中的索引默认采用B+树的数据结构,如果没有索引,执行查询时, mysql必须扫描整张表的记录 ,直至找到所有符合要求的记录,在数据量比较大时,这样做会带来需要开销。如果作为搜索条件 的列上带有索引,则mysql可以通过索引结构迅速得到符合要求 ...
分类:
数据库 时间:
2021-06-29 16:10:29
阅读次数:
0
一、项目背景 目前后端接口几乎都完成了自动化梳理,每天定时跑所有的自动化接口,项目上线前手动跑接口,进行接口回归。虽然跑出来数据量很大,能再单次运行中,看到结果。但是如此大的数据,频率也大的情况下。将这些数据分析下,以图表的形式展示出来,会更加直观的看到后端接口的问题,看到我们所有的数据。 二、技术 ...
分类:
其他好文 时间:
2021-06-28 19:59:49
阅读次数:
0