Celery使用过程中的内存泄露问题问题描述celery异步任务在定时循环的执行异步任务，隔了半个月左右，收到内存告警的信息，连续一周内内存是在缓慢增加的。进行top命令查询内存的占用率是很高的如下图所示问题定位使用MemoryProfiler工具包进行debug，发现异步任务中存在内存增量的地方大多是发送request请求的地方。例如下面的例子Line#MemusageIncrementOccu
分类：
其他好文 时间：
2020-10-26 11:47:49
阅读次数：
33
达梦DB遇到的若干障碍管道连接超时“管道连接超时”问题由于提示信息非常少，令人费解。尤其按照网上方法仍无法解决后，就更令人难以捉摸了。此问题还可从下列2方面进行排查：1）如果关闭了DMAPService，请看情况1；2）如果用root进行了DM7安装，请看情况2。1.1.情况1，报错信息含有“DM_PIPE_DMAP_RD”或“DM_PIPE_DMAP_WR”这种情况，大多是因为关闭了DmAPSe
分类：
数据库 时间：
2020-10-21 20:54:11
阅读次数：
31
Canal是阿里巴巴旗下的一款开源项目，利用Java开发。主要用途是基于MySQL数据库增量日志解析，提供增量数据订阅和消费，目前主要支持MySQL。 ...
分类：
数据库 时间：
2020-10-20 16:24:09
阅读次数：
50
备份还原备份就是数据库在某一个时间点的副本数据库备份的目的：防止数据库丢失，防止天灾人祸（地震、火灾、人为操作、硬件故障）备份主要有：物理备份和逻辑备份物理备份主要备份的是使用过有效的数据页，逻辑备份主要是备份的数据库对象（表、视图）。物理备份：分为联机备份和脱机备份；完全备份和增量备份完全备份：备份的数据库或指定者表空间的全部数据。增量备份：是指在上一次全备或增备后，以后每次的备份只需要备份修改
分类：
其他好文 时间：
2020-10-18 16:21:05
阅读次数：
34
只需考虑每次加入后答案的增量，即增加的子串的答案。 发现有贡献的子串为 \(\text{border}\)，那么每次就只需维护 \(\text{border}\) 集合的变化。若子串 \([1,pos]\) 为子串 \([1,i]\) 的一个 \(\text{border}\)，则 \(s_{pos ...
分类：
其他好文 时间：
2020-10-06 21:16:44
阅读次数：
41
多台服务器间的文件实时同步 一、rsync ? 与传统的cp、tar备份方式相比，rsync具有安全性高、备份迅速、支持增量备份等优点，通过rsync可以解决对实时性要求不高的数据备份需求，例如定期的备份文件服务器数据到远端服务器，对本地磁盘定期做数据镜像等。 随着应用系统规模的不断扩大，对数据的安 ...
分类：
其他好文 时间：
2020-09-24 21:58:16
阅读次数：
40
HDFS个人数据存储的核心--分布式+共享存储5G时代得到来，大数据存储迅速暴涨，个人存储市场的存量不断扩大，同时增量也在快速增长，预计每年个人产生的数据会有20%的复合增长率，每年的会释放数十亿美元产值的数据存储市场增量。关于接下来的个人数据存储市场发展的方向，不仅仅是一个经济问题而且更加是互联网世界“个人主权”的问题，是隐私、安全、便捷等各种因素的集合，往大了说如果个人数据的问题得不到突破性的
分类：
其他好文 时间：
2020-09-18 02:37:28
阅读次数：
36
官网：urbackup.org 这个备份工具其实相对来讲还是可以的，只是文档说明比较少，很多需要自己尝试总结出来， 当然很多人会直接用rsync去备份，但使用专门的备份工具能精确看到每个备份点，而且可提供web页面。 服务器安装方法： wget https://download.opensuse.o ...
分类：
系统相关 时间：
2020-09-17 23:53:14
阅读次数：
61
In-page vacuum工作速度很快，但仅释放了一部分空间。它在一个表页内工作，并且不涉及索引。 常规的vacuum操作是使用VACUUM命令完成的。 因此，vaccum是对整个表操作。它不仅清除死元组，而且清除所有索引中对死元组的引用。 vacuum与系统中的其他活动同时进行。表和索引可以按常 ...
分类：
数据库 时间：
2020-09-17 23:00:30
阅读次数：
27
DMA：把数据从一个地方移到另一个地方且不占CPU 可以实现：P-》M，M-》M，M-》P （M为存储器，P为外设） 一个DMA 对应多个通道，然后每个通道有固定的外设，对于存储器则所有通道都可以用 多个DMA 请求的仲裁 软件阶段：PL控制器处理 硬件：编号越小越优先，DMA1 》 DMA2，通道 ...
分类：
其他好文 时间：
2020-09-17 15:41:31
阅读次数：
30
