码迷,mamicode.com
首页 > 其他好文 > 详细

数据交换平台的双内存设计

时间:2014-10-29 15:00:48      阅读:142      评论:0      收藏:0      [点我收藏+]

标签:linux   共享内存   数据交换平台   

一、数据交换平台

数据交换平台的项目目的,就是为了解决异构数据库之间的数据交换问题。

这个平台的设计,参考了淘宝开源的DataX、大众点评的Wormhole,等,受到的启发很大。

项目由小到大,逐步形成平台化发展,几乎汇总了公司后台db之间的所有数据同步,任务个数有近500个,每天数据量达3亿。

目前,平台运行稳定,推广部署到其他分公司。趁这个机会,整理了一些文档,拿出来分享,也算是回馈感恩吧。


上一篇文档,说了一些需求和初步设计。

这一篇重点说下,两块共享内存的设计细节,直接上图。

二、任务实时数据:Shmrt


bubuko.com,布布扣


三、任务详细参数:Shmtd

bubuko.com,布布扣



数据交换平台的双内存设计

标签:linux   共享内存   数据交换平台   

原文地址:http://blog.csdn.net/san1156/article/details/40583835

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!