码迷,mamicode.com
首页 > 其他好文 > 详细

Tokyo Tyrant(TTServer)系列(五)-ttserver的几种部署方式

时间:2014-08-14 01:32:07      阅读:328      评论:0      收藏:0      [点我收藏+]

标签:hash   b+tree   tt   ttserver   tyrant   

ttserver的几种部署方式

ttserver可以理解成一种key-value形式的数据库,部署ttserver的方式,可以根据访问量和数据规模循选择不同的部署策略。

详细启动参数请参考:http://blog.csdn.net/xifeijian/article/details/37744131


1、单机:数据量不大,访问量不大
ttserver -host 192.168.1.110 -port 1978 -thnum 128 -dmn -ulim 1024m -ulog /home/openpf/tmp/test_data/ulog_01 -log /home/openpf/tmp/test_data/log/data_01.log -pid /home/openpf/tmp/test_data/log/data_01.pid -sid 1 /home/openpf/tmp/test_data/data_01.tch#bnum=10000000#rcnum=100000#xmsiz=256m
如果希望提高查询的性能,可以把hash设置得再大些,然后缓存的记录多一些。同时,设置-uas参数异步写入日志,可提高写入的性能。不过这样可能导致日志丢失,降低了数据安全性。

2、一主一备:数据量不大,访问量不大,且对数据安全性有要求。
主服务器:(与上面一致)
ttserver -host 192.168.1.110 -port 1978 -thnum 128 -dmn -ulim 1024m -ulog /home/openpf/tmp/test_data/ulog_01 -log /home/openpf/tmp/test_data/log/data_01.log -pid /home/openpf/tmp/test_data/log/data_01.pid -sid 1 /home/openpf/tmp/test_data/data_01.tch#bnum=10000000#rcnum=100000#xmsiz=256m
备份服务器:在另一个机器上启动,不需要缓存
ttserver -host 192.168.1.111 -port 1979 -mhost 192.168.1.110 -mport 1978 -rcc -rts /home/openpf/tmp/test_data/data_01.rts -thnum 5 -dmn -ulim 1024m -ulog /home/openpf/tmp/test_data/ulog_02 -log /home/openpf/tmp/test_data/log/data_02.log -pid /home/openpf/tmp/test_data/log/data_02.pid -sid 2 /home/openpf/tmp/test_data/data_02.tch#bnum=10000000#rcnum=0#xmsiz=0m
备份服务器可以找性能不高的旧服务器,这种设置也只是为了保障数据安全而做的设置。

3、互为主备:数据量增大,访问量也增大,对数据安全有要求,且希望避免单点故障
第一个服务器:
ttserver -host 192.168.1.110 -port 1978 -mhost 192.168.1.111 -mport 1979 -rcc -rts /home/openpf/tmp/test_data/data_01.rts -thnum 128 -dmn -ulim 1024m -ulog /home/openpf/tmp/test_data/ulog_01 -log /home/openpf/tmp/test_data/log/data_01.log -pid /home/openpf/tmp/test_data/log/data_01.pid -sid 1 /home/openpf/tmp/test_data/data_01.tch#bnum=10000000#rcnum=100000#xmsiz=256m
第二个服务器:
ttserver -host 192.168.1.111 -port 1979 -mhost 192.168.1.110 -mport 1978 -rcc -rts /home/openpf/tmp/test_data/data_02.rts -thnum 128 -dmn -ulim 1024m -ulog /home/openpf/tmp/test_data/ulog_02 -log /home/openpf/tmp/test_data/log/data_02.log -pid /home/openpf/tmp/test_data/log/data_02.pid -sid 2 /home/openpf/tmp/test_data/data_02.tch#bnum=10000000#rcnum=100000#xmsiz=256m
应用程序可以访问任意一个服务器进行读写,且应用程序发现某服务器不能访问后,可立即转到另一台服务器。

4、读写分离:写量猛增,读量猛增

TokyoCabinet支持六种数据引擎,其中on-memory hash database和on-memory b+ database两种是将数据存放在内存中的,不对数据做持久化。

因此,可以使用on-memory hash database引擎的ttserver作为写服务器,然后采用复制的方式将on-memory hash database上的数据复制到hash database的多个ttserver上去,然后将多个hash database ttserver作为读服务器。这实际上是通过降低一致性来提高性能。
1)on-memory hash database的配置: 缓存的记录数和内存都配置得很小(写):

ttserver -host 192.168.0.99 -port 20000 -thnum 128 -dmn -ulim 1024m -ulog /data/home/game/temp/test_data/ulog_01 -log /data/home/game/temp/test_data/log/data_01.log -pid /data/home/game/temp/test_data/log/data_01.pid -sid 0 "*#bnum=10000000#capnum=100#capsiz=10m"


2)hash database ttserver 1 的配置: 从on-memory hash database复制数据(读):

ttserver -host 192.168.1.110 -port 1978 -mhost 192.168.0.99 -mport 20000 -rcc -rts /home/openpf/tmp/test_data/data_01.rts -thnum 128 -dmn -ulim 1024m -ulog /home/openpf/tmp/test_data/ulog_01 -log /home/openpf/tmp/test_data/log/data_01.log -pid /home/openpf/tmp/test_data/log/data_01.pid -sid 1"/home/openpf/tmp/test_data/log/data_01.tch#bnum=10000000#rcnum=100000#xmsiz=256m"


3)hash database ttserver 2 的配置: 从on-memory hash database复制数据(读):
ttserver -host 192.168.1.111 -port 1979 -mhost 192.168.0.99 -mport 20000 -rcc -rts /home/openpf/tmp/test_data/data_02.rts -thnum 128 -dmn -ulim 1024m -ulog /home/openpf/tmp/test_data/ulog_02 -log /home/openpf/tmp/test_data/log/data_02.log -pid /home/openpf/tmp/test_data/log/data_02.pid -sid 2 "/home/openpf/tmp/test_data/log/data_02.tch#bnum=10000000#rcnum=100000#xmsiz=256m"
配置为读写分离后,客户端写入的时候连接on-memory hash database,读取的时候连接其他的ttserver。

5、客户端实现分布,分库:海量数据
数据量再大,靠几台服务器已经无法支撑的时候,分库仍然是无奈的选择。将数据按照业务划分,或者按照某一数值划分,存储在多个ttserver群集中去。
客户端程序在写入或者读取的时候,自动根据业务规则去访问对应的群集即可。

Tokyo Tyrant(TTServer)系列(五)-ttserver的几种部署方式,布布扣,bubuko.com

Tokyo Tyrant(TTServer)系列(五)-ttserver的几种部署方式

标签:hash   b+tree   tt   ttserver   tyrant   

原文地址:http://blog.csdn.net/xifeijian/article/details/38372681

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!