ttserver的几种部署方式
2012-12-27 16:25:23 
阿炯
收集整理了一些Tokyo Tyrant的使用方法，可以根据访问量和数据规模循序渐进地这样部署。
1、单机：数据量不大，访问量不大
ttserver -host 192.168.16.100 -port 8191 -thnum 128 -dmn -ulim 1024m -ulog /data/kvdb/test_ulog_01 -log /data/kvdb/log/test_data_01.log -pid /data/kvdb/log/test_data_01.pid -sid 1 /data/kvdb/test_data_01.tch#bnum=10000000#rcnum=100000#xmsiz=256m
如果希望提高查询的性能，可以把hash的桶设置得再大些，然后缓存的记录多一些。同时设置-uas参数异步写入日志，可提高写入的性能。不过这样可能导致日志丢失，降低了数据安全性。
2、一主一备：数据量不大，访问量不大，且对数据安全性有要求
主服务器：(与上面一致)
ttserver -host 192.168.16.100 -port 8191 -thnum 128 -dmn -ulim 1024m -ulog /data/kvdb/test_ulog_01 -log /data/kvdb/log/test_data_01.log -pid /data/kvdb/log/test_data_01.pid -sid 1 /data/kvdb/test_data_01.tch#bnum=10000000#rcnum=100000#xmsiz=256m
备份服务器：在另一个机器上启动，不需要缓存
ttserver -host 192.168.16.101 -port 8192 -mhost 192.168.16.100 -mport 8191 -rcc -rts /data/kvdb/test_data_01.rts -thnum 5 -dmn -ulim 1024m -ulog /data/kvdb/test_ulog_02 -log /data/kvdb/log/test_data_02.log -pid /data/kvdb/log/test_data_02.pid -sid 2 /data/kvdb/test_data_02.tch#bnum=10000000#rcnum=0#xmsiz=0m
备份服务器可以找性能不高的旧服务器，这种设置也只是为了保障数据安全而做的设置。
3、互为主备：数据量增大，访问量也增大，对数据安全有要求，且希望避免单点故障
第一个服务器：
ttserver -host 192.168.16.100 -port 8191 -mhost 192.168.16.101 -mport 8192 -rcc -rts /data/kvdb/test_data_01.rts -thnum 128 -dmn -ulim 1024m -ulog /data/kvdb/test_ulog_01 -log /data/kvdb/log/test_data_01.log -pid /data/kvdb/log/test_data_01.pid -sid 1 /data/kvdb/test_data_01.tch#bnum=10000000#rcnum=100000#xmsiz=256m
第二个服务器：
ttserver -host 192.168.16.101 -port 8192 -mhost 192.168.16.100 -mport 8191 -rcc -rts /data/kvdb/test_data_02.rts -thnum 128 -dmn -ulim 1024m -ulog /data/kvdb/test_ulog_02 -log /data/kvdb/log/test_data_02.log -pid /data/kvdb/log/test_data_02.pid -sid 2 /data/kvdb/test_data_02.tch#bnum=10000000#rcnum=100000#xmsiz=256m
应用程序可以访问任意一个服务器进行读写，且应用程序发现某服务器不能访问后，可立即转到另一台服务器。
4、读写分离：写量猛增，读量猛增
TokyoCabinet支持六种数据引擎，其中on-memory hash database和on-memory b+ database两种是将数据存放在内存中的，不对数据做持久化。
因此，可以使用on-memory hash database引擎的ttserver作为写服务器，然后采用复制的方式将on-memory hash database上的数据复制到hash database的多个ttserver上去，然后将多个hash database ttserver作为读服务器。这实际上是通过降低一致性来提高性能。
on-memory hash database的配置： 缓存的记录数和内存都配置得很小
ttserver -host 192.168.16.99 -port 8190 -thnum 128 -dmn -ulim 1024m -ulog /data/home/game/temp/test_data/test_ulog_01 -log /data/home/game/temp/test_data/log/test_data_01.log -pid /data/home/game/temp/test_data/log/test_data_01.pid -sid 0 "*#bnum=10000000#capnum=100#capsiz=10m"
hash database ttserver 1 的配置： 从on-memory hash database复制数据
ttserver -host 192.168.16.100 -port 8191 -mhost 192.168.0.99 -mport 8190 -rcc -rts /data/kvdb/test_data_01.rts -thnum 128 -dmn -ulim 1024m -ulog /data/kvdb/test_ulog_01 -log /data/kvdb/log/test_data_01.log -pid /data/kvdb/log/test_data_01.pid -sid 1 "/data/kvdb/log/test_data_01.tch#bnum=10000000#rcnum=100000#xmsiz=256m"
hash database ttserver 2 的配置： 从on-memory hash database复制数据
ttserver -host 192.168.16.101 -port 8192 -mhost 192.168.0.99 -mport 8190 -rcc -rts /data/kvdb/test_data_02.rts -thnum 128 -dmn -ulim 1024m -ulog /data/kvdb/test_ulog_02 -log /data/kvdb/log/test_data_02.log -pid /data/kvdb/log/test_data_02.pid -sid 2 "/data/kvdb/log/test_data_02.tch#bnum=10000000#rcnum=100000#xmsiz=256m"
配置为读写分离后，客户端写入的时候连接on-memory hash database，读取的时候连接其他的ttserver。
5、客户端实现分布，分库：海量数据
将数据按照业务划分，或者按照某一数值划分，存在在多个ttserver群集中去。客户端程序在写入或者读取的时候，自动根据业务规则去访问对应的群集即可。就像memcached客户端的分布式一样的。
1、单机：数据量不大，访问量不大
ttserver -host 192.168.16.100 -port 8191 -thnum 128 -dmn -ulim 1024m -ulog /data/kvdb/test_ulog_01 -log /data/kvdb/log/test_data_01.log -pid /data/kvdb/log/test_data_01.pid -sid 1 /data/kvdb/test_data_01.tch#bnum=10000000#rcnum=100000#xmsiz=256m
如果希望提高查询的性能，可以把hash的桶设置得再大些，然后缓存的记录多一些。同时设置-uas参数异步写入日志，可提高写入的性能。不过这样可能导致日志丢失，降低了数据安全性。
2、一主一备：数据量不大，访问量不大，且对数据安全性有要求
主服务器：(与上面一致)
ttserver -host 192.168.16.100 -port 8191 -thnum 128 -dmn -ulim 1024m -ulog /data/kvdb/test_ulog_01 -log /data/kvdb/log/test_data_01.log -pid /data/kvdb/log/test_data_01.pid -sid 1 /data/kvdb/test_data_01.tch#bnum=10000000#rcnum=100000#xmsiz=256m
备份服务器：在另一个机器上启动，不需要缓存
ttserver -host 192.168.16.101 -port 8192 -mhost 192.168.16.100 -mport 8191 -rcc -rts /data/kvdb/test_data_01.rts -thnum 5 -dmn -ulim 1024m -ulog /data/kvdb/test_ulog_02 -log /data/kvdb/log/test_data_02.log -pid /data/kvdb/log/test_data_02.pid -sid 2 /data/kvdb/test_data_02.tch#bnum=10000000#rcnum=0#xmsiz=0m
备份服务器可以找性能不高的旧服务器，这种设置也只是为了保障数据安全而做的设置。
3、互为主备：数据量增大，访问量也增大，对数据安全有要求，且希望避免单点故障
第一个服务器：
ttserver -host 192.168.16.100 -port 8191 -mhost 192.168.16.101 -mport 8192 -rcc -rts /data/kvdb/test_data_01.rts -thnum 128 -dmn -ulim 1024m -ulog /data/kvdb/test_ulog_01 -log /data/kvdb/log/test_data_01.log -pid /data/kvdb/log/test_data_01.pid -sid 1 /data/kvdb/test_data_01.tch#bnum=10000000#rcnum=100000#xmsiz=256m
第二个服务器：
ttserver -host 192.168.16.101 -port 8192 -mhost 192.168.16.100 -mport 8191 -rcc -rts /data/kvdb/test_data_02.rts -thnum 128 -dmn -ulim 1024m -ulog /data/kvdb/test_ulog_02 -log /data/kvdb/log/test_data_02.log -pid /data/kvdb/log/test_data_02.pid -sid 2 /data/kvdb/test_data_02.tch#bnum=10000000#rcnum=100000#xmsiz=256m
应用程序可以访问任意一个服务器进行读写，且应用程序发现某服务器不能访问后，可立即转到另一台服务器。
4、读写分离：写量猛增，读量猛增
TokyoCabinet支持六种数据引擎，其中on-memory hash database和on-memory b+ database两种是将数据存放在内存中的，不对数据做持久化。
因此，可以使用on-memory hash database引擎的ttserver作为写服务器，然后采用复制的方式将on-memory hash database上的数据复制到hash database的多个ttserver上去，然后将多个hash database ttserver作为读服务器。这实际上是通过降低一致性来提高性能。
on-memory hash database的配置： 缓存的记录数和内存都配置得很小
ttserver -host 192.168.16.99 -port 8190 -thnum 128 -dmn -ulim 1024m -ulog /data/home/game/temp/test_data/test_ulog_01 -log /data/home/game/temp/test_data/log/test_data_01.log -pid /data/home/game/temp/test_data/log/test_data_01.pid -sid 0 "*#bnum=10000000#capnum=100#capsiz=10m"
hash database ttserver 1 的配置： 从on-memory hash database复制数据
ttserver -host 192.168.16.100 -port 8191 -mhost 192.168.0.99 -mport 8190 -rcc -rts /data/kvdb/test_data_01.rts -thnum 128 -dmn -ulim 1024m -ulog /data/kvdb/test_ulog_01 -log /data/kvdb/log/test_data_01.log -pid /data/kvdb/log/test_data_01.pid -sid 1 "/data/kvdb/log/test_data_01.tch#bnum=10000000#rcnum=100000#xmsiz=256m"
hash database ttserver 2 的配置： 从on-memory hash database复制数据
ttserver -host 192.168.16.101 -port 8192 -mhost 192.168.0.99 -mport 8190 -rcc -rts /data/kvdb/test_data_02.rts -thnum 128 -dmn -ulim 1024m -ulog /data/kvdb/test_ulog_02 -log /data/kvdb/log/test_data_02.log -pid /data/kvdb/log/test_data_02.pid -sid 2 "/data/kvdb/log/test_data_02.tch#bnum=10000000#rcnum=100000#xmsiz=256m"
配置为读写分离后，客户端写入的时候连接on-memory hash database，读取的时候连接其他的ttserver。
5、客户端实现分布，分库：海量数据
将数据按照业务划分，或者按照某一数值划分，存在在多个ttserver群集中去。客户端程序在写入或者读取的时候，自动根据业务规则去访问对应的群集即可。就像memcached客户端的分布式一样的。