Pika双主文档

可用版本： >= 2.3.0

介绍

为了避免额外的维护成本, Pika在之前主从的逻辑设计上支持了双主架构, 通过conf文件配置双主模式. 在双主建立成功的模式下, 仍然可以通过slaveof为两个master增加slave节点。

使用方法

通过pika.conf文件配置双主模式

修改双主A的pika.conf配置文件

...
# server-id for hub
server-id : 1

…

The peer-master config

double-master-ip : 192.168.10.2 配置另一个主的ip
double-master-port : 9220 配置另一个主的port
double-master-server-id : 2 配置另一个主的server id (注意不要与本机server id和已经连接的slave的sid重复)

修改双主B的pika.conf配置文件

…

server-id for hub

server-id : 2
…

The peer-master config

double-master-ip : 192.168.10.1 配置另一个主的ip
double-master-port : 9220 配置另一个主的port
double-master-server-id : 1 配置另一个主的server id (注意不要与本机server id和已经连接的slave的sid重复)

分别启动两个Pika实例, 使用info查看信息

查看192.168.10.1的info信息

…

DoubleMaster(DOUBLEMASTER)

role:double_master
the peer-master host:192.168.10.2
the peer-master port:9220
double_master_mode: True
repl_state: 3
double_master_server_id:2
double_master_recv_info: filenum 0 offset 0

其中repl_state为3代表双主连接建立成功

双主启动时binlog偏移校验失败

双主分别启动时会检验对端实例的binlog偏移量, 如果两端binlog偏移量相差过大会造成双主连接建立失败.

IOFO级别日志会报

pika_admin.cc:169] Because the invalid filenum and offset, close the connection between the peer-masters

利用info命令查看实例信息

DoubleMaster(MASTER)

role:master
the peer-master host:192.168.10.2
the peer-master port:9220
double_master_mode: True
repl_state: 0
double_master_server_id:2
double_master_recv_info: filenum 0 offset 0

其中repl_state为0代表双主建立失败

假如双主建立失败, 无需停机可以通过slaveof命令以某一个双主实例的为基准做数据全同步

例如192.168.10.2以192.168.10.1的数据做全同步

slaveof 192.168.10.1

测试场景以及测试结果

-	场景	测试结果	备注
正确性测试
1	双主单边写入	测试两次，分别使用12和64线程，key数量30w-100w不等，未发现key丢失，校验value相等	通过
2	双主同时写入（不操作相同key）	测试3次，key数量60w左右，两边key数量相同，校验value相等	通过
3	双主同时写入（相同key）	测试2次，key数量40w左右，两边key数量相同，校验value相等	通过
4	双主同时写入（不操作相同key），使用iptables模拟网络延迟	测试3次，key数量60w左右，两边key数量相同，校验value相等	通过
5	双主同时写入（相同key），使用iptables模拟网络延迟	测试2次，key数量40w左右，两边key数量相同, 但部分key的value不同	通过
6	双主同时写入（相同key），挂载两个从库	key数量20w左右，两边key数量一致，值也相同	通过
运维测试
7	单主写入，shutdown其中一个主库，然后挂载新从库重新搭建双主	key数量100w左右，两边key数量一致，值也相同	通过
8	单主写入，重启其中一个主库	key数量100w左右，两边key数量一致，值也相同	通过

FAQ

双主模式下如何避免数据循环传播?

每个双主实例内部会维护另一个master的信息, 通过binlog中的server id字段来判断是否需要同步给另一个master

如何关闭双主模式?

双主关系可以随时取消, 只需要把其中一个节点停止即可

双主模式下是否支持双写?

双主模式下支持双写

双主的两个实例能否同时操作更新同一个key?

双主模式下操作同一个key, 不保证value的最终一致

双主模式下如何增加slave节点

使用正常的主从配置方法即可

双主A,B 因为意外情况,B实例因为宕机过久, 重启后因为binlog偏移相差过大双主模式建立失败, 怎么恢复?

以A实例为基准做全同步, 直接利用slaveof命令做全同步后会自动恢复双主连接

原文: https://github.com/Qihoo360/pika/wiki/Pika%E5%8F%8C%E4%B8%BB%E6%96%87%E6%A1%A3