集群监控

http://${VEARCH_URL}代表vearch服务

集群状态

  1. curl -XGET http://${VEARCH_URL}/cluster/stats

健康状态

  1. curl -XGET http://${VEARCH_URL}/cluster/health

查看集群状态及库

server状态

  1. curl -XGET http://${VEARCH_URL}/servers

partition状态

  1. curl -XGET http://${VEARCH_URL}/partitions

清除锁

  1. curl -XGET http://${VEARCH_URL}/clean_lock

在创建表时会对集群加锁, 若在此过程中, 服务异常, 会导致锁不能释放, 需要手动清除才能新建表。

副本扩容缩容

  1. curl -XPOST -H "content-type: application/json"  -d'
  2. {
  3.     "partition_ids": [1],
  4.     "node_id": 1,
  5.     "method": 0
  6. }
  7. ' http://${VEARCH_URL}/partition/change_member

method=0: node id 1上添加分片id 1 的副本; method=1: 删除 node id 1 上 分片 id 1 的副本。

集群数据迁移

可以通过下述方式将某个集群的数据拷贝到新集群, 实现集群的数据迁移。

1.建立新的目标集群

新集群与待迁移集群节点数保持一致, 部署完整的vearch系统, 将新集群所有的ps节点的进程kill。

2.元数据同步

通过etcd的镜像功能, 将待迁移集群的元数据, 拷贝到目标集群。etcdctl是etcd的客户端工具。

操作命令如下：

  1. export ETCDCTL_API=3
  2. # etcd 镜像的原理是读取一行一行的key, 写入到另外的集群中。其中: sourceMasterIP是原始集群master的一个节点, targetMasterIP是目标集群master的一个节点。
  3. # ETCDCTL_API=3 ./etcdctl make-mirror target --endpoints=source
  4. ETCDCTL_API=3 ./etcdctl make-mirror ${targetMasterIP}:2370 --endpoints=${sourceMasterIP}:2370

3.删除目标集群的 /server 元信息

可以etcdctl get 先查询server 元信息的前缀, 不同的版本可能包含不同的前缀信息

  1. export ETCDCTL_API=3
  2. ./etcdctl --endpoints=http://${targetMasterIP}:2370 del /server --prefix

4.拷贝向量数据

  1. scp -r root@sourcePsIP:/export/vdb root@targetPsIP:/export/vdb
  2. ... 省略其他ip的数据拷贝

sourcePsIP是待迁移集群PS节点的ip, targetPsIP是目标集群ps节点的ip。此处只需要保证待迁移集群与目标集群的ps节点ip一对一进行迁移即可, 不需要特殊顺序。