模拟 Linux 内核故障 准备条件 配置文件 使用 kubectl 创建实验 使用限制 模拟 Linux 内核故障 本文介绍如何使用 KernelChaos 模拟 Linux 内核故障。该功能通过使用 BPF 在指定内核路径上注入基于 I/O 或内存的故障。 尽管 KernelChaos 的注入对象可以设置成一个或几个 Pod，但所属主机...

模拟 JVM 应用故障 JVMChaos 介绍 使用限制 使用 YAML 方式创建实验 1. 创建命名空间并配置 MutatingAdmissionWebhook 2. 创建被测应用 3. 观测未被注入时的行为 4. 注入 JVMChaos 并验证 字段说明 模拟 JVM 应用故障 JVMChaos 介绍 JVMChaos 能向目标容...

Kubernetes 上的 TiDB 集群故障自动转移 实现原理 PD 故障转移策略 TiKV 故障转移策略 TiDB 故障转移策略 TiFlash 故障转移策略 Kubernetes 上的 TiDB 集群故障自动转移 故障自动转移是指在 TiDB 集群的某些节点出现故障时，TiDB Operator 会自动添加一个节点，保证 TiDB 集...

检测故障的Segment segment故障如何被监测和管理 简单的故障转移和恢复示例 配置FTS行为 检测故障的Segment 如果启用了镜像，Greenplum数据库会在主Segment宕机后自动故障转移到一个镜像Segment上，镜像Segment承担 主Segment的角色和职能，故障主Segment变成镜像，用户感觉不到segment...

问题现象 Monitor维护这Ceph集群的信息，如果Monitor无法正常提供服务，那整个Ceph集群就不可访问。一般来说，在实际运行中，Ceph Monitor的个数是 2n + 1 ( n >= 0 )个，在线上至少3个，只要正常的节点数 >= n+1，Ceph的Paxos算法就能保证系统的正常运行。通常情况下两个以上Monitor节>点同时出现异...

10 - 故障诊断 Failed to set up SSH tunneling for host [xxx.xxx.xxx.xxx]: Can’t retrieve Docker Info ； Failed to dial to /var/run/docker.sock: ssh: rejected: administratively prohibited...

准备条件 配置文件 使用 kubectl 创建实验 使用限制 本文介绍如何使用 KernelChaos 模拟 Linux 内核故障。该功能通过使用 BPF 在指定内核路径上注入基于 I/O 或内存的故障。 尽管 KernelChaos 的注入对象可以设置成一个或几个 Pod，但所属主机的其他 Pod 的性能也会受到一些影响，因为所有的 Pod ...

TiDB OOM 故障排查 常见故障现象 整体排查思路 常见故障原因和解决方法 部署问题 数据库问题 执行 SQL 语句时消耗太多内存 大事务或大写入消耗太多内存 收集和加载统计信息的过程中消耗太多内存 预处理语句 (Prepared Statement) 使用过量 系统变量配置不当 客户端问题 处理 OOM 问题需要收集的诊断信息 ...

waypoint 问题故障排除 流量路由或安全策略问题 waypoint 问题故障排除 本指南说明如果您已经将命名空间、服务或工作负载注册到 waypoint 代理中，但未看到预期的行为时应该如何操作。 流量路由或安全策略问题 通过 productpage 服务将一些请求从 curl Pod 发送到 reviews 服务： $ kubec...

Controlplane 节点故障排除 检查 controlplane 容器是否正在运行 controlplane 容器日志记录 RKE2 Server 日志 Controlplane 节点故障排除 本文适用于具有 controlplane 角色的节点。 检查 controlplane 容器是否正在运行 具有 controlplane 角...