背景 早期，阿里巴巴B2B公司因为存在杭州和美国双机房部署，存在跨机房同步的业务需求。不过早期的数据库同步业务，主要是基于trigger的方式获取增量变更，不过从2010年开始，阿里系公司开始逐步的尝试基于数据库的日志解析，获取增量变更进行同步，由此衍生出了增量订阅&消费的业务，从此开启了一段新纪元。ps. 目前内部使用的同...

上游使用 pt/gh-ost 工具的持续同步场景 如何根据类型或 DDL 内容过滤 binlog 事件 如何通过 SQL 表达式过滤 DML binlog 事件

从 MySQL 迁移数据 —— 以 Amazon Aurora MySQL 为例 第 1 步：在 Aurora 集群中启用 binlog 为 Aurora 集群修改 binlog 相关参数 第 2 步：部署 DM 集群 第 3 步：检查集群信息 第 4 步：配置任务 第 5 步：启动任务 第 6 步：查询任务 从 MySQL 迁移数据 ...

上游 MySQL 实例配置前置检查 使用命令 检查内容 关闭检查项 上游 MySQL 实例配置前置检查 本文介绍了 DM 提供的前置检查功能，此功能用于在数据迁移任务启动时提前检测出上游 MySQL 实例配置中可能存在的一些错误。 使用命令 check-task 命令用于对上游 MySQL 实例配置是否满足 DM 要求进行前置检查。 ...

TiDB Data Migration FAQs Does DM support migrating data from Alibaba RDS or other cloud databases? Does the regular expression of the block and allow list in the task configuratio...

TiDB Data Migration FAQs Does DM support migrating data from Alibaba RDS or other cloud databases? Does the regular expression of the block and allow list in the task configuratio...

TiDB 生态工具功能概览 数据迁入 - TiDB Data Migration (DM) 全量导出 - Dumpling 全量导入 - TiDB Lightning 备份和恢复 - Backup & Restore TiDB 增量数据同步 - TiCDC TiDB 增量日志同步 - TiDB Binlog 数据校验 - sync-diff-in...

跨数据中心部署方案 三中心部署方案 优点 缺点 读性能优化 两地三中心部署方案 两数据中心 + binlog 同步方案 高可用和容灾分析 跨数据中心部署方案 作为 NewSQL 数据库，TiDB 兼顾了传统关系型数据库的优秀特性以及 NoSQL 数据库可扩展性，以及跨数据中心（下文简称“中心”）场景下的高可用。本文档旨在介绍跨数据中心部...

Overview Design Concept InLong-Agent Architecture Different kinds of agent File Sql Binlog Monitor Metrics configuration AgentTaskMetric JobMetrics PluginMetric SourceMetr...

TiDB Tools Overview Deployment and operation Tools Deploy and operate TiDB on physical or virtual machines - TiUP Deploy and operate TiDB on Kubernetes - TiDB Operator Data mana...