日志归档 基本功能 开启归档 归档文件 配置参数 错误 日志归档 在复制组内，节点会将写操作记录到同步日志 中。备节点通过同步日志实现与主节点的数据同步。同步日志循环使用磁盘上的日志文件，新产生的日志会覆盖旧的日志。因此，同步日志只能保存最近的部分日志。 通过开启日志归档，可以持续归档数据节点的同步日志，归档日志不会被覆盖，并且可以通过重...

DM 数据迁移最佳实践 性能边界定位 数据迁移前 业务侧要点 Schema 的设计中 AUTO_INCREMENT 对业务的影响 是否使用聚簇索引 分库分表要点 分与合 悲观 DDL 锁与乐观 DDL 锁 其他限制与影响 上下游的数据类型 字符集与排序规则 实施侧要点 DM-master 与 DM-woker 部署实践 同步任务规划 ...

DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台，支持包括 MySQL、SQL Server、Oracle、PostgreSQL、HDFS、Hive、HBase、OTS、ODPS 等各种异构数据源之间高效的数据同步功能。DataX 采用了框架 + 插件 的模式。目前已开源，代码托管在 GitHub。 DataX 数据同步效率较高，满足大多数...

同步IO： 异步IO 要想更好了解socket编程，有一个不可绕过的环节就是IO．在Linux中，一切皆文件．实际上要文件干啥？不就是读写么？所以，这句话本质就是”IO才是王道”．用php的fopen打开文件关闭文件读读写写，这叫本地文件IO．在socket编程中，本质就是网络IO．所以，在开始进一步的socket编程前，我们必须先从概念上认识好IO．...

级联备机 可获得性 特性简介 客户价值 特性描述 特性增强 特性约束 依赖关系 级联备机 可获得性 本特性自openGauss 1.1.0版本开始引入。 特性简介 本特性主要基于当前一主多备的架构，在此基础上，支持级联备机连接备机。 客户价值 一主多备架构在特性业务场景下，无法支持足够灵活的结构。多机房部...

第 5 章 数据迁移方案 第 5 章 数据迁移方案 本章将介绍常用的异构或者同构数据库之间的数据全量和增量同步方案，重点介绍如何将数据从IBM Db2、Mongodb、MySQL、Oracle、阿里云 DRDS、SQL Server同步至TiDB分布式数据库，同时介绍如何使用数据同步方案进行TiDB的高可用数据容灾。 IBM Db2 到 TiDB...

TiCDC 简介 TiCDC 架构 系统角色 同步功能介绍 sink 支持 同步顺序保证和一致性保证 数据同步顺序 数据同步一致性 同步限制 暂不支持的场景 兼容性问题提示 使用 TiCDC v5.0.0-rc 版本的 cdc cli 工具操作 v4.0.x 集群导致不兼容问题 TiCDC 安装和部署 TiCDC 集群管理和同步任务...

TiCDC 简介 TiCDC 架构 系统角色 同步功能介绍 sink 支持 同步顺序保证和一致性保证 数据同步顺序 数据同步一致性 同步限制 暂不支持的场景 TiCDC 安装和部署 TiCDC 集群管理和同步任务管理 TiCDC 开放数据协议 兼容性问题提示 使用 TiCDC v5.0.0-rc 版本的 cdc cli 工具操作 v...

Syncer 使用文档 Syncer 简介 Syncer 架构 Syncer 部署位置 Syncer 增量导入数据示例 设置同步开始的 position 启动 Syncer 在 MySQL 中插入新的数据 Syncer 配置说明 指定数据库同步 Sharding 同步支持 分库分表同步示例 Syncer 同步前检查 监控方案 配置 S...

Script 脚本 File System 文件系统 Script 脚本 Script 类可以编译执行JavaScript 代码。你可以用以下方式访问Script 类： var Script = process . binding ( 'evals' ). Script ; JavaScript 代码可以被编译、立刻执行或者编译、...