一.背景 二. MVCC 和 snapshot 2.1 导出一个快照的唯一标识，即 snapshotid 2.2 启动对应快照的事务 2.3 利用导出快照实现严格一致的并行逻辑备份 三.严格一致的全量+增量数据迁移 3.1 逻辑复制原理 3.2 全量加增量的结合 总结 一.背景 众所周知 PostgreSQL 的物理复制以稳定可靠著称...

背景 传统分库分表问题 HybridDB for PG如何破解这些问题 总结 HybridDB for PG 性能指标 参考 背景 随着互联网的发展，数据爆炸性的增长，数据库逐渐成为了很多业务的绊脚石，很多业务也哭着喊着要上分布式数据库。 但是，传统的分库分表（sharding）带来的问题较多，得不偿失 传统分库分表问题 1、 ...

背景 HOT 实例解说 性能测试 小结 参考 digoal’s 大量PostgreSQL文章入口 背景 PostgreSQL目前默认的存储引擎在更新记录时，会在堆内产生一条新版本，旧版本在不需要使用后VACUUM回收，回收旧版本前，需要先回收所有关联这个版本的所有索引POINT。 PG的索引的KEY为索引字段或表达式的值，VALUE为行号...

背景 Hybrid DB for postgresql简介: 本项目优化理论依据： 向量化执行能力 查询子树的封装执行 我们的设计目标： 当前项目状况： 测试效果： 结语： 背景 Hybrid DB for postgresql简介: 随着大数据时代的不断演进， 用户对于数据的分析能力的需要提出了越来越高的要求。 Hybrid D...

背景 环境 场景 - 高并发空间位置更新、多属性KNN搜索并测（含空间索引） 1、背景 2、设计 3、准备测试表 4、准备测试函数(可选) 5、准备测试数据 6、准备测试脚本 7、测试 1、更新对象位置 TPS： 110592 平均响应时间： 0.178 毫秒 2、根据用户输入的att1, att2条件，搜索满足条件的附近5公里内的对...

背景 背景 我家有只小鸡鸡，它的名字叫吉吉。 吉吉有一位铁杆鸡友大象Pi吉哥哥（PostgreSQL）。 吉吉给大伙拜年啦，祝大家鸡年吉祥，新年新气息，与好鸡友大象哥哥愉快的玩耍，鸡情四射。 故事从吉吉和好鸡友大象哥哥偶遇的那天开始。 有一天，大象哥哥摆下国际象棋擂台，邀请各路英豪前来，就这样和吉吉偶遇啦。 《想挑战AlphaGO...

背景 优化器并行计算的并行度计算方法 优化器是否选择并行计算 优化器是否忽略并行计算 优化器强制选择并行计算参数 并行计算相关参数 强制并行 函数并行 GPU并行 背景 PostgreSQL 并行计算原理、应用参考: 《PostgreSQL 多场景 沙箱实验》 优化器并行计算的并行度计算方法 1、总worker进程数 po...

PostgreSQL pg_clog fsync 频率分析 pg_clog的原子操作与pg_subtrans(子事务) CLOG一致性和异步提交 本文分为三节，分别介绍clog的fsync频率，原子操作，与异步提交一致性。 PostgreSQL pg_clog fsync 频率分析 分析一下pg_clog是在什么时候需要调用fsync的？ 首...

背景 TEST CASE TEST 结果 测试的硬件环境 软件环境 系统配置参考 数据库配置 PostgreSQL 黑科技 BRIN 索引方法 查询性能(索引能力) 小结 背景 本文主要介绍PostgreSQL 在中高端x86服务器上的数据插入速度（目标表包含一个时间字段的索引），帮助企业用户了解PostgreSQL在这类场景下的性...

背景 存储层统计和过滤下推 过滤效率与线性相关性 如何提升每一列的过滤性 - 存储编排 全局/全表 两列相对线性相关性 局部/部分记录 两列相对线性相关性 局部按需改命法 如何提升每一列的过滤性 - 存储编排 复合排序 多列相对线性相关性 精髓 给数据改命的案例 相关技术 云端产品 背景 数据也有生辰八字，你信吗？列与列之间，...