PostgreSQL LIKE 操作符走 B-tree 索引浅析 背景 分析 一般场景 LIKE 前缀匹配场景 PostgreSQL LIKE 操作符走 B-tree 索引浅析 Author: 李海洋（陌痕） 背景 LIKE 操作符是 PostgreSQL 支持的三种模式匹配方法之一。一般情况下，如果 SQL 中有模式匹配的过滤条件期望走索...

背景 闪回的目标分为两种： 闪回的实现分两种： 闪回的手段： flashback 前提 flashback 准备工作 flashback 实践 flashback 可能造成的负面影响 解决负面影响 相关知识点 相关参数 - 跟踪事务时间、延迟回收垃圾 相关函数 - 事务状态、事务结束时间 读脏页插件 如何跟踪事务结束时间 xid和t...

背景 分析过程 解决办法探讨 参考 背景 在RDS环境中，多租户使用同一台主机是很常见的事情，为了隔离用户资源，有很多手段，例如使用虚拟机，或者CGROUP技术。以CGROUP为例，可以控制进程的CPU使用、内存使用、块设备的IOPS或者吞吐速率等资源使用。限制资源的好处是可以在共用的硬件层面为多个用户提供承诺的性能指标。当然这种方法也有一定的弊...

背景 9.6 聚合OP优化 对比测试 代码 小结 背景 聚合操作指将分组的数据聚合为一个结果输出。 聚合通常用在统计应用中，例如统计分组的最大值，最小值，记录数，平均值，方差，截距，相关性。 聚合也可能被用于文本分析或者图像分析等，例如最佳相似度，行列变换，聚合为数组或JSON，图像堆叠等。 因此聚合通常需要启动值，行的处理，以及结果的格...

背景 OLAP profiling 分析 (OLAP哪些过程最耗资源) 业界有哪些手段提升OLAP性能 向量化执行 与 列存储 PostgreSQL 向量化之路 PostgreSQL VOPS新增 瓦片类型 PostgreSQL VOPS新增 瓦片类型操作符 PostgreSQL VOPS 聚合函数 VOPS 瓦片索引 普通表转换为 VOP...

背景 RDS PG 解决方案 优化方案，提高响应速度 DEMO 小结 参考 背景 20亿用户，每个用户1000个标签，基于任意标签组合圈选、透视（业务上的需求是一次最多计算100个标签的组合）。 相当于要处理2000亿记录。 1、实时求标签组合的记录数。（即满足标签组合的用户有多少） 2、用户ID。（级满足标签组合的用户ID。） 要求...

背景 什么是等比数列？ 等比数列的应用 KPI 分解设定举例 1、某产品2019-01-01的用户数有1万个，2019-12-31要做到2万个，每个月目标如何设定是比较合理的？ 2、一个新产品，从无到有（从1个细胞开始），一年后要做到1000万，每个月应该需要设定多少的目标？ 严重漏洞：以上解决的是每个周期的增长问题，并非总的计数。 年底要完成10...

背景 Postgres中CIC的实现 名词定义 HOT介绍 并发创建索引 Phase1 of CIC Phase2 of CIC Phase3 of CIC 分区表中实现CIC 背景 在数据库中索引可谓是司空见惯，优化查询的利器，其常用程度和表已无差别且更有甚之。索引建立的最合适时间是在定义表之后在表中插入数据之前，当一个表中已经包含了...

背景 传统的业务场景分析 1. 可靠性 2. 高可用 3. 容灾 4. 备份恢复 5. 性能诊断 6. 功能 数据库编程 SQL兼容性 语法例子 7. 扩展性 8. 多租户隔离 9. 价格 用户痛点分析 1. 数据库的计算能力 2. 数据挖掘分析能力 3. 扩展能力 4. 可编程能力 价格 DT时代企业对数据的处理需求...

背景 测试CASE 测试环境准备 测试TPC-B logged table unlogged table 性能对比 1 logged table对比 1、TPS对比 2、事务整体RT对比 3、实际SQL RT对比 4、RT 标准方差对比 5、建立完所有连接的耗时对比 6、释放完所有连接的耗时对比 2 unlogged table对比...