背景 环境 测试方法 结果解读 32c64ht 512G 1000仓库 机器测试结果 性能小结 参考 背景 PostgreSQL 已与2019.10.3正式发布，测试其tpcc性能。 环境 阿里云虚拟机 [ root@PostgreSQL12 ~]# lscpu Architecture : x...

背景 测试CASE 测试环境准备 测试TPC-B logged table unlogged table 性能对比 1 logged table对比 1、TPS对比 2、事务整体RT对比 3、实际SQL RT对比 4、RT 标准方差对比 5、建立完所有连接的耗时对比 6、释放完所有连接的耗时对比 2 unlogged table对比...

背景 复现 BUG分析 BUG修复 背景 我们执行一个大SQL时（长度大于512M），会返回如下错误： ERROR : invalid memory alloc request size 1073741824 复现 我们首先复现出来这个问题 创建表 create table byteatable ( id int , ...

背景 一、数据结构和数据量 数据结构抽象 二、分析需求 三、数据库选型 四、PostgreSQL 10 方案1 设计表结构 初始化数据 创建必要的UDF函数 透视SQL设计 透视SQL性能指标举例 五、PostgreSQL 10 方案设计2 - 极限优化 方案1的优化点分析 如何补齐呢？ 补齐后的数据透视（完全规避JOIN），开启并...

背景 一、btree 原理 应用场景 例子 二、hash 原理 应用场景 例子 三、gin 原理 应用场景 例子 四、gist 原理 应用场景 例子 五、sp-gist 原理 应用场景 例子 六、brin 原理 应用场景 例子 七、rum 原理 应用场景 例子 八、bloom 原理 应用场景 例子...

背景 同步多副本配置方法 事务同步级别说明 remote_apply事务同步级别配置方法 小结 背景 对于金融级的应用场景，2个副本通常是不够的，用户可能会需要多个副本。 例如，一主4从，要求除了主以外，还需要2个同步的副本，其他可以为异步的副本。 另一方面，我们在使用数据库时，为了扩展读的能力，读写分离是比较常见的用法。 9.6以...

背景 经营分析设计示例 结构设计 需求与SQL设计 性能验证 技术1 实时透视 - 技术之 - 流式统计 技术2 实时透视、估算 - 技术之 - 流式统计 + HLL 技术3 实时透视、估算 - 技术之 - 计划估算 技术4 实时透视、估算 - 技术之 - 采样估算 技术5 实时圈选、透视 - 技术之 - GIN倒排 技术6 实时圈选、透...

背景 自定义并行聚合的原理和例子 例子 例子1，没有combinefunc，只支持扫描并行。 例子2，有combinefunc，支持并行聚合。 例子3，将多个一元数组聚合为一个一元数组 参考 背景 PostgreSQL 9.6开始就支持并行计算了，意味着聚合、扫描、排序、JOIN等都开始支持并行计算。对于聚合操作来说，并行计算与非并行计算...

背景 RDS PG 解决方案 优化方案，提高响应速度 DEMO 小结 参考 背景 20亿用户，每个用户1000个标签，基于任意标签组合圈选、透视（业务上的需求是一次最多计算100个标签的组合）。 相当于要处理2000亿记录。 1、实时求标签组合的记录数。（即满足标签组合的用户有多少） 2、用户ID。（级满足标签组合的用户ID。） 要...

背景 什么是等比数列？ 等比数列的应用 KPI 分解设定举例 1、某产品2019-01-01的用户数有1万个，2019-12-31要做到2万个，每个月目标如何设定是比较合理的？ 2、一个新产品，从无到有（从1个细胞开始），一年后要做到1000万，每个月应该需要设定多少的目标？ 严重漏洞：以上解决的是每个周期的增长问题，并非总的计数。 年底要完成10...