背景 环境 测试方法 结果解读 32c64ht 512G 1000仓库 机器测试结果 性能小结 参考 背景 PostgreSQL 已与2019.10.3正式发布，测试其tpcc性能。 环境 阿里云虚拟机 [ root@PostgreSQL12 ~]# lscpu Architecture : x...

背景 测试CASE 测试环境准备 测试TPC-B logged table unlogged table 性能对比 1 logged table对比 1、TPS对比 2、事务整体RT对比 3、实际SQL RT对比 4、RT 标准方差对比 5、建立完所有连接的耗时对比 6、释放完所有连接的耗时对比 2 unlogged table对比...

背景 一、数据结构和数据量 数据结构抽象 二、分析需求 三、数据库选型 四、PostgreSQL 10 方案1 设计表结构 初始化数据 创建必要的UDF函数 透视SQL设计 透视SQL性能指标举例 五、PostgreSQL 10 方案设计2 - 极限优化 方案1的优化点分析 如何补齐呢？ 补齐后的数据透视（完全规避JOIN），开启并...

背景 一、btree 原理 应用场景 例子 二、hash 原理 应用场景 例子 三、gin 原理 应用场景 例子 四、gist 原理 应用场景 例子 五、sp-gist 原理 应用场景 例子 六、brin 原理 应用场景 例子 七、rum 原理 应用场景 例子 八、bloom 原理 应用场景 例子...

背景 RDS PG 解决方案 优化方案，提高响应速度 DEMO 小结 参考 背景 20亿用户，每个用户1000个标签，基于任意标签组合圈选、透视（业务上的需求是一次最多计算100个标签的组合）。 相当于要处理2000亿记录。 1、实时求标签组合的记录数。（即满足标签组合的用户有多少） 2、用户ID。（级满足标签组合的用户ID。） 要...

背景 什么是等比数列？ 等比数列的应用 KPI 分解设定举例 1、某产品2019-01-01的用户数有1万个，2019-12-31要做到2万个，每个月目标如何设定是比较合理的？ 2、一个新产品，从无到有（从1个细胞开始），一年后要做到1000万，每个月应该需要设定多少的目标？ 严重漏洞：以上解决的是每个周期的增长问题，并非总的计数。 年底要完成10...

背景 传统的业务场景分析 1. 可靠性 2. 高可用 3. 容灾 4. 备份恢复 5. 性能诊断 6. 功能 数据库编程 SQL兼容性 语法例子 7. 扩展性 8. 多租户隔离 9. 价格 用户痛点分析 1. 数据库的计算能力 2. 数据挖掘分析能力 3. 扩展能力 4. 可编程能力 价格 DT时代企业对数据的处理需求...

背景 例子 参考 背景 PostgreSQL 相似插件非常多，插件的功能以及用法如下： 《PostgreSQL 相似搜索插件介绍大汇总 (cube,rum,pg_trgm,smlar,imgsmlr,pg_similarity) (rum,gin,gist)》 相似人群分析在精准营销，推荐系统中的需求很多。 人的属性可以使用向量来表达，每...

背景 例子 dblink例子 postgres_fdw例子 参考 背景 阿里云RDS PG 11 云盘版开放相同vpc的实例间的dblink, postgres_fdw功能。相同vpc内如果有自建的pg实例，也可以被访问，如果要访问vpc外部的其他实例，通过相同vpc内ecs的端口跳转也能实现。 阿里云RDS PG 11 云盘版购买入口： ...

背景 简单粗暴设计 性能评测 优化设计 定义基表 定义自动建表函数 定义以schemaless的方式写数据的函数 schemaless设计压测 小结 背景 老人、儿童是最容易走丢的人群，一定要看好老人和小孩，但是万一走丢了怎么办呢？ 阿里有一个公益系统，团圆，这个系统是用来帮助发布走丢人群信息的，公安通过发布的走丢人的照片，最后一次...