性能优化 性能优化 一个 RDD 有多少个分区 数据本地性

积沙成塔 核心观念 一个部门墙的例子 全局优化 关注价值流 在现实中验证和优化 反脆弱 积沙成塔 你在展望未来的时候，是不可能将这些片段完整的串起来的，你只能在回顾过往时才可以。所以你要相信，在未来某个时刻，你会将这些片段串起来！ 史蒂夫.乔布斯 当我读完《程序员的思维修炼》 时，有一种韦小宝和双儿终于八部《四十二章》中的地图串...

背景 Page Cache机制 Page Cache监控与管理 vmtouch posix_fadvise Mysql日志优化策略 Redo log Binlog 测试 总结 背景 监控线上实例时，曾出现可用内存不足，性能发生抖动的情况。研究后发现是日志文件的page cache占用了大量的内存（200G+），导致系统可立即分配的内...

背景 关于Group Commit网上的资料其实已经足够多了，我这里只简单的介绍一下。 众所周知，在MySQL5.6之前的版本，由于引入了Binlog/InnoDB的XA，Binlog的写入和InnoDB commit完全串行化执行，大概的执行序列如下： InnoDB prepare （持有 prepare_commit_mutex ）； ...

背景 GTID 可以说是 MySQL 5.6 版本的一个杀手级特性，它给主备复制带来了极大的便利，RDS只读实例就是强依赖于这个特性。然而GTID在给我们带来便利的同时，也埋下了许多坑，最近几期内核月报中GTID的频繁出现也说明了这一点，对其我们可以说是既爱又恨。 GTID 并不是免费午餐，要使用它是要有代价的，为了保证GTID这个体系能够运转起来，...

移动端优化 click 的 300ms 延迟响应 快速回弹滚动 设备检测 获取滚动条值 清除输入框内阴影 Meta 相关 页面窗口自动调整到设备宽度，并禁止用户缩放页面 电话号码识别 邮箱地址的识别 指定 iOS 的 safari 顶端状态条的样式 移动端优化 click 的 300ms 延迟响应 click 的 300ms ...

SQL 优化流程概览 逻辑优化 物理优化 Prepare 语句执行计划缓存 非 Prepare 语句执行计划缓存

物理优化 物理优化 物理优化是基于代价的优化，为上一阶段产生的逻辑执行计划制定物理执行计划。这一阶段中，优化器会为逻辑执行计划中的每个算子选择具体的物理实现。逻辑算子的不同物理实现有着不同的时间复杂度、资源消耗和物理属性等。在这个过程中，优化器会根据数据的统计信息来确定不同物理实现的代价，并选择整体代价最小的物理执行计划。 理解 TiDB 执行计划 ...

通用优化提示 前言 烟雾和镜子 缓慢的本质 测量性能 限制 侦查工作 假设检验 二分查找 分析器 原则 高性能的设计 渐进式设计 优化过程 优化瓶颈 附录 瓶颈数学 通用优化提示 前言 在一个理想的世界里, 计算机将以无限的速度运行. 我们唯一的限制是我们的想象力. 然而, 在现实世界中, 制造出能让最快的计算机也屈服...