亚线性内存优化 亚线性内存优化 使用大 batch size 通常能够提升深度学习模型性能。然而，我们经常遇到的困境是有限的 GPU 内存资源无法满足大 batch size 模型训练。为了缓解这一问题， MegEngine 提供了亚线性内存 ( sublinear memory ) 优化技术用于降低网络训练的内存占用量。该技术基于 grad...

内存瓶颈 找到内存瓶颈 性能调优选项 内存瓶颈 内存瓶颈 找到内存瓶颈 性能调优选项 Linux系统上，有很多进程在同时运行。这些程序支持多用户，有些进程比另外的用的更多一些。当一个应用访问缓存的时候，会保持较高的性能，因为它从内存中取数据，而不是速度很慢的磁盘中。 操作系统使用算法来控制哪些程序使用物理内存，而哪些程序要...

TiDB 内存控制文档 如何配置一条 SQL 执行过程中的内存使用阈值 TiDB 内存控制文档 目前 TiDB 已经能够做到追踪单条 SQL 查询过程中的内存使用情况，当内存使用超过一定阈值后也能采取一些操作来预防 OOM 或者排查 OOM 原因。在 TiDB 的配置文件中，我们可以使用如下配置来控制内存使用超阈值时 TiDB 的行为： # Va...

【实现】物理内存探测 【实现】物理内存探测 物理内存探测是在bootasm.S中实现的，相关代码很短，如下所示： probe_memory : //对0x8000处的32位单元清零,即给位于0x8000处的 //struct e820map的结构域nr_map清零 movl $0 , 0x8000 ...

2.7 CGO内存模型 2.7.1 Go访问C内存 2.7.2 C临时访问传入的Go内存 2.7.3 C长期持有Go指针对象 2.7.4 导出C函数不能返回Go内存 2.7 CGO内存模型 CGO是架接Go语言和C语言的桥梁，它使二者在二进制接口层面实现了互通，但是我们要注意因两种语言的内存模型的差异而可能引起的问题。如果在CGO处理的跨语言...

MongoDB内存使用原理 Linux是如何管理内存的 OOM killer MongoDB是如何使用内存的 MongoDB内存使用原理 但凡初次接触MongoDB的人，无不惊讶于它对内存的贪得无厌，至于个中缘由，我先讲讲Linux是如何管理内存的，再说说MongoDB是如何使用内存的，答案自然就清楚了。 据说带着问题学习更有效，那就先看一个...

内存和CPU分析 内存分析 跟踪内存泄漏 CPU分析 下一步 疑问？ 内存和CPU分析 分析工具可帮助您诊断内存和CPU使用情况以及其他应用级别的问题。 PM2 Plus中的配置文件允许您获取生产服务器的远程CPU/内存快照。 您可以使用chrome开发者工具以准备好相关文件进行检查。 内存分析 点击获取堆转储并下载文件。 这个...

内存管理 在计算系统中，变量、中间数据一般存放在系统存储空间中，只有在实际使用时才将它们从存储空间调入到中央处理器内部进行运算。通常存储空间可以分为两种：内部存储空间和外部存储空间。内部存储空间访问速度比较快，能够按照变量地址随机地访问，也就是我们通常所说的RAM（随机存储器），或电脑的内存；而外部存储空间内所保存的内容相对来说比较固定，即使掉电后数据也...

配置内存 修改 Drillbit 内存 关于 Drillbit 的启动脚本 配置内存 你可以在任意 Drill 集群直接配置其所分配的内存给 Drillbit。Drillbit 默认的内存是 8G，但是 Drill 在 16G 表现更佳，另外也取决于工作量。Drill 的查询操作不能超过其分配的总内存。 Drill 使用 Java 直接操作内存...