榜单
服务器优惠
AI论文
-
8. 分布式系统的麻烦
第八章：分布式系统的麻烦 第八章：分布式系统的麻烦 邂逅相遇 网络延迟 存之为吾 无食我数 —— Kyle Kingsbury, Carly Rae Jepsen 《网络分区的危害》（2013年） 最近几章中反复出现的主题是，系统如何处理错误的事情。例如，我们讨论了副本故障切换 （“处... -
分布式锁和同步器
分布式锁和同步器 TOC Lock Fair Lock MultiLock ReadWriteLock Semaphore CountDownLatch Lock Redisson 分布式可重入锁，实现了 java.util.concurrent.locks.Lock 接口并支持 TTL。 RLock lock = ... -
分布式训练使用手册
分布式训练使用手册 分布式训练基本思想 使用parameter server方式的训练 选择同步或异步训练 选择是否使用分布式embedding表进行训练 选择参数分布方法 关闭切分参数 开启内存优化 使用NCCL2通信方式的训练 启动多进程模式 NCCL2 分布式训练作业 NCCL2分布式训练注意事项 分布式训练使用手册 分... -
分布式数据库能力
分布式数据库能力 可获得性 特性简介 客户价值 特性描述 特性增强 特性约束 依赖关系 分布式数据库能力 可获得性 本特性自openGauss 2.1.0版本开始引入。 特性简介 基于分布式中间件shardingsphere使openGauss具备分布式数据库能力。使用32个鲲鹏920(128核)节点组网(1*shardingsph... -
分布式执行和并行查询简介
对于Sharing Nothing的分布式系统来说，由于一个关系数据表的数据会以分区的方式存放在系统里面的各个节点上，对于跨分区的数据查询请求，必然会要求执行计划能够对多个节点的数据进行操作，天然的具有分布式执行计划生成和执行能力的需求。与之相对应的，并行查询是指通过对查询计划的改造，给每一个查询计划增加更多的CPU和IO处理能力，来提高单个查询的响应时间... -
分布式执行计划和调度
分布式执行和并行查询 分布式计划的生成 分布式执行计划调度 分布式执行计划管理 并行查询执行 并行查询的参数调优 -
使用 Amazon AWS 进行分布式训练
PyTorch 1.0 使用 Amazon AWS 进行分布式训练 Amazon AWS 设置 创建节点 设置安全组 必要的信息 环境配置 分布式训练代码 Imports 辅助函数 训练函数 验证函数 输入 初始化进程组 初始化模型 初始化数据加载器 (dataloader) 训练循环 运行代码 PyTorch 1.0... -
分布式训练使用手册
分布式训练使用手册 分布式训练基本思想 使用parameter server方式的训练 需要配置参数包括 选择同步或异步训练 选择是否使用分布式embedding表进行训练 选择参数分布方法 关闭切分参数 开启内存优化 使用NCCL2通信方式的训练 NCCL2模式必要参数说明 启动多进程模式 NCCL2 分布式训练作业 NCCL2分布式训... -
3. Hadoop 2.7.2完全分布式
Hadoop 2.7.2完全分布式的搭建 一 生产环境描述 1 网络环境 2 软件环境 二 hadoopmaster主机配置 1 JDK设置 2 IP设置 3 Hadoop相关环境变量的设置 4 hosts文件修改 5 SSH无密码登录 6 资源限制配置 三 hadoopslave1 2主机配置 1 JDK安装 2 IP设置 3 Ha...