开始探索 GreptimeDB 分布式集群 安装 gtctl 并运行 playground 在 Kubernetes 中部署 GreptimeDB 集群 开始探索 GreptimeDB 分布式集群 GreptimeDB 可以运行于 cluster 模式以支持水平扩展。 安装 gtctl 并运行 playground gtctl 是用于管理 ...

常见的分布式并行策略 为什么分布式训练越来越流行 常见的并行策略 数据并行 模型并行 流水并行 混合并行 常见的分布式并行策略 为什么分布式训练越来越流行 近年来，深度学习被广泛应用到各个领域，包括计算机视觉、语言理解、语音识别、广告推荐等。在这些不同的领域中，一个共同的特点就是模型规模越来越大，比如 GPT-3 模型的参数量达到1750...

单 DFO 调度 两 DFO 调度 分布式执行计划的简单调度模型如下： 在执行计划生成的最后阶段，以 EXCHANGE 节点为界，拆分成多个子计划，每个子计划被封装成为一个 DFO，在并行度大于 1 的场景下，会一次调度两个 DFO，依次完成 DFO 树的遍历执行；在并行度等于 1 的场景下，每个 DFO 会将产生的数据存入中间结果管理器，按照后序遍...

分布式执行 并行查询 本章节介绍分布式执行和并行查询。 分布式执行 对于 Shared-Nothing 的分布式系统，由于一个关系数据表的数据会以分区的方式存放在系统里面的各个节点上，所以对于跨分区的数据查询请求，必然会要求执行计划能够对多个节点的数据进行操作，因而 OceanBase 数据库具有分布式执行计划生成和执行能力。 对于分布式执行计...

Rook-Ceph 分布式存储 概述 安装部署 前提条件 部署 Rook-Ceph 部署 Rook Operator 创建Ceph集群 验证Ceph集群 提供存储 创建共享存储 创建块存储 创建对象存储 PUT 或 GET 对象 供集群外部访问 访问dashboard Rook-Ceph 分布式存储 概述 Ceph 引入...

在OceanBase 1.x中，分布式执行计划的调度采用了比较简单的调度模型。在计划生成的最后阶段，将以Exchange节点为界，拆分成多个子计划，每个子计划被封装成为一个Job，根据计划树的执行顺序，得到每个Job之间的依赖关系，生成一个Job的执行顺序。在调度时，每次调度一个Job，执行Job的所有task，在Job完成后，生成在顺序上下一个Job的t...

单 DFO 调度示例 两 DFO 调度示例 分布式执行计划的简单调度模型为，在计划生成的最后阶段，以 exchange 节点为界，拆分成多个子计划，每个子计划被封装成为一个 DFO, 在并行度大于 1 的场景下, 会一次调度两个 DFO, 依次完成DFO树的遍历执行； 在并行度等于 1 的场景下, 每个 DFO 会将产生的数据存入中间结果管理器, 按照...