使用FleetAPI进行分布式训练 FleetAPI 设计说明 FleetAPI 接口说明 FleetAPI 一般训练步骤 通过import引入需要使用的模式 初始化 分布式策略及多机配置 具体训练流程 使用FleetAPI进行分布式训练 FleetAPI 设计说明 Fleet是PaddlePaddle Fluid最新优化的多机AP...

分布式系统核心技术 分布式系统核心技术 万法皆空，因果不空。 随着摩尔定律碰到瓶颈，分布式架构越来越常见。 从单点演变到分布式结构，首要问题之一就是数据一致性。很显然，如果分布式集群中多个节点处理结果无法保证一致，那么在其上的业务系统将无法正常工作。 区块链系统是一个典型的分布式系统，必然也会碰到这些经典问题。 本章将介绍分布式系统领域...

分布式记账与区块链 从分布式记账问题说起 区块链的三次热潮 分布式记账的重要性 分布式账本的现状与未来 分布式记账与区块链 随着最前沿的信息科技成果不断融入金融行业，以区块链（Blockchain）为基础的分布式账本科技（Distributed Ledger Technology，DLT）崭露头角，并在部分场景（如跨境支付）中得到探索和落地。...

分布式系统 分布式系统 万法皆空，因果不空。 随着摩尔定律碰到瓶颈，越来越多的系统要依靠分布式集群架构来实现海量数据处理和可扩展计算能力。 区块链首先是一个分布式系统。 中央式结构改成分布式系统，碰到的第一个问题就是一致性的保障。 很显然，如果一个分布式集群无法保证处理结果一致的话，那任何建立于其上的业务系统都无法正常工作。 本章将介...

ThinkPHP内置了分布式数据库的支持，包括主从式数据库的读写分离，但是分布式数据库必须是相同的数据库类型。 配置database.deploy 为1 可以采用分布式数据库支持。如果采用分布式数据库，定义数据库配置信息的方式如下： //分布式数据库配置定义 return [ // 启用分布式数据库 'deploy...

Rook-Ceph 分布式存储 概述 安装部署 前提条件 部署 Rook-Ceph 部署 Rook Operator 创建Ceph集群 验证Ceph集群 提供存储 创建共享存储 创建块存储 创建对象存储 PUT 或 GET 对象 供集群外部访问 访问dashboard Rook-Ceph 分布式存储 概述 Ceph 引入...

6.6 分布式配置管理 6.6.1 场景举例 6.6.1.1 报表系统 6.6.1.2 业务配置 6.6.2 使用etcd实现配置更新 6.6.2.1 配置定义 6.6.2.2 新建 etcd client 6.6.2.3 配置获取 6.6.2.4 配置更新订阅 6.6.2.5 整合起来 6.6.3 配置膨胀 6.6.4 配置版本管理 ...

适用分区表的场景 并行查询简介 适用并行查询的场景 适用分区表的场景 如果关系表比较小，则不必要进行分区，如果关系表比较大，则需要根据上层业务需求，审慎选择分区键，以保证大多数查询能够使用分区键进行分区裁剪以减少数据访问量。同时，对于有关联性的表，建议采用关联键作为分区键，采用相同分区方式，使用 table group 的方式将相同分区配置在同样...