分布式训练reader准备 实现 cluster_reader 来读取分布式训练数据集 预先切分训练文件 分布式训练reader准备 一个数据并行的分布式训练任务通常会含有多个训练进程，每个训练进程处理整个数据集中的一部分，根据当前进程的唯一序号(trainer_id)以及训练进程总数(trainers)可以决定当前训练进程应该读取哪一部分数据。...

分布式训练快速开始 准备工作 样例代码 环境变量说明 分布式训练相关 API DistributeTranspiler exe.close() 启动分布式训练任务 分布式训练快速开始 准备工作 在本篇文章中，我们将会在介绍如何快速在一个集群中启动一个 PaddlePaddle的分布式训练任务，在开始之前，请按如下步骤做些准备工作： ...

分布式Minio快速入门 分布式Minio有什么好处? 数据保护 高可用 限制 一致性 开始吧 1. 前提条件 2. 运行分布式Minio GNU/Linux 和 macOS Windows GNU/Linux 和 macOS Windows 3. 验证 了解更多 分布式Minio快速入门 分布式Minio可以让你将多块硬...

分布式训练快速开始 准备工作 样例代码 环境变量说明 分布式训练相关 API DistributeTranspiler exe.close() 启动分布式训练任务 分布式训练快速开始 准备工作 在本篇文章中，我们将会在介绍如何快速在一个集群中启动一个 PaddlePaddle的分布式训练任务，在开始之前，请按如下步骤做些准备工作： ...

5.1 分布式工作流程 5.2 向一个项目贡献 5.3 维护项目 5.4 总结

7.1. 映射（Map） 7.2. 多值映射（Multimap） 7.3. 集（Set） 7.4. 有序集（SortedSet） 7.5. 计分排序集（ScoredSortedSet） 7.6. 字典排序集（LexSortedSet） 7.7. 列表（List） 7.8. 队列（Queue） 7.9. 双端队列（Deque） 7.10....

分布式文档存储 分布式文档存储 在上一章，我们看到了将数据放入索引然后检索它们的所有方法。不过我们有意略过了许多关于数据是如何在集群中分布和获取的相关技术细节。这种使用和细节分离是刻意为之的——你不需要知道数据在Elasticsearch如何分布它就会很好的工作。 这一章我们深入这些内部细节来帮助你更好的理解数据是如何在分布式系统中存储的。 注...

10.2. 分布式身份 10.2.1. 简介 10.2.2. 产品优势 10.2. 分布式身份 10.2.1. 简介 百度DID是基于区块链技术的分布式数字身份（Decentralized ID, DID）是可验证的、自我主权的、新型数字身份。建设分布式数字身份服务，支持用户通过分布式数字身份对隐私数据进行自主控制，实现信息数据安全存储、授权共享...

背景 挑战 目标 背景 挑战 目标 背景 随着数据规模的不断膨胀，使用多节点集群的分布式方式逐渐成为趋势。在这种情况下，如何高效、自动化管理集群节点，实现不同节点的协同工作，配置一致性，状态一致性，高可用性，可观测性等，就成为一个重要的挑战。 本部分包括三个模块：治理、可观测性、集群管理（计划中）。 挑战 分布式治理的挑战，主要在于...

背景 本地事务 两阶段提交 柔性事务 挑战 目标 背景 本地事务 两阶段提交 柔性事务 挑战 目标 背景 数据库事务需要满足 ACID（原子性、一致性、隔离性、持久性）四个特性。 原子性（Atomicity）指事务作为整体来执行，要么全部执行，要么全不执行； 一致性（Consistency）指事务应确保数据从一个一致的...