工作和调度 调度 JobManager数据结构 工作和调度 本文档简要介绍了Flink如何调度作业及其如何表示和跟踪JobManager上的作业状态。 调度 Flink中的执行资源通过 任务槽 定义 。 每个TaskManager都有一个或多个任务槽，每个槽都可以运行一个并行任务管道。 流水线由多个连续的任务，如在 第n 一Ma...

同城跨IDC高可用 主备架构方案 垂直区分业务方案 整体MGR方案 问题反馈 联系我们 同城跨IDC高可用 本文档主要介绍在同城跨IDC场景中，如何基于GreatSQL+MySQL Router构建高可用架构。 同城多IDC的数据库架构，通常有以下几种方案可选： 主备架构方案 这里不是指MySQL的主从复制方案，而是指一个主IDC...

PG_JOB PG_JOB PG_JOB系统表存储用户创建的定时任务的任务详细信息，定时任务线程定时轮询pg_job系统表中的时间，当任务到期会触发任务的执行，并更新pg_job表中的任务状态。该系统表属于Shared Relation，所有创建的job记录对所有数据库可见。 表 1 PG_JOB字段 名称 类型 描述 o...

请求 响应 业务执行成功响应 业务执行异常响应 后续接口详细文档说明 一定要看 请求 接口请求必须采用统一的入口地址,该地址由服务端指定. 入口地址例子:http://127.0.0.1/admin/ 完整请求地址例子:http://127.0.0.1/admin/?action=value&token=value 请求...

背景 挑战 目标 应用场景 相关参考 背景 随着《网络安全法》的颁布施行，对个人隐私数据的保护已经上升到法律层面。传统的应用系统普遍缺少对个人隐私数据的保护措施。数据脱敏，可实现在不需要对生产数据库中的数据进行任何改变的情况下，依据用户定义的脱敏规则，对生产数据库返回的数据进行专门的加密、遮盖和替换，确保生产环境的敏感数据能够得到保护。 挑...

12-调度作业的服务器IP和进程信息的持久化是如何设计的? 12.1 作业服务器信息 12-调度作业的服务器IP和进程信息的持久化是如何设计的? 12.1 作业服务器信息 作业服务器信息的持久化主要调用了如下两行代码: serverService . persistOnline ( enabled ); instanceService . p...

busi_group 业务组表 busi_group 业务组表 busi_group 是业务组表，它的第一个功能就是对机器按资产属性作粗粒度划分，第二个功能就是权限控制，统一权限管理（机器的权限，告警规则的权限，自愈脚本的权限等）。以业务组的方式来分组机器最大优势就是简单直观，除此之外业务组还能作为标签使用也赋予更大的灵活性，更详细的设计逻辑可以参...

高性价比 单集群支持混合负载 HTAP 单一存储引擎实现 HTAP 灵活的资源分配提高机器利用率 高效低成本的对象存储 与 MySQL 的兼容性 高性价比 MatrixOne 是一款全新设计的数据库，其架构设计理念强调高性价比。MatrixOne 的高性价比主要体现在以下几个方面： 单集群支持混合负载 HTAP 随着大数据应用的快速普及与...

集群资源管理器——YARN 一、hadoop yarn 简介 二、YARN架构 1. ResourceManager 2. NodeManager 3. ApplicationMaster 4. Contain 三、YARN工作原理简述 四、YARN工作原理详述 1. 作业提交 2. 作业初始化 3. 任务分配 4. 任务运行 5. 进...

背景 挑战 目标 应用场景 相关参考 背景 随着《网络安全法》的颁布施行，对个人隐私数据的保护已经上升到法律层面。传统的应用系统普遍缺少对个人隐私数据的保护措施。数据脱敏，可实现在不需要对生产数据库中的数据进行任何改变的情况下，依据用户定义的脱敏规则，对生产数据库返回的数据进行专门的加密、遮盖和替换，确保生产环境的敏感数据能够得到保护。 挑...