整体架构 集群与基本逻辑单元 主要逻辑单元 节点之间的通讯 一个典型的消息流程 存储模型与数据分区、分片 存储模型 数据分片 数据分区 负载均衡 数据写入与复制流程 Leader Vnode 写入流程 Follower Vnode 写入流程 主从选择 同步复制 缓存与持久化 时序数据缓存 持久化存储 多级存储 note ...

日志架构 Pod 和容器日志 节点的容器日志处理方式 日志轮转 系统组件日志 日志位置 集群级日志架构 使用节点级日志代理 使用边车容器运行日志代理 传输数据流的边车容器 具有日志代理功能的边车容器 从应用中直接暴露日志目录 接下来 日志架构 应用日志可以让你了解应用内部的运行状况。日志对调试问题和监控集群活动非常有用。 大部分...

总览 Linkis1.0 与 Linkis0.X 的区别简述 公共模块 计算治理服务架构 公共增强服务 微服务治理架构

EngineConnManager架构 EngineConnManager架构 EngineConnManager（ECM）：EngineConn的管理器，提供引擎的生命周期管理，同时向RM汇报负载信息和自身的健康状况。 Linkis-engineconn-linux-launch 引擎启动器，核心类为LinuxProcessEngineCo...

ResourceManager 架构 ResourceManager 架构 ResourceManager（简称RM），是Linkis的计算资源管理模块，所有的EngineConn（简称EC）、EngineConnManager（简称ECM），甚至包括Yarn在内的外部资源，都由RM负责统筹管理。RM能够基于用户、ECM或其它通过复杂标签定义的粒度对资...

设计架构 内部设计 使用形态 应用场景 设计架构 内部设计 Loggie详细的设计如下图所示： 数据链路 : 支持多pipeline，每个pipeline相对独立 每个pipeline有多个source、一个queue和一个sink interceptor实际上分为source interceptor和sink interceptor...

EngineConn架构设计 二级模块介绍： linkis-computation-engineconn交互式引擎连接器 linkis-engineconn-common引擎连接器的通用模块 linkis-engineconn-core引擎连接器的核心逻辑 linkis-engineconn-launch引擎连接器启动模块 linkis-execu...

ResourceManager 架构 RM在Linkis中的作用 资源的类型与格式 可用资源管理 资源使用管理 外部资源管理 ResourceManager 架构 ResourceManager（简称RM），是Linkis的计算资源管理模块，所有的EngineConn（简称EC）、EngineConnManager（简称ECM），甚至包括Ya...

LabelManager 架构 简述 整体架构示意 架构说明 一. LabelBuilder解析流程 二. NodeLabelScorer打分流程 LabelManager 架构 简述 LabelManager是Linkis中对上层应用提供标签服务的功能模组，运用标签技术管理集群资源分配、服务节点选举、用户权限匹配以及网关路由转发；包含支持...

AppManager 架构 背景 架构图 架构说明： AppManager 架构 背景 针对旧版本Linkis的Entrance模块负责太多的职责，对Engine的管理能力较弱，且不易于后续的扩展，新抽出了AppManager模块，完成 以下职责： 新增AM模块将Entrance之前做的管理Engine的功能移动到AM模块 AM需要支持操作...