ElasticSearch 引擎 1. 环境准备 2. 部署和配置 2.1 版本的选择和编译 2.2 物料的部署和加载 2.3 引擎的标签 2.4 ElasticSearch 引擎相关配置 3. ElasticSearch引擎使用 3.1 准备操作 3.2 通过Linkis-cli进行任务提交 4. ElasticSearch引擎的用户设置...

Sqoop 引擎 1 Sqoop引擎Linkis系统参数配置 2 Sqoop引擎的配置和部署 2.1 Sqoop版本的选择和编译 2.2 Sqoop engineConn部署和加载 3 Sqoop引擎的使用 3.1 通过Linkis-cli进行任务提交 3.1 OnceEngineConn方式 4 参数 4.1 Common arguments...

总览 Spark 引擎 Hive 引擎 Python 引擎 Shell 引擎 JDBC 引擎 Flink 引擎 OpenLooKeng 引擎 Sqoop 引擎 Pipeline 引擎

OpenLooKeng 引擎 1 环境要求 2 配置和部署 2.1 版本的选择和编译 2.2 物料的部署和加载 2.3 引擎的标签 3 引擎的使用 准备操作 3.1 通过Linkis SDK进行使用 3.2 通过Linkis-cli进行任务提交 OpenLooKeng 引擎 本文主要介绍openLooKeng(>=1.1.1版本支持)...

EngineConn架构 EngineConnManager架构 EngineConnPlugin（ECP）架构 EngineConn 启动流程 EngineConn 历史信息记录特性 EngineConn Metrics 上报特性

Hive 引擎 1.Hive引擎使用前的环境配置 2.Hive引擎的配置和部署 2.1 Hive版本的选择和编译 2.2 hive engineConn部署和加载 2.3 hive引擎的标签 3.hive引擎的使用 准备操作，队列设置 3.1 通过Linkis SDK进行使用 3.2 通过Linkis-cli进行任务提交 3.3 Script...

总览 Spark 引擎 Hive 引擎 Python 引擎 Shell 引擎 JDBC 引擎

改写引擎 正确性改写 标识符改写 补列 分页修正 批量拆分 优化改写 单节点优化 流式归并优化 改写引擎 工程师面向逻辑库与逻辑表书写的 SQL，并不能够直接在真实的数据库中执行，SQL 改写用于将逻辑 SQL 改写为在真实数据库中可以正确执行的 SQL。 它包括正确性改写和优化改写两部分。 正确性改写 在包含分表的场景中，需要将分...

路由引擎 分片路由 直接路由 标准路由 笛卡尔路由 广播路由 全库表路由 全库路由 全实例路由 单播路由 阻断路由 路由引擎 根据解析上下文匹配数据库和表的分片策略，并生成路由路径。 对于携带分片键的 SQL，根据分片键的不同可以划分为单片路由（分片键的操作符是等号）、多片路由（分片键的操作符是 IN）和范围路由（分片键的操作符是 ...

存储引擎 关系数据库 Redis boltdb 存储引擎 dtm支持将全局事务的状态与进度保存到三类存储：关系数据库（mysql/postgres）、Redis、boltdb，这三种存储分别适合不同的场景，下面分别介绍如下 关系数据库 互联网里的几乎每个公司，都会将数据存储在关系数据库，因此dtm最早支持了关系型数据库的存储，包括： My...