总览

简介

InLong Sort 是一个基于 Apache Flink 的 ETL 系统,支持多种数据源,支持简单的字段抽取,支持多种存储系统。 InLong Sort 既支持和 Manager 一起配合使用,通过 Manager 进行系统元数据的管理,也可以在 Flink 环境下独立运行。

特性

支持多种数据节点

TypeService
Extract NodePulsar
MySQL
Kafka
MongoDB
PostgreSQL
TransformString Split
String Regular Replace
String Regular Replace First Matched Value
Data Filter
Data Distinct
Regular Join
Load NodeHive
Kafka
HBase
ClickHouse
Iceberg
PostgreSQL
HDFS
TDSQL Postgres
Hudi