Source input formats Formatting data Custom formats Input format JSON CSV TSV (Delimited) ORC Parquet Avro Stream Avro Bytes Decoder Inline Schema Based Avro Bytes Decoder ...

OSS Filesystem Aliyun OSS 部署 Aliyun OSS 相关的配置 Aliyun OSS Libs OSS Filesystem 这个页面描述了如何让你的Hudi spark任务使用Aliyun OSS存储。 Aliyun OSS 部署 为了让Hudi使用OSS，需要增加两部分的配置: 为Hidi增加Aliyu...

Linux环境下Hive的安装 一、安装Hive 1.1 下载并解压 1.2 配置环境变量 1.3 修改配置 1.4 拷贝数据库驱动 1.5 初始化元数据库 1.6 启动 二、HiveServer2/beeline 2.1 修改Hadoop配置 2.2 启动hiveserver2 2.3 使用beeline Linux环境下Hi...

数据源 Client SDK 的使用 数据源 Client SDK 的使用 Linkis DataSource 提供了方便的JAVA和SCALA调用的接口，只需要引入linkis-datasource-client的模块就可以进行使用， <dependency> <groupId> org.apache.linkis </gro...

Python Engine Usage 1. Environment configuration before using Python EngineConn 2. Python EngineConn configuration and deployment 2.1 Python version selection and compilation 2.2...

Running Apache Flink on Alluxio Prerequisites Configuration Set property in core-site.xml Specify path to core-site.xml in conf/flink-conf.yaml Distribute the Alluxio Client ...

编译Alluxio源代码 编译Alluxio Checkout源码 编译 验证Alluxio编译完成 编译选项 计算框架支持 Hadoop发行版的支持 Apache Cloudera MapR Hortonworks 编译Alluxio源代码 编译Alluxio 该指南介绍如何从头编译Alluxio。 这部分...

编译Alluxio源代码 编译Alluxio Checkout源码 编译 验证Alluxio编译完成 编译选项 计算框架支持 Hadoop发行版的支持 Apache Cloudera MapR Hortonworks 编译Alluxio源代码 编译Alluxio 该指南介绍如何从头编译Alluxio。 这部分...

编译Alluxio源代码 编译Alluxio Checkout源码 编译 验证Alluxio编译完成 编译选项 计算框架支持 Hadoop发行版的支持 Apache Cloudera Hortonworks 编译Alluxio源代码 编译Alluxio 该指南介绍如何从头编译Alluxio。 这部分内容的前提条...

DataSource Client SDK 的使用 1. 引入依赖模块 2. Scala测试代码 DataSource Client SDK 的使用 Linkis DataSource 提供了方便的JAVA和SCALA调用的接口，只需要引入linkis-datasource-client的模块就可以进行使用， 1. 引入依赖模块 <d...