版本说明 操作步骤 使用建议 使用 Spark 的 DataFrame，而不要使用 Pandas 的 DataFrame 在 Task 里使用 Python 库，而不是在 Driver上 使用 Python 库 Pypark 组件为使用 Python 的 Spark 用户提供服务，用户通过 Python 编写 Spark 应用程序，通过 PySp...

八、混洗 八、混洗 spark 中的某些操作会触发shuffle shuffle 是spark 重新分配数据的一种机制，它使得这些数据可以跨不同区域进行分组 这通常涉及到在executor 和驱动器程序之间拷贝数据，使得shuffle 成为一个复杂的、代价高昂的操作 在spark 里，特定的操作需要数据不会跨分区分布。如果...

编译Exchange 准备工作 编译Exchange 编译Exchange 本文介绍如何编译Nebula Exchange。用户也可以直接下载 编译完成的.jar 文件。 准备工作 安装Maven ，并执行如下操作： 修改Maven安装目录下libexec/conf/settings.xml 文件的mirror 部分： <mirror> ...

Scenario Scenario 1 Scenario 2 Scenario 3 Scenario 4 Scenario Scenario 1 A company uses surface mount technology (SMT) to produce chips: it is necessary to first print so...

编译Exchange 准备工作 编译Exchange 下载依赖包失败 编译Exchange 本文介绍如何编译Nebula Exchange。用户也可以直接下载 编译完成的.jar 文件。 准备工作 安装Maven 。 下载pulsar-spark-connector_2.11 ，解压到本地Maven库的目录io/streamnative...

Linkis 配置参数介绍 1. 参数分类 2. Linkis 服务端参数 3. Linkis 客户端参数 4. Linkis 管理台参数 Linkis 配置参数介绍 1. 参数分类 Linkis 参数主要分为以下三个部分： Linkis 服务端参数，主要包含Linkis本身的参数和Spring的参数 Linkis SDK、...

Exchange常见问题 编译问题 部分非central仓库的包下载失败，报错Could not resolve dependencies for project xxx 执行问题 Yarn-Cluster模式下如何提交？ 报错method name xxx not found 报NoSuchMethod、MethodNotFound错误（Exc...

生态工具概览 Nebula Graph Studio Nebula Dashboard Nebula Explorer Nebula Exchange Nebula Operator Nebula Importer Nebula Spark Connector Nebula Flink Connector Nebula Algorithm ...

异常诊断与调试 Alluxio日志地址 Alluxio远程调试 Alluxio部署常见问题 问题: 在本地机器上初次安装使用Alluxio失败，应该怎么办？ 问题: 打算在Spark/HDFS集群中部署Alluxio，有什么建议？ ALLuxio使用常见问题 问题：出现“No FileSystem for scheme: alluxio”这种错误信...

Release 0.276 Details General Changes Hive Changes Hudi Changes Iceberg Changes Pinot Changes Router Changes Spark Changes Credits Release 0.276 Warning There is a l...