部署Spark Standalone集群 部署步骤 部署单实例的master服务 部署多实例的worker实例 Spark数据读取 Master节点主备高可用 部署Spark Standalone集群 Standalone 是 Spark 自身提供的一种主从集群部署模式。本文讲述一个常规1主多从的集群部署模式，该模式下master服务依靠Ra...

部署Spark Standalone集群 部署步骤 部署单实例的master服务 部署多实例的worker实例 Spark数据读取 Master节点主备高可用 部署Spark Standalone集群 Standalone 是 Spark 自身提供的一种主从集群部署模式。本文讲述一个常规1主多从的集群部署模式，该模式下master服务依靠Ra...

Spark Streaming 整合 Flume 一、简介 二、推送式方法 2.1 配置日志收集Flume 2.2 项目依赖 2.3 Spark Streaming接收日志数据 2.4 项目打包 2.5 启动服务和提交作业 2.6 测试 2.7 注意事项 1. 启动顺序 2. 版本一致 三、拉取式方法 3.1 配置日志收集Flume ...

用 Spark 构建 Cube 准备阶段 安装 Kylin v2.1.0 及以上版本 准备 “kylin.env.hadoop-conf-dir” 检查 Spark 配置 创建和修改样例 cube 用 Spark 构建 Cube 通过Apache Livy使用Spark 可选功能 疑难解答 进一步 用 Spark 构建 Cube ...

用 Spark 构建 Cube 准备阶段 安装 Kylin v2.1.0 及以上版本 准备 “kylin.env.hadoop-conf-dir” 检查 Spark 配置 创建和修改样例 cube 用 Spark 构建 Cube 疑难解答 进一步 用 Spark 构建 Cube Kylin v2.0 介绍了 Spark cube en...

部署步骤 部署单实例的master服务 部署多实例的worker实例 Spark数据读取 Master节点主备高可用 Standalone 是 Spark 自身提供的一种主从集群部署模式。本文讲述一个常规1主多从的集群部署模式，该模式下master服务依靠Rainbond平台监控保障其可用性，支持重新调度重启。 worker服务可以根据需要伸缩多...

编译 Nebula Spark Connector 编译 Nebula Spark Connector 按以下步骤编译 Nebula Spark Connector v1.x： 克隆 nebula-java 源代码。 git clone - b v1 . 0 https : //github.com/vesoft-inc/nebula-ja...

什么是 Nebula Spark Connector Writer 使用示例

Apache Druid vs Spark Apache Druid vs Spark Druid and Spark are complementary solutions as Druid can be used to accelerate OLAP queries in Spark. Spark is a general cluster co...

Spark SQL and Dataset API Non-lazy Evaluation in DataFrameReader.load Explicit Schema Sampling for Schema Inference PySpark Specific Considerations DataFrame Schema Nullablili...