安装部署
本文档将介绍 Spark 和 Spark-SequoiaDB 连接器的安装
Spark安装
下载 Spark 产品包
安装 Spark
Note:
可参考 Spark 官方文档
从 SequoiaDB 或者 maven 仓库下载相应版本的 Spark-SequoiaDB连接器 和 SequoiaDB Java 驱动
Note:
Spark-SequoiaDB连接组件的环境要求:
- JDK 1.7+
- Scala 2.11
- Spark 2.0.0+
Spark-SequoiaDB连接器安装
安装 Spark-SequoiaDB 连接器只需要将 Spark-SequoiaDB 连接组件和 SequoiaDB Java 驱动的 jar 包复制到 Spark 安装路径下的 jars
目录下即可。
Note:
用户需要将 jar 包复制到每一台机器的 Spark 安装路径下。