元素智能乘积 元素智能乘积   ElementwiseProduct 对每一个输入向量乘以一个给定的“权重”向量。换句话说，就是通过一个乘子对数据集的每一列进行缩放。这个转换可以表示为如下的形式：   下面是一个使用的实例。 import org . apache . spark . SparkContext . _ import ...

Tokenizer Tokenizer   Tokenization 是一个将文本(如一个句子)转换为个体单元(如词)的处理过程。一个简单的Tokenizer 类就提供了这个功能。下面的例子展示了如何将句子转换为此序列。   RegexTokenizer 基于正则表达式匹配提供了更高级的断词(tokenization )。默认情况下,参数patte...

S3 S3 S3 is Amazon Web Services’s solution for storing large files in the cloud.On a production system, you want your Amazon EC2 compute nodes on the same zoneas your S3 files ...

History Job Interface History Job Interface QueryRestfulApi class Interface address :/api/rest_j/v1/jobhistory/governanceStationAdmin Request method : GET Request data typ...

Openfire 安装和配置 本机环境 Openfire 说明 下载 安装 MySQL、JDK 安装 Openfire 配置 使用 Spark 客户端 Openfire 安装和配置 本机环境 系统：CentOS 6.7 64 位 JDK 1.7 64 位 MySQL 5.6 Openfire 说明 官网：http://ww...

Troubleshooting Where are the Alluxio logs? Alluxio remote debug Setup FAQ Q: I’m new to Alluxio and cannot set up Alluxio on my local machine. What should I do? Q: I’m trying t...

配置项设置 配置应用 Alluxio Shell 命令 Spark 作业 Hadoop MapReduce 作业 配置Alluxio集群 使用 Site-Property 文件 (推荐) 使用集群默认 使用环境变量 配置资源 配置项设置 可以通过设置受支持的configuration properties 的值来配置A...

Architecture Architecture Besides IoTDB engine, we also developed several components to provide better IoT service. All components are referred to below as the IoTDB suite, and...

Parquet文件 加载数据 配置 Parquet文件 Parquet是一种柱状(columnar)格式，可以被许多其它的数据处理系统支持。Spark SQL提供支持读和写Parquet文件的功能，这些文件可以自动地保留原始数据的模式。 加载数据 // sqlContext from the previous example is used...

Iterative Algorithms Iterative Applications and Lineage Checkpointing “Flat Transformations” Creating an Union of Multiple RDDs Joining Multiple RDDs Pushing Transformations to ...