R SparkR read.text用法及代码示例

说明：

加载文本文件并返回一个 SparkDataFrame，其架构以名为 "value" 的字符串列开头，如果有的话，后面是分区列。文本文件必须编码为 UTF-8。

用法：

read.text(path, ...)

参数：

• path 要读取的文件路径。允许多个路径的向量。
• ... 额外的外部数据源特定的命名属性。您可以在 text-specific 中找到用于读取文本文件的选项https://spark.apache.org/docs/latest/sql-data-sources-text.html#data-source-option您使用的版本中的数据源选项。

细节：

文本文件中的每一行都是生成的 SparkDataFrame 中的新行。

返回：

SparkDataFrame

注意：

从 1.6.1 开始的 read.text

例子：

sparkR.session()
path <- "path/to/file.txt"
df <- read.text(path)