本文简要介绍
pyspark.sql.SparkSession.range
的用法。用法:
SparkSession.range(start, end=None, step=1, numPartitions=None)
使用名为
id
的单个pyspark.sql.types.LongType
列创建一个DataFrame
,其中包含从start
到end
(不包括)范围内的元素,步长 值为step
。2.0.0 版中的新函数。
- start:int
起始值
- end:整数,可选
最终值(不包括)
- step:整数,可选
增量步骤(默认值:1)
- numPartitions:整数,可选
DataFrame的分区数量
参数:
返回:
例子:
>>> spark.range(1, 7, 2).collect() [Row(id=1), Row(id=3), Row(id=5)]
如果只指定一个参数,它将被用作结束值。
>>> spark.range(3).collect() [Row(id=0), Row(id=1), Row(id=2)]
相关用法
- Python pyspark SparkSession.createDataFrame用法及代码示例
- Python pyspark SparkSession.table用法及代码示例
- Python pyspark SparkSession.builder.config用法及代码示例
- Python pyspark SparkSession.getActiveSession用法及代码示例
- Python pyspark SparkSession.sql用法及代码示例
- Python pyspark SparkSession.builder.getOrCreate用法及代码示例
- Python pyspark SparkSession用法及代码示例
- Python pyspark SparkConf用法及代码示例
- Python pyspark SparkContext.addFile用法及代码示例
- Python pyspark SparkContext.union用法及代码示例
- Python pyspark SparkContext.runJob用法及代码示例
- Python pyspark SparkContext.parallelize用法及代码示例
- Python pyspark SparkContext用法及代码示例
- Python pyspark SparkContext.range用法及代码示例
- Python pyspark SparkContext.setJobGroup用法及代码示例
- Python pyspark SparkContext.pickleFile用法及代码示例
- Python pyspark SparkContext.applicationId用法及代码示例
- Python pyspark SparkContext.wholeTextFiles用法及代码示例
- Python pyspark SparkContext.textFile用法及代码示例
- Python pyspark SparseVector.parse用法及代码示例
- Python pyspark SparseVector.dot用法及代码示例
- Python pyspark SparseVector.squared_distance用法及代码示例
- Python pyspark SparseVector.norm用法及代码示例
- Python pyspark Series.asof用法及代码示例
- Python pyspark Series.to_frame用法及代码示例
注:本文由纯净天空筛选整理自spark.apache.org大神的英文原创作品 pyspark.sql.SparkSession.range。非经特殊声明,原始代码版权归原作者所有,本译文未经允许或授权,请勿转载或复制。