本文简要介绍
pyspark.sql.functions.grouping_id
的用法。用法:
pyspark.sql.functions.grouping_id(*cols)
聚合函数:返回分组的级别,等于
(分组(c1) << (n-1)) + (分组(c2) << (n-2)) + … + 分组(cn)
2.0.0 版中的新函数。
注意:
列列表应与分组列完全匹配,或者为空(表示所有分组列)。
例子:
>>> df.cube("name").agg(grouping_id(), sum("age")).orderBy("name").show() +-----+-------------+--------+ | name|grouping_id()|sum(age)| +-----+-------------+--------+ | null| 1| 7| |Alice| 0| 2| | Bob| 0| 5| +-----+-------------+--------+
相关用法
- Python pyspark grouping用法及代码示例
- Python pyspark greatest用法及代码示例
- Python pyspark get_json_object用法及代码示例
- Python pyspark get_dummies用法及代码示例
- Python pyspark create_map用法及代码示例
- Python pyspark date_add用法及代码示例
- Python pyspark DataFrame.to_latex用法及代码示例
- Python pyspark DataStreamReader.schema用法及代码示例
- Python pyspark MultiIndex.size用法及代码示例
- Python pyspark arrays_overlap用法及代码示例
- Python pyspark Series.asof用法及代码示例
- Python pyspark DataFrame.align用法及代码示例
- Python pyspark Index.is_monotonic_decreasing用法及代码示例
- Python pyspark IsotonicRegression用法及代码示例
- Python pyspark DataFrame.plot.bar用法及代码示例
- Python pyspark DataFrame.to_delta用法及代码示例
- Python pyspark element_at用法及代码示例
- Python pyspark explode用法及代码示例
- Python pyspark MultiIndex.hasnans用法及代码示例
- Python pyspark Series.to_frame用法及代码示例
- Python pyspark DataFrame.quantile用法及代码示例
- Python pyspark Column.withField用法及代码示例
- Python pyspark Index.values用法及代码示例
- Python pyspark Index.drop_duplicates用法及代码示例
- Python pyspark aggregate用法及代码示例
注:本文由纯净天空筛选整理自spark.apache.org大神的英文原创作品 pyspark.sql.functions.grouping_id。非经特殊声明,原始代码版权归原作者所有,本译文未经允许或授权,请勿转载或复制。