本文整理匯總了Java中org.apache.spark.api.java.JavaRDD.partitions方法的典型用法代碼示例。如果您正苦於以下問題:Java JavaRDD.partitions方法的具體用法?Java JavaRDD.partitions怎麽用?Java JavaRDD.partitions使用的例子?那麽, 這裏精選的方法代碼示例或許可以為您提供幫助。您也可以進一步了解該方法所在類org.apache.spark.api.java.JavaRDD
的用法示例。
在下文中一共展示了JavaRDD.partitions方法的1個代碼示例,這些例子默認根據受歡迎程度排序。您可以為喜歡或者感覺有用的代碼點讚,您的評價將有助於係統推薦出更棒的Java代碼示例。
示例1: checkUserPartition
import org.apache.spark.api.java.JavaRDD; //導入方法依賴的package包/類
protected void checkUserPartition(JavaRDD<String> userRDD) {
System.out.println("hhhhh");
List<Partition> partitios = userRDD.partitions();
System.out.println(partitios.size());
int[] partitionIds = new int[partitios.size()];
for (int i = 0; i < partitios.size(); i++) {
int index = partitios.get(i).index();
partitionIds[i] = index;
}
List<String>[] userIPs = userRDD.collectPartitions(partitionIds);
for (int i = 0; i < userIPs.length; i++) {
List<String> iuser = userIPs[i];
System.out.println(i + " partition");
System.out.println(iuser.toString());
}
}