göster bölümleri RDD

Question

pyspark RDD belgeleri

http://spark.apache.org/docs/1.2.1/api/python/pyspark.html#pyspark.RDD

bir RDD için bölüm bilgilerini görüntülemek için herhangi bir yöntem (ler) göstermez.

ek bir adım ör .:

myrdd.mapPartitions(lambda x: iter[1]).sum() 

yukarıda yaptığı işlerde çalıştırmadan bu bilgileri almak için herhangi bir yolu var mı .. ama ekstra çaba gibi görünüyor.

Answer 1

ben kaçırdım: çok basit: alışık değil

rdd.getNumPartitions() 

java-imsi artık) FooMethod (olsun;