Верните RDD, созданный путем объединения всех элементов в каждом разделе в список.

rdd = sc.parallelize([1, 2, 3, 4], 2)
sorted(rdd.glom().collect())
# [[1, 2], [3, 4]]
Ethercourt.ml