开发者社区> 问答> 正文

Spark中RDD的属性是什么?

Spark中RDD的属性是什么?

展开
收起
芯在这 2021-12-05 20:06:54 316 0
1 条回答
写回答
取消 提交回答
  • 一组分片(Partition):数据集的最基本组成单位 一个计算每个分片的函数:对于给定的数据集,需要做哪些计算 依赖(Dependencies):RDD的依赖关系,描述了RDD之间的lineage preferredLocations(可选):对于data partition的位置偏好 partitioner(可选):对于计算出来的数据结果如何分发

    2021-12-05 22:22:38
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
Hybrid Cloud and Apache Spark 立即下载
Scalable Deep Learning on Spark 立即下载
Comparison of Spark SQL with Hive 立即下载