开发者社区> 问答> 正文

RDD提供的存储级别是什么?

RDD提供的存储级别是什么?

展开
收起
芯在这 2021-12-07 15:15:35 626 0
1 条回答
写回答
取消 提交回答
  • RDD根据useDisk、useMemory、deserialized、replication四个参数的组合提供了11种存储级别:

    val NONE = new StorageLevel(false, false, false)

    val DISK_ONLY = new StorageLevel(true, false, false)

    val DISK_ONLY_2 = new StorageLevel(true, false, false, 2)

    val MEMORY_ONLY = new StorageLevel(false, true, true)

    val MEMORY_ONLY_2 = new StorageLevel(false, true, true, 2)

    val MEMORY_ONLY_SER = new StorageLevel(false, true, false)

    val MEMORY_ONLY_SER_2 = new StorageLevel(false, true, false, 2)

    val MEMORY_AND_DISK = new StorageLevel(true, true, true)

    val MEMORY_AND_DISK_2 = new StorageLevel(true, true, true, 2)

    val MEMORY_AND_DISK_SER = new StorageLevel(true, true, false)

    val MEMORY_AND_DISK_SER_2 = new StorageLevel(true, true, false, 2)

    2021-12-07 15:15:51
    赞同 展开评论 打赏
问答分类:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
HBase2.0重新定义小对象实时存取 立即下载
Apache Flink 流式应用中状态的数据结构定义升级 立即下载
实战-如何基于HBase构建图片视频数据的统一存储检索方案 立即下载