AI 助理
备案控制台
开发者社区 问答 正文

partition分区默认的partitioner分区是什么？

partition分区默认的partitioner分区是什么？

展开
收起
游客szyg5ww7yqnwy 2021-12-07 16:13:08 342 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

1 条回答
写回答
取消 提交回答
  • 游客pbkxnb6wuf5d4

    依据以下代码： public class HashPaartitioner<K,V> extends Partitioner<K,V>

    {public int getPartition(K,key,V value,int numReduceTasks)

    {return (key.hashCode() & Integer.MA_VALUE) %numReduceTasks；

    }

    }

    可得知：默认分区是根据key的hashCode对reduceTasks个数取模得到的。用户没法控制哪个key存储到哪个分区。

    2021-12-07 16:22:57
    赞同 展开评论
问答地址：
开发者社区 > 云计算 > 问答
相关问答
什么是范围分区（Range Partition）？
560
1
0
Partition（分区）的是什么？
593
1
0
spark中HashPartitioner如何分区？
345
1
0
partition分区自定义partitioner步骤是什么？
490
1
0
spark如何分区？
349
1
0
spark中RangePartitioner如何分区？
356
1
0
在partition分区的时候为什么默认分区规则无法实现？
437
1
0
Spark怎么自定义partitioner分区器？
374
1
0
spark中CustomPartitioner如何分区？
305
1
0
RangePartitioner分区的原理是什么？
427
1
0