问题1:MaxCompute的dataworks里information_schema.tasks_history表input_bytes和任务运行日志里面的input io bytes是什么关系,是一个概念吗?按道理应该是差不多的,但是对比差好几倍。 问题2:我是所有阶段的加起来和Schema.tasks_history的做对比,差好几倍。
针对问题1的回答:这里的I/O Bytes 数据是在MaxCompute内执行每个阶段的数据输入size,比如你这个M1的input。 Information Schema.tasks_history里面的input_bytes是整个SQL的数据输入量。这两个内容肯定是有差距的。针对问题2的回答:那可能是在具体执行过程中,MaxCompute底层作业存储数据量下推的优化。所以logview里面看到的会比较少。此回答整理自钉群“MaxCompute开发者社区2群”
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。