tongchenkeji 发表于:2022-12-20 11:16:030次点击 已关注取消关注 关注 私信 MaxCompute如何进行计算成本优化[阿里云MaxCompute] 暂停朗读为您朗读 MaxCompute如何进行计算成本优化 「点点赞赏,手留余香」 赞赏 还没有人赞赏,快来当第一个赞赏的人吧! 海报 MaxCompute# MaxCompute2748# 云原生大数据计算服务 MaxCompute3255# 分布式计算2827
阿里云服务支持AM 2023-11-27 18:18:34 1 MaxCompute常见的扫描数据剪裁方式分为分区剪裁与列剪裁,使用分区剪裁与列剪裁会减少计费,谓词下推不会减少计费。计算成本优化,详情请参考计算成本优化
离原AM 2023-11-27 18:18:34 2 首先是看dag图中目前的mapreduce任务,最明显的增量数据的分区表的全表扫描提前进行查询,再进行关联,可以减少join耗时;然后是大小表的关联,位置调整尝试优化;对于耗时长的任务在不影响业务的情况下将取数逻辑上移。
MaxCompute常见的扫描数据剪裁方式分为分区剪裁与列剪裁,使用分区剪裁与列剪裁会减少计费,谓词下推不会减少计费。计算成本优化,详情请参考计算成本优化
首先是看dag图中目前的mapreduce任务,最明显的增量数据的分区表的全表扫描提前进行查询,再进行关联,可以减少join耗时;然后是大小表的关联,位置调整尝试优化;对于耗时长的任务在不影响业务的情况下将取数逻辑上移。