tongchenkeji 发表于:2023-8-13 17:40:000次点击 已关注取消关注 关注 私信 大数据计算MaxCompute tasks_history为什么查10天的数据,要11多G?[阿里云MaxCompute] 暂停朗读为您朗读 大数据计算MaxCompute tasks_history为什么查10天的数据,要11多G? 「点点赞赏,手留余香」 赞赏 还没有人赞赏,快来当第一个赞赏的人吧! 海报 MaxCompute# MaxCompute2748# 云原生大数据计算服务 MaxCompute3255# 分布式计算2827# 大数据1264
算精通AM 2023-11-27 18:04:04 1 MaxCompute 的 tasks_history 表是用于存储任务执行历史信息的系统表。这个表包含了任务执行的详细记录,包括任务的运行状态、运行时间、资源消耗等信息。根据您提供的情况,查询 10 天的数据占用了 11 多GB 的存储空间,可能有以下原因: 数据量大:如果您的 MaxCompute 账号下执行了大量的任务,那么 tasks_history 表中可能积累了大量的历史记录。查询 10 天的数据可能包含了大量的任务执行信息,因此占用的存储空间较大。 任务数量和频率:如果您的 MaxCompute 账号下执行了大量的任务,并且任务的执行频率较高,那么 tasks_history 表中会记录更多的任务执行信息,从而占用更多的存储空间。 任务日志和输出数据:tasks_history 表中的任务执行信息可能包含任务日志和输出数据的引用。如果任务产生了大量的日志和输出数据,这些引用可能会占用较大的存储空间。
ÐAM 2023-11-27 18:04:04 2 tasks_history保存了14天内的作业数据。 数据量还是比较大的。尽量查询时不要全表扫描 分字段和分区查询-此回答整理自钉群“MaxCompute开发者社区1群”
MaxCompute 的 tasks_history 表是用于存储任务执行历史信息的系统表。这个表包含了任务执行的详细记录,包括任务的运行状态、运行时间、资源消耗等信息。根据您提供的情况,查询 10 天的数据占用了 11 多GB 的存储空间,可能有以下原因:
数据量大:如果您的 MaxCompute 账号下执行了大量的任务,那么 tasks_history 表中可能积累了大量的历史记录。查询 10 天的数据可能包含了大量的任务执行信息,因此占用的存储空间较大。
任务数量和频率:如果您的 MaxCompute 账号下执行了大量的任务,并且任务的执行频率较高,那么 tasks_history 表中会记录更多的任务执行信息,从而占用更多的存储空间。
任务日志和输出数据:tasks_history 表中的任务执行信息可能包含任务日志和输出数据的引用。如果任务产生了大量的日志和输出数据,这些引用可能会占用较大的存储空间。
tasks_history保存了14天内的作业数据。 数据量还是比较大的。尽量查询时不要全表扫描 分字段和分区查询-此回答整理自钉群“MaxCompute开发者社区1群”