tongchenkeji 发表于:2023-3-8 23:07:090次点击 已关注取消关注 关注 私信 现在9000多个文件,我现在将小文件即时合并ALTER TABLE <table_name> [pa[阿里云云原生数据仓库] 暂停朗读为您朗读 现在9000多个文件,我现在将小文件即时合并ALTER TABLE [partition ()] MERGE SMALLFILES;减少文件个数和提高存储效率,合并后物理上使用没啥区别吧,我这边全表扫描也能提高效率吧? 「点点赞赏,手留余香」 赞赏 还没有人赞赏,快来当第一个赞赏的人吧! 海报 云原生数据仓库AnalyticDB# 云原生大数据计算服务 MaxCompute3255# 存储536 =====这是一个广告位,招租中,联系qq 78315851==== 云原生数据仓库AnalyticDB 帮忙看下这个是什么MaxCompute问题?[阿里云云原生数据仓库] 2023-3-8 23:04:55 印刷文字识别 你好,麻烦看下增值税发票识别接口报错呢?[阿里云OCR] 2023-3-8 23:55:32 1 条回复 A 作者 M 管理员 凌云CloudAM 2023-11-27 22:41:23 1 合并后,表在物理存储上并没有太大的区别,但是合并后的文件会更大,因此全表扫描的效率可能会有所提高,因为需要扫描的文件个数变少了。但是需要注意的是,全表扫描的效率还受到其他因素的影响,比如表的大小、存储格式、存储引擎等等。因此,无法保证全表扫描一定会有显著的性能提升,具体情况需要根据实际情况进行评估和测试。 xin在这AM 2023-11-27 22:41:23 2 小文件合并一下,对SQL效率有效果,此回答整理自钉群“MaxCompute开发者社区1群” 发起 反馈 搜索 评论 Top
凌云CloudAM 2023-11-27 22:41:23 1 合并后,表在物理存储上并没有太大的区别,但是合并后的文件会更大,因此全表扫描的效率可能会有所提高,因为需要扫描的文件个数变少了。但是需要注意的是,全表扫描的效率还受到其他因素的影响,比如表的大小、存储格式、存储引擎等等。因此,无法保证全表扫描一定会有显著的性能提升,具体情况需要根据实际情况进行评估和测试。
合并后,表在物理存储上并没有太大的区别,但是合并后的文件会更大,因此全表扫描的效率可能会有所提高,因为需要扫描的文件个数变少了。但是需要注意的是,全表扫描的效率还受到其他因素的影响,比如表的大小、存储格式、存储引擎等等。因此,无法保证全表扫描一定会有显著的性能提升,具体情况需要根据实际情况进行评估和测试。
小文件合并一下,对SQL效率有效果,此回答整理自钉群“MaxCompute开发者社区1群”