hb在读取配置parquet格式的时 候，如果没有对应的字段，可以赋默认值吗？类似于tf.io.FixedLenFeature的默认值参数那样
hb在读取配置parquet格式的时候，如果没有对应的字段，可以赋默认值吗？[阿里云机器学习PAI]
「点点赞赏，手留余香」
还没有人赞赏，快来当第一个赞赏的人吧！
=====这是一个广告位，招租中，联系qq 78315851====
同尘云，您身边的云智能顾问
hb在读取配置parquet格式的时 候，如果没有对应的字段，可以赋默认值吗？类似于tf.io.FixedLenFeature的默认值参数那样
你是说在 parquet dataset 里如果字段不存在就返回一个常量吗？这种情况是否可以用 dataset map 或者 flat_map 来实现？这样感觉比parquet dataset 更清晰一些。此回答整理自钉群“【外】HybridBackend 开源社区”
这个优化的配置参数为spark.sql.hive.convertMetastoreParquet,默认值为开启。