tongchenkeji 发表于:2023-4-18 15:32:240次点击 已关注取消关注 关注 私信 机器学习中读oss数据,是读文件,还是只是输出oss的文件路径?[阿里云机器学习PAI] 暂停朗读为您朗读 机器学习中读oss数据,是读文件,还是只是输出oss的文件路径?我试了一下,它的输出只是文件路径而已,没有输出文件的内容 「点点赞赏,手留余香」 赞赏 还没有人赞赏,快来当第一个赞赏的人吧! 海报 机器学习PAI# 对象存储1210# 机器学习深度学习1219
六月的雨在钉钉AM 2023-11-28 2:53:17 1 机器学习读取OSS数据是根据提供的OSS文件路径读取文件内容数据,读取或者写入数据到OSS,指的就是读取指定文件路径下的文件本身的数据内容哈。
微笑向日葵AM 2023-11-28 2:53:17 2 是的,这个需要搭配其他组件使用,运行的oss这个节点会把路径传给下游组件,下游组件根据路径读取数据,此回答整理自钉群“机器学习PAI交流群(答疑@值班)”
LittlePenguinAM 2023-11-28 2:53:17 3 在机器学习中,通常需要读取OSS中的数据进行训练和预测。一般来说,读取OSS中的数据需要先获取文件路径,然后再进行读取。因为OSS是一种对象存储服务,不同于传统的文件系统,它把数据以对象的形式存储,每一个对象都有一个唯一的Object Key,类似于文件路径。所以在读取OSS数据时,需要先根据Object Key获取文件路径,然后再进行读取操作。通常,数据量较大的情况下,我们会使用分布式的方式读取数据,以提高读取效率。
机器学习读取OSS数据是根据提供的OSS文件路径读取文件内容数据,读取或者写入数据到OSS,指的就是读取指定文件路径下的文件本身的数据内容哈。
是的,这个需要搭配其他组件使用,运行的oss这个节点会把路径传给下游组件,下游组件根据路径读取数据,此回答整理自钉群“机器学习PAI交流群(答疑@值班)”
在机器学习中,通常需要读取OSS中的数据进行训练和预测。一般来说,读取OSS中的数据需要先获取文件路径,然后再进行读取。因为OSS是一种对象存储服务,不同于传统的文件系统,它把数据以对象的形式存储,每一个对象都有一个唯一的Object Key,类似于文件路径。所以在读取OSS数据时,需要先根据Object Key获取文件路径,然后再进行读取操作。通常,数据量较大的情况下,我们会使用分布式的方式读取数据,以提高读取效率。