使用深度学习算法处理数据时,数据先存储到OSS的bucket中。首先要创建OSS Bucket,由于深度学习的GPU集群在华东2,建议您创建OSS Bucket时选择华东2地区。这样在数据传输时就可以使用阿里云经典网络,算法运行时不需要收取流量费用。Bucket创建好之后,可以在OSS管理控制台创建文件夹、组织数据目录、上传数据。
OSS支持多种方式上传数据,API或SDK请参见 https://help.aliyun.com/document_detail/31848.html?spm=5176.doc31848.6.580.a6es2a 。
OSS提供了大量工具来帮助用户更加高效地使用OSS,工具列表请参见 https://help.aliyun.com/document_detail/44075.html?spm=5176.doc32184.6.1012.XlMMUx 。
建议您使用 ossutil 或 osscmd命令行工具,通过命令的方式来上传下载文件,同时支持断点续传。
注意:在使用工具时需要配置 AccessID 和 AccessKey,请登录阿里云管理控制台,并在 Access Key 管理界面创建或查看。
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。