AWS Machine Learning Blog· Kanwaljit Khurmi·· 2 小时前精选AI 评分58
AWS 为 SageMaker AI 训练与处理作业推出 SOCI 索引镜像
Announcing SOCI-indexed images for faster SageMaker AI jobs
AI 导读
AWS 宣布 SageMaker AI 训练和处理作业支持 Seekable OCI(SOCI)索引,容器镜像改为懒加载,只拉取启动所需文件、其余在后台流式传输。
推荐理由
原文给出多尺寸镜像的下载耗时对比和首个 epoch 的额外开销,可据此判断懒加载是否适合自家训练任务。
来源:AWS Machine Learning Blog · aws.amazon.com