请问试用大数据计算MaxCompute500CU,这该怎么评估?-[阿里云_云淘科技]

请问试用大数据计算MaxCompute500CU,pai使用线性回归训练maxcompute里500w的数据,显示资源不够,重试好几次都是这样。我也不知道会使用大概多少资源,开个50cu的包月的是不是大材小用了,这该怎么评估?

以下为热心网友提供的参考意见

MaxCompute的500cu*h抵扣包是抵扣按量计费部分,资源不应该有限制。 ,此回答整理自钉群“MaxCompute开发者社区2群”

以下为热心网友提供的参考意见

MaxCompute的资源包括存储资源和计算资源(CU),这两种资源都对您的作业运行至关重要。在您的情况下,如果500CU的包月套餐无法满足线性回归训练的需求,可能的原因是您的任务需要处理的数据量过大或者模型复杂度较高,消耗了较多的计算资源。

在进行MaxCompute资源规划时,需要考虑以下几个因素:首先,数据存储资源需要足够大,不仅要能够存储当前的所有存量库表数据,也要能够存储未来一段时间的增量数据;其次,计算资源要充足但不能浪费,应能满足所有数据计算任务并尽可能减少资源浪费情况;此外,对于被处理的数据量巨大、耗费计算资源较多的大型任务,可能会出现quota group资源组耗尽的情况,造成其他任务无法获取到计算资源而阻塞,因此需要合理规划以避免这种情况的发生;最后,不同优先级的计算任务应尽量互不干扰,优先保证高优先级的任务获取到足够的计算资源。

本文来自投稿,不代表新手站长_郑州云淘科技有限公司立场,如若转载,请注明出处:https://www.cnzhanzhang.com/18871.html

(0)
匿名
上一篇 2023年12月24日 下午2:15
下一篇 2023年12月24日

相关推荐

新手站长从“心”出发,感谢16年您始终不离不弃。