flink on yarn的应用模式,我提交一个程序最少都要占用4G内存吗?-[阿里云_云淘科技]

flink on yarn的应用模式,我提交一个程序最少都要占用4G内存吗?task manager占至少2G,job manager占2G。

以下为热心网友提供的参考意见

Flink on YARN的应用模式中,每个TaskManager的内存是由参数taskmanager.memory.process.size配置的。默认情况下,该参数的值是1GB。因此,如果你提交一个程序时没有显式地指定该参数的值,那么TaskManager将使用默认值1GB来启动。

但是,需要注意的是,TaskManager在运行过程中可能会动态调整其内存使用量。例如,当TaskManager需要缓存大量的数据时,它可能会尝试增加其内存使用量。此外,如果TaskManager同时运行多个任务,则每个任务都需要一定的内存空间。因此,在实际使用中,TaskManager的内存使用量可能会超过1GB。

总之,如果你提交一个程序时没有显式地指定TaskManager的内存大小,那么它将使用默认值1GB来启动。但是,由于各种原因,TaskManager的实际内存使用量可能会超过这个值。

本文来自投稿,不代表新手站长_郑州云淘科技有限公司立场,如若转载,请注明出处:https://www.cnzhanzhang.com/11487.html

(0)
匿名
上一篇 2023年12月18日
下一篇 2023年12月18日

相关推荐

新手站长从“心”出发,感谢16年您始终不离不弃。