提交flink任务一直刷这个信息是什么情况?-[阿里云_云淘科技]

提交flink任务一直刷这个信息是什么情况?提交flink任务一直刷这个信息是什么情况?-[阿里云_云淘科技]
资源是充足的

以下为热心网友提供的参考意见

根据你提供的日志,看起来你的 Flink 作业在部署时超出了60秒的限制。这可能意味着资源不足或者网络问题导致了延迟。

要解决这个问题,请尝试以下步骤:

  1. 检查集群状态:确保 YARN 集群有足够的可用节点和内存来运行你的 Flink 作业。
  2. 调整 YARN 的配置参数:你可以通过调整 yarn.nodemanager.vmem-check-enabled 和 yarn.scheduler.capacity.root.QueueA.acls 这两个属性值来优化资源配置(具体数值需要参考实际环境):
    • yarn.nodemanager.vmem-check-enabled 设置为 false 可以避免检查容器剩余内存是否大于最小阈值,从而减少启动时间;
  3. 确保网络畅通无阻:如果网络连接不稳定或速度慢,则可能导致部署过程中的延迟。可以考虑使用更稳定的网络服务提供商、增加带宽等方法改善网络状况。
  4. 使用高级调度器:如果你正在使用的默认调度器无法满足需求,可以尝试更换其他调度器如 Mesos 或 Kubernetes 来提高性能并降低延迟。
  5. 减小作业规模:如果以上措施都无法解决问题,那么可能是由于作业本身过于庞大而引起的。在这种情况下,可以通过拆分大作业成多个较小的任务,并分别执行它们来缓解问题。

以下为热心网友提供的参考意见

集群部署有问题 ,此回答整理自钉群“【③群】Apache Flink China社区”

本文来自投稿,不代表新手站长_郑州云淘科技有限公司立场,如若转载,请注明出处:https://www.cnzhanzhang.com/22107.html

(0)
匿名
上一篇 2024年1月9日 下午12:26
下一篇 2024年1月9日 下午12:29

相关推荐

新手站长从“心”出发,感谢16年您始终不离不弃。