提交flink任务一直刷这个信息是什么情况?
资源是充足的
以下为热心网友提供的参考意见
根据你提供的日志,看起来你的 Flink 作业在部署时超出了60秒的限制。这可能意味着资源不足或者网络问题导致了延迟。
要解决这个问题,请尝试以下步骤:
- 检查集群状态:确保 YARN 集群有足够的可用节点和内存来运行你的 Flink 作业。
- 调整 YARN 的配置参数:你可以通过调整 yarn.nodemanager.vmem-check-enabled 和 yarn.scheduler.capacity.root.QueueA.acls 这两个属性值来优化资源配置(具体数值需要参考实际环境):
yarn.nodemanager.vmem-check-enabled
设置为 false 可以避免检查容器剩余内存是否大于最小阈值,从而减少启动时间;
- 确保网络畅通无阻:如果网络连接不稳定或速度慢,则可能导致部署过程中的延迟。可以考虑使用更稳定的网络服务提供商、增加带宽等方法改善网络状况。
- 使用高级调度器:如果你正在使用的默认调度器无法满足需求,可以尝试更换其他调度器如 Mesos 或 Kubernetes 来提高性能并降低延迟。
- 减小作业规模:如果以上措施都无法解决问题,那么可能是由于作业本身过于庞大而引起的。在这种情况下,可以通过拆分大作业成多个较小的任务,并分别执行它们来缓解问题。
以下为热心网友提供的参考意见
集群部署有问题 ,此回答整理自钉群“【③群】Apache Flink China社区”
本文来自投稿,不代表新手站长_郑州云淘科技有限公司立场,如若转载,请注明出处:https://www.cnzhanzhang.com/22107.html