AdpativeschedulerisnotrecognizingbyFlink1.14.0
创始人
2024-07-28 19:00:26
0

在Flink 1.14.0中,Adaptive Scheduler默认被禁用了。如果你想使用它,需要手动开启。

在flink-conf.yaml文件中添加以下配置:

# 启用JobGraph优化
optimizer.job-graph-reshuffle.enabled: true

# 启用Adaptive Scheduler
scheduler: adaptive

# 启用动态分配资源
slot.request.timeout: 600s
slot.idle.timeout: 5min
resourcemanager.slot.request.timeout: 300s
resourcemanager.heartbeat.interval: 1000ms

完成之后,重新启动Flink集群,并确保在提交任务时使用正确的配置,如下所示:

./bin/flink run -Dscheduler=adaptive -Doptimizer.job-graph-reshuffle.enabled=true -Dslot.request.timeout=600000 -Dslot.idle.timeout=300000 -Dresourcemanager.slot.request.timeout=300000 -Dresourcemanager.heartbeat.interval=1000 ...

这样就可以在Flink 1.14.0中使用Adaptive Scheduler了。

相关内容

热门资讯

Android Recycle... 要在Android RecyclerView中实现滑动卡片效果,可以按照以下步骤进行操作:首先,在项...
安装apache-beam==... 出现此错误可能是因为用户的Python版本太低,而apache-beam==2.34.0需要更高的P...
Android - 无法确定任... 这个错误通常发生在Android项目中,表示编译Debug版本的Java代码时出现了依赖关系问题。下...
Android - NDK 预... 在Android NDK的构建过程中,LOCAL_SRC_FILES只能包含一个项目。如果需要在ND...
Akka生成Actor问题 在Akka框架中,可以使用ActorSystem对象生成Actor。但是,当我们在Actor类中尝试...
Agora-RTC-React... 出现这个错误原因是因为在 React 组件中使用,import AgoraRTC from “ago...
Alertmanager在pr... 首先,在Prometheus配置文件中,确保Alertmanager URL已正确配置。例如:ale...
Aksnginxdomainb... 在AKS集群中,可以使用Nginx代理服务器实现根据域名进行路由。以下是具体步骤:部署Nginx i...
AddSingleton在.N... 在C#中创建Singleton对象通常是通过私有构造函数和静态属性来实现,例如:public cla...
Alertmanager中的基... Alertmanager中可以使用repeat_interval选项指定在一个告警重复发送前必须等待...