Flink设置并行度的方式和执行级别
短信预约 信息系统项目管理师 报名、考试、查分时间动态提醒
-
代码中设置
setParallelism()
-
全局设置:
env.setParallelism(3);
-
算子设置(部分设置):
sum(1).setParallelism(3)
-
-
客户端CLI设置:
./bin/flink run -p 3
-
修改配置文件设置
/conf/flink-conf.yaml的parallelism.defaul数值
-
-
全局设置:
env.setMaxParallelism(n)
-
算子设置(部分设置):
sum(1).setMaxParallelism(n)
默认的最大并行度是近似于operatorParallelism + (operatorParallelism / 2),下限是127,上线是32768.
执行顺序级别:算子>全局env>CLI>配置文件 。
.setParallelism()的并行度需要小于.setMaxParallelism()的最大并行度。
免责声明:
① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。
② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341