Flink基础系列6-flink run参数
执行 flink run 后参数:
参数说明
Action "run" compiles and runs a program.
Syntax: run [OPTIONS] <jar-file> <arguments>"run" action options:-c,--class <classname> Class with the program entrypoint ("main" method or"getPlan()" method. Onlyneeded if the JAR file doesnot specify the class in itsmanifest.-C,--classpath <url> Adds a URL to each user codeclassloader on all nodes inthe cluster. The paths mustspecify a protocol (e.g.file://) and be accessibleon all nodes (e.g. by meansof a NFS share). You can usethis option multiple timesfor specifying more than oneURL. The protocol must besupported by the {@linkjava.net.URLClassLoader}.-d,--detached If present, runs the job indetached mode-m,--jobmanager <host:port> Address of the JobManager(master) to which toconnect. Use this flag toconnect to a differentJobManager than the onespecified in theconfiguration.-p,--parallelism <parallelism> The parallelism with whichto run the program. Optionalflag to override the defaultvalue specified in theconfiguration.-q,--sysoutLogging If present, suppress loggingoutput to standard out.-s,--fromSavepoint <savepointPath> Path to a savepoint to resetthe job back to (for examplefile:///flink/savepoint-1537).-z,--zookeeperNamespace <zookeeperNamespace> Namespace to create theZookeeper sub-paths for highavailability mode
Options for yarn-cluster mode:-yD <arg> Dynamic properties-yd,--yarndetached Start detached-yid,--yarnapplicationId <arg> Attach to running YARN session-yj,--yarnjar <arg> Path to Flink jar file-yjm,--yarnjobManagerMemory <arg> Memory for JobManager Container [inMB]-yn,--yarncontainer <arg> Number of YARN container to allocate(=Number of Task Managers)-ynm,--yarnname <arg> Set a custom name for the applicationon YARN-yq,--yarnquery Display available YARN resources(memory, cores)-yqu,--yarnqueue <arg> Specify YARN queue.-ys,--yarnslots <arg> Number of slots per TaskManager-yst,--yarnstreaming Start Flink in streaming mode-yt,--yarnship <arg> Ship files in the specified directory(t for transfer)-ytm,--yarntaskManagerMemory <arg> Memory per TaskManager Container [inMB]-yz,--yarnzookeeperNamespace <arg> Namespace to create the Zookeepersub-paths for high availability mode-n 10 一共启动10个TaskManager节点-jm 1024 JobManager的内存大小为1024M-tm 2048 TaskManager的内存大小为2048M
-d 使用detached模式进行部署(部署完成后本地命令行可以退出)
-qu default 部署到YARN的default队列中
参考:
- https://blog.csdn.net/jerome520zl/article/details/103637811
Flink基础系列6-flink run参数相关推荐
- Flink基础系列8-Flink on yarn运行wordcount程序
文章目录 环境介绍 一.Maven配置 二.Java代码编写 三.Maven打包并上传 四.运行jar文件 五.运行其它的class文件 参考 环境介绍 测试服务器CDH 6.3.1版本安装Flink ...
- Flink基础系列7-通过Web UI执行jar文件
文章目录 环境准备 一.准备代码 1.1 maven准备 1.2 Java代码准备 二.打包 三.通过Web UI执行jar文件 3.1 上传文件 环境准备 本地Windows环境已安装Flink 1 ...
- Flink基础系列20-数据重分区操作
文章目录 一.数据重分区 参考: 一.数据重分区 重分区操作,在DataStream类中可以看到很多Partitioner字眼的类. 其中partitionCustom(-)方法用于自定义重分区. 测 ...
- Flink基础系列17-Tranform之多流转换算子
文章目录 一.多流转换算子概述 1.1 Split和Select 1.2 Connect和CoMap 1.3 Union 二.代码实现 参考: 一.多流转换算子概述 多流转换算子一般包括: Split ...
- 【Flink实战系列】Flink 1.11.1 on yarn 集群搭建教程
前面一篇博客中已经搭建了flink Standalone的集群,需要的可以进去看一下,今天主要来说一下flink on yarn 集群的搭建以及怎么提交任务,之前搭建Flink on yarn的时候用 ...
- 【Flink实战系列】Flink 提交任务遇到 Server Response Internal server error 怎么排查
很多同学在提交 Flink 任务的时候遇到下面这种报错不知道怎么排查.完全处于懵逼状态,竟一直盯着这个报错看. 记得一定要去 JM 的 logs 里面看详细的报错信息,只看这个 Internal se ...
- 【Flink实战系列】Flink 本地 Web UI 的配置及使用
当你在本地开发调试 Flink 任务的时候,如果没有搭建集群环境,但是又想要查看 Flink 的 Web UI 该怎么办呢? 其实 Flink 是提供有在本地查看 Flink UI 功能的. 添加依赖 ...
- 【Flink实战系列】Flink SQL 之 Session Window 的用法
Flink SQL 之 Session Window 的用法 Session Windows 会话窗口分配器按活动的会话对元素进行分组.与翻滚窗口和滑动窗口相比,会话窗口没有重叠,也没有固定的开始和结 ...
- 【Flink 实战系列】Flink SQL 使用 filesystem connector 同步 Kafka 数据到 HDFS(parquet 格式 + snappy 压缩)
Flink SQL 同步 Kafka 数据到 HDFS(parquet + snappy) 在上一篇文章中,我们用 datastream API 实现了从 Kafka 读取数据写到 HDFS 并且用 ...
最新文章
- upgrade lnmpa php.sh,LNMP 状态管理命令说明及Nginx、MySQL/MariaDB、PHP升级教程
- java小知识_java小知识点简单回顾
- css京东购物车静态页面实现
- P2286 [HNOI2004]宠物收养场
- 仿淘宝网站的TabPage导航效果
- iFit—Smart Cardio Equipment 简介与下载
- Android自定义View【实战教程】6⃣️---深入理解 Android 中的 Matrix
- 采样次数不同平均值不一样_认知的不同,才有不一样的人生
- vscode代码运行时间工具_今天,VS Code 五岁了。
- 高等数学,线性代数 课后题解答
- 一步步教你破解WIFI无线WEP网络密钥
- win8网速怎么测试软件,Win10怎么测试网速 Win10在线测试网速方法
- 通俗易懂的LDA模型
- 逆向笔记2--常用的调试软件及插件
- 中国药科大学校长来茂德:我眼中“医疗+AI”的机会与挑战
- c语言 交互式电子白板案例,交互式电子白板教学案例——电子白板让修改习作不再难...
- 文字转语音软件哪个好?快把这些软件收好
- OO系统分析员之路--用例分析系列(2)--用例的类型与粒度
- 嵌入式 Linux 编程
- 网中人《shell十三问》简体版整理
热门文章
- PG数据库同步数据到ES数据库
- uni-app 微信公众号H5开发 里面的video 组件点击全屏后不会自动横屏播放 2
- python处理excel系列一之根据文件名从一文件夹批量复制文件到新文件夹并进行处理
- libevent实现TCP服务器通信
- 王晓东算法设计与分析c语言,Algorithm 计算机算法设计与分析(王晓东版)课程设计经典例子 - 下载 - 搜珍网...
- android js接口调用方法,详解Android JS相互调用
- 检测到磁盘可能为uefi引导_==多磁盘UEFI无法引导引导盘缺失解决方案==
- 非常火的朋友圈微信小游戏
- android记事本介绍,安卓记事本:行客记事AndroidV1.9使用评测
- CxImage透明图片合成和文字叠加