Flink环境搭建前面已经讲过,可回顾Flink环境搭建,令人惊愕的HA 环境搭建。
Flink 的命令行参数很多,输入 flink - h 能看到完整的说明:
flink-1.7.2 bin/flink -h
如果想看某一个命令的参数,比如 Run 命令,输入:
flink-1.7.2 bin/flink run -h
在bin目录下执行./start-cluster.sh
访问http://192.168.244.129:8081/
1)运行示例程序,不传参数
./flink run ../examples/streaming/WordCount.jar
2)运行示例程序, 带输出文件参数:
./flink run ../examples/streaming/WordCount.jar --output file:///home/flink/flink_out_result.txt
查看输出结果
3)行示例程序,带输入和输出文件参数:
./flink run ../examples/streaming/WordCount.jar --input file:///home/flink/flink/flink_word.txt --output file:///home/flink/flink_out_result.txt
查看输出结果
4)运行示例程序,带输入和输出文件参数,并设置2个并发度:
./flink run -p 2 ../examples/streaming/WordCount.jar --input file:///home/flink/flink/flink_word.txt --output file:///home/flink/flink_out_result.txt
查看输出结果和上面一样,注意并行度和cpu核数要对应。
5)运行示例程序,指定程序入口类(Main方法所在类):
./flink run -c org.apache.flink.streaming.examples.wordcount ../examples/streaming/WordCount.jar --input file:///home/flink/flink/flink_word.txt --output file:///home/flink/flink_out_result.txt
6)运行示例程序
-d 以独立(detached)模式运行示例程序 run -d
-m 在指定JobManager上运行示例程序 run -m Host:6123
二、调度查看命令
1)列出已经调度的和正在运行的Job(包含Job ID信息)
./flink list
2) 列出已经调度的Job(包含Job ID信息)
./flink list -s
3) 列出正在运行的Job(包含Job ID信息)
./flink list -r
4) 列出在Flink YARN中运行Job
./flink list -m yarn-cluster -yid <yarnApplicationID> -r
5) 取消一个Job
./flink cancel <jobID>
6) 取消一个带有保存点(savepoint)的Job
./flink cancel -s [targetDirectory] <jobID>
7) 停止一个Job(只适用于流计算Job)
./flink stop <jobID>
三、保存点
1)触发保存点:
./flink savepoint <jobID> [savepointDirectory]
返回创建的保存点的路径。你需要此路径来还原和处理保存点。
触发保存点时,可以选择是否指定savepointDirectory。如果在此处未指定,则需要为Flink安装配置默认的保存点目录(请参阅保存点)。
2)根据保存点取消Job
你可以自动触发保存点并取消一个Job:
./flink cancel -s [savepointDirectory] <jobID>
如果没有指定保存点目录,则需要为Flink安装配置默认的保存点目录(请参阅保存点)。如果保存点触发成功,该作业将被取消
3)恢复保存点
./flink run -s <savepointPath> ...
这个run命令提交Job时带有一个保存点标记,这使得程序可以从保存点中恢复状态。保存点路径是通过保存点触发命令得到的。
默认情况下,我们尝试将所有保存点状态与正在提交的作业相匹配。如果要允许跳过那些无法使用它恢复新作业的保存点状态 ,则可以设置allowNonRestoredState标志。如果当保存点触发时,从你程序中删除了作为程序一部分的operator,但是仍然要使用保存点,则需要允许这一点
./bin/flink run -s <savepointPath> -n ...
如果你的程序删除了作为保存点一部分的operator,这时会非常有用 。
2.4 销毁保存点
./bin/flink savepoint -d <savepointPath>
销毁一个保存点同样需要一个路径。这个保存点路径是通过保存点触发命令得到的。
在bin目录下执行./stop-cluster.sh
如果觉得文章能帮到您,欢迎关注微信公众号:“蓝天Java大数据” ,共同进步!