当前位置: 首页 > article >正文

Flink历史服务器-History Server

在以session模式提交作业后,我们可以在session集群里查看作业的详细信息,但是假如session集群重启后,则不能再查看到之前作业的信息;或者以yarn application或per-job或k8s application模式提交,都存在一个问题,就是在作业完成后(即Flink集群关闭),无法查看作业信息,为了解决这个问题Flink提供了History Server服务。

Flink有一个历史服务器history server,在相应的Flink集群关闭后,可以使用它来查询已完成任务的统计信息。另外它也对外提供了一些REST API出来供HTTP请求查询。

1. 启动History Server

History Server 允许查询由JobManager归档的已完成作业的状态和统计信息。已完成的作业由JobManager来归档,并上传到指定的文件系统的相应路径下,可以是本地文件系统、HDFS、S3等。History Server 可以周期扫描该路径将归档的Flink作业信息恢复出来,从而可以查看相应Flink作业日志情况。

在配置好HistoryServer和JobManager之后,就可以通过相应的启动脚本来启动和停止History Server了。默认端口号为8082。访问地址:http://hostn


http://www.kler.cn/a/421089.html

相关文章:

  • MATLAB提供的窗函数
  • WPF+LibVLC开发播放器-LibVLC播放控制
  • 微分方程的叠加定理
  • mx linux 在konsole终端中无法输入中文的解决方法
  • Mysql语句分类与如何编写
  • 网络安全框架及模型-PPDR模型
  • PyTorch的基础结构和概念
  • 【Android Debug Bridge】adb常用指令(更新中)
  • Redis和MySQL之间如何进行数据同步
  • git命令-基本使用
  • 高性能的热电偶测温如何设计?
  • 【WRF-Urban】城市冠层参数UCPs导入WPS/WRF中
  • Kibana server is not ready yet
  • 基于MyBatis的关联查询优化与应用实践
  • 新品发布 | TOSUN正式推出GPS转CAN FD模块产品,为自动驾驶提供数据支持
  • Web开发 ,用Python 还是 Node.js? 我的经验是...
  • 第六届金盾信安杯Web题解
  • COMBINING INDUCTION AND TRANSDUCTION FOR ABSTRACT REASONING 论文阅读报告
  • 「Mac畅玩鸿蒙与硬件36」UI互动应用篇13 - 数字滚动抽奖器
  • 【Redis】Redis Set 集合常见命令, 内部编码以及使用场景介绍