当前位置: 首页 > article >正文

The Yarn application application_xxx_xxx doesn‘t exist in RM

本文主要解决flink在standalone模式下,flink run却一直使用yarn-session模式的问题。

问题

有个客户找到笔者,问题是报错如下:

分析

笔者先从环境入手,首先要确定的是flink是使用了什么模式。确认过后是使用standalone模式。

那就很奇怪,怎么会去使用yarn呢。

解决

说实话,笔者本人也没有遇到类似的问题,但是笔者一般会把不懂的东西转换到懂的东西上,所以先跑一下flink的hello world即wordcount(./bin/flink run ./examples/batch/WordCount.jar -input /etc/hosts -output ./wordcountoutput)。发现报错如下:

可以注意到Info里面提示读到了yarn的配置在/tmp/.yarn-properties-root。查看此文件发现里面包含yarn的appID。

清除此文件以后,重新运行wordcount,成功。在运行客户的sql,也成功了。问题解决。

原因分析

笔者在自己的环境上也复现此问题。复现过程是先使用./bin/yarn-session.sh -n 4 -tm 2048 -s 1 -d启动后,会生成/tmp/.yarn-properties-root。然后使用yarn app -list,yarn app -kill appID。再启动standalone模式。最后使用flink run都会报此错误。所以当yarn app不存在以后,要及时的删除/tmp/.yarn-properties-root。希望读者可以注意这个关键点。

有大数据问题,就找windpig~


http://www.kler.cn/a/407590.html

相关文章:

  • CSS中flex:1是什么属性
  • Java SE 与 Java EE:基础与进阶的探索之旅
  • 网络爬虫总结与未来方向
  • CANDENCE: 绘制好的封装元件 刷新(Refresh) 和 替换 (Replace)焊盘
  • 【电源专题】BUCK电源SW电压的平均值为什么等于输出电压?
  • Rust中Tracing 应用指南
  • jvm发展历程介绍
  • C语言教程指针笔记整理(二)
  • 怎么做好白盒测试?
  • 【MyBatis】useGeneratedKeyskeyProperty属性
  • 积分商品编辑规格里积分未会显问题处理
  • Bugku CTF_Web——my-first-sqli
  • 使用Python生成F分布表并导出为Excel文件
  • linux从0到1——shell编程7
  • WPF绑定Bind方法合集,实时更新
  • YOLOv8-ultralytics-8.2.103部分代码阅读笔记-transformer.py
  • 麒麟网络负载均衡与高可用方案实践
  • 【数据结构OJ】【图论】货币套汇(图路径)
  • 十、事件类型(鼠标事件、焦点.. 、键盘.. 、文本.. 、滚动..)、事件对象、事件流(事件捕获、事件冒泡、阻止冒泡和默认行为、事件委托)
  • 【Python入门第七讲】列表(List)
  • Spire.PDF for .NET【页面设置】演示:打开 PDF 时自动显示书签或缩略图
  • chinaskills_cloud_iaas.iso镜像
  • 数据库【锁】的分类
  • Typora+PicGo+云服务器搭建博客图床
  • Github 2024-11-23 Rust开源项目日报 Top10
  • KVM虚拟机拷贝与迁移