为了账号安全,请及时绑定邮箱和手机立即绑定

Spark 错误记录

标签:
Spark
  1. scheduler.LiveListenerBus: Listener SQLListener threw an exception
    java.lang.NullPointerException

webp

image.png

在这个报错中没有显示自己编写代码的问题,一开始度娘了很久都没结果,一样的代码在其他地方能执行,在这里就执行不了。
由于我的每个任务都有不同的执行参数,所以每个参数都写在一个文件里面直接拷贝。这次出问题就出在

webp

image.png


--num-executors 16
--executor-cores 8
--executor-memory 16G \


webp

image.png


--executor-memory 16G \ 这个参数漏了
贼低级错  但是很难排查出来



作者:利伊奥克儿
链接:https://www.jianshu.com/p/9f6de79c97c9


点击查看更多内容
TA 点赞

若觉得本文不错,就分享一下吧!

评论

作者其他优质文章

正在加载中
  • 推荐
  • 评论
  • 收藏
  • 共同学习,写下你的评论
感谢您的支持,我会继续努力的~
扫码打赏,你说多少就多少
赞赏金额会直接到老师账户
支付方式
打开微信扫一扫,即可进行扫码打赏哦
今天注册有机会得

100积分直接送

付费专栏免费学

大额优惠券免费领

立即参与 放弃机会
意见反馈 帮助中心 APP下载
官方微信

举报

0/150
提交
取消