背景: java实现任务调度框架,可实现任务间相互依赖,支持并行、串行等不同场景。
问题:其中某个节点任务是执行shell,cmd内容是执行hadoop 命令拉取数据。任务上线来一直运行正常,但某次之后会间歇性block。当时猜测和hadoop客户端改动有关(单独执行hadoop命令正常返回,但比hadoop升级之前多一些exception信息)。
排查:
1、网上查一些资料 ![https://blog.csdn.net/su20145104009/article/details/102898694](https://blog.csdn.net/su20145104009/article/details/102898694)
2、通过尝试验证,发现确实是process进程blocking住了, 通过把shell内cmd的重定向消费后,任务正常
记一次问题排查
最后编辑于 :
©著作权归作者所有,转载或内容合作请联系作者
- 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
- 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
- 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
推荐阅读更多精彩内容
- 问题现象 创建一个nginx pod,并配置了service访问,service后端指向pod。 进入pod中使用...
- 之前看我文章的小伙伴可能知道,由于我们公司由.net转java,所以我也一直在边做项目边学习java,这里记录一次...
- 公司:HJSD 职位:Java开发工程师 项目代号:G 简介 G项目是在HJSD接触的第一个项目,项目中包含了数据...
- 历史原因,当前有一个服务专门用于处理mq消息,mq使用的阿里云rocketmq,sdk版本1.2.6(2016年)...