hadoop远程调试

时间：2015-06-16 19:22:56 阅读：131 评论：0 收藏：0 [点我收藏+]

标签：

1、修改etc/hadoop/yarn.sh，增加以下内容
export YARN_NODEMANAGER_OPTS="-Xdebug -Xrunjdwp:transport=dt_socket,address=8788,server=y,suspend=y”
export YARN_RESOUCEMANAGER_OPTS="-Xdebug -Xrunjdwp:transport=dt_socket,address=8788,server=y,suspend=y”
还可以在hadoop-env.sh, mapreduce-env.sh中设置其它选项

2、启动hadoop，其中start-yarn.sh时，会出现以下日志：
localhost: Listening for transport dt_socket at address: 8788

3、启动调试 run-debug configuration，填入ip 与port

458624.png

4、在集群中执行一个job
hadoop jar hadoop-mapreduce-examples-2.3.0.jar wordcount /input /output

hadoop远程调试

标签：

原文地址：http://blog.csdn.net/jinhong_lu/article/details/46520243

踩

(0)

评论一句话评论（0）

分享档案

更多>

2021年07月29日 (22)
2021年07月28日 (40)
2021年07月27日 (32)
2021年07月26日 (79)
2021年07月23日 (29)
2021年07月22日 (30)
2021年07月21日 (42)
2021年07月20日 (16)
2021年07月19日 (90)
2021年07月16日 (35)

周排行