Hadoop源码分析四远程debug调试

 更新时间:2021年9月3日 00:00  点击:2128

1、 hadoop远程debug

从文档(3)中可以知道hadoop启动服务的时候最终都是通过java命令来启动的,其本质是一个java程序。在研究源码的时候debug是一种很重要的工具,但是hadoop是编译好了的代码,直接在liunx中运行的,无法象普通的程序一样可以直接在eclipse之类的工具中直接debug运行。
对于上述情况java提供了一种远程debug的方式。

这种方式需要在java程序启动的时候添加以下参数:

-agentlib:jdwp=transport=dt_socket,server=y,address=6603,suspend=y

其中transport是指定双方的数据传输方式,server表示是否监听debuger的调试请求,address是监听端口,suspend是表示是否等待启动。

所以为了能远程debug hadoop,需要修改hadoop的启动脚本。

推荐修改bin目录下的hdfs文件进行修改

修改方式如下图:

在这里插入图片描述

如上图所示,被注释掉的语句是包含远程调试的参数,未被注释的是其正常的启动参数。在这里修改还有一个好处是可以针对指定的服务进行远程debug设置。上图是针对namenode进行远程debug设置。若要对其他的服务进行远程debug,那么只需修改对应节点的hdfs文件中与该服务名称对应的参数便可。
修改完成后,使用sbin目录下的脚本启动便可。

启动成功后,便可以使用eclipse等工具进行远程调试。

下面以eclipse为例

首先在eclipse的代码框中点击右键,在弹出的选项框中选择debug as,在其弹出的选项框中选择debug configurations。

打开debug的配置页面

如下图:

在这里插入图片描述

然后双击remote java application(或者点击右键,然后选择new configuration)

界面如下:

在这里插入图片描述

其中,name可以自定义,host需要写启动远程debug服务器的地址,prot需要写上述参数中的端口。若无误便可点击下方的debug按钮,开始debug。

以上就是Hadoop远程debug调试的详细内容,本系列下一篇文章传送门Hadoop源码分析五hdfs架构原理剖析更多关于Hadoop的资料请持续关注猪先飞其它相关文章!

[!--infotagslink--]

相关文章

  • C#中的两种debug方法介绍

    这篇文章主要介绍了C#中的两种debug方法介绍,本文讲解了代码用 #if DEBUG 包裹、利用宏定义两种方法,需要的朋友可以参考下...2020-06-25
  • 解决idea中debug工具栏消失后如何显示的问题

    这篇文章主要介绍了解决idea中debug工具栏消失后如何显示的问题,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧...2021-02-18
  • idea 无法debug调试的解决方案

    这篇文章主要介绍了idea 无法debug调试的解决方案,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧...2020-09-09
  • c# 代码调试技巧和如何远程调试

    这篇文章主要介绍了c# 代码调试技巧和如何远程调试,帮助大家更好的理解和使用c#编程语言,感兴趣的朋友可以了解下...2020-12-08
  • 使用idea远程调试jar包的配置过程

    这篇文章主要介绍了使用idea远程调试jar包的配置过程,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下...2021-09-26
  • pycharm debug 断点调试心得分享

    这篇文章主要介绍了pycharm debug 断点调试心得分享,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧...2021-04-16
  • 使用phpstorm和xdebug实现远程调试的方法

    vs的断点调试功能很强大有木有,能查看所有变量有木有。php调试很麻烦有木有,echo,var_dump写得你想吐了有木有。想体验一下ide调试的快感吗?那就来使用xdebug吧...2016-01-02
  • php5中Xdebug配置安装步骤介绍

    Xdebug是一个开放源代码的PHP程序调试器(即一个Debug工具),可以用来跟踪,调试和分析PHP程序的运行状况了,下面我们来看php5中Xdebug配置安装,希望能帮助到各位。 Xdeb...2016-11-25
  • Golang中Delve版本太低无法Debug的问题

    这篇文章主要介绍了Golang中Delve版本太低无法Debug的问题,本文通过图文并茂的形式给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下...2020-11-16
  • 使用 use re debug 查看正则表达式的匹配过程

    使用 use re 'debug' 查看正则表达式的匹配过程,参见如下的代码...2020-06-29
  • 在IDEA中安装scala、maven、hadoop遇到的问题小结

    这篇文章主要介绍了在IDEA中安装scala、maven、hadoop遇到的问题小结,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下...2020-10-09
  • 项目发布Debug和Release版的区别详解

    这篇文章主要为大家详细介绍了项目发布Debug和Release版的区别,文中示例代码介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们可以参考一下...2020-10-21
  • Visual Studio Debug实战教程之断点操作

    众所周知断点对于Visual Studio调试过程是十分重要的,断点的设置也是为了更好的进行调试。下面这篇文章主要给大家介绍了关于Visual Studio Debug实战教程之断点操作的相关资料,需要的朋友可以参考下...2021-09-22
  • Visual Studio Debug实战教程之基础入门

    这篇文章主要给大家介绍了关于Visual Studio Debug实战教程之基础入门的相关资料,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧...2021-09-22
  • Hadoop源码分析四远程debug调试

    本篇是Hadoop源码分析系列文章第四篇,主要介绍一下Hadoop的远程debug调试步骤,后续本系列文章会持续更新,有需要的朋友可以借鉴参考下...2021-09-03
  • Hadoop运行时遇到java.io.FileNotFoundException错误的解决方法

    今天给大家带来的是关于Java的相关知识,文章围绕着Hadoop运行时遇到java.io.FileNotFoundException错误展开,文中有非常详细的解决方法,需要的朋友可以参考下...2021-06-21
  • 使用docker部署hadoop集群的详细教程

    这篇文章主要介绍了使用docker部署hadoop集群的详细教程,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值需要的朋友可以参考下...2020-09-05
  • PHP远程调试之XDEBUG

    开发的时候我都是使用XDebug在本地调试,但是最近加入一些项目中去,环境太复杂了,要在本地搭建一个开发环境真的太麻烦了,那么我们怎么使用xdebug来远程调试呢?下面通过本篇文章给大家介绍php xdebug远程调试方法,感兴趣的朋友一起看看吧...2016-01-02
  • 基于IDEA 的远程调试 Weblogic的操作过程

    这篇文章主要介绍了基于IDEA 的远程调试 Weblogic的操作过程,本文通过图文实例相结合给大家介绍的非常详细,需要的朋友可以参考下...2021-09-13
  • 如何使用SublimeText3配置 PHP IDE环境

    这篇文章主要介绍了如何使用SublimeText3配置 PHP IDE环境,并使用Xdebug进行调试,喜欢使用SublimeText的同学,可以参考下...2021-04-21