怎么指定Hadoop命令行日志输出级别

怎么指定Hadoop命令行日志输出级别

本篇内容介绍了“怎么指定Hadoop命令行日志输出级别”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!


1.文档编写目的


使用Hadoop的客户端命令时,在命令执行报错的情况下,需要使用通过DEBUG日志来分析报错原因,在CM上通过设置HDFS的Gateway角色日志输出级别为DEBUG,但命令行使用hadoop命令并未输出DEBUG日志。

怎么指定Hadoop命令行日志输出级别

以上方式设置后,命令行执行hadoop命令并不能输出Debug日志

怎么指定Hadoop命令行日志输出级别

  • 测试环境说明

1.CM5.15.0和CDH5.14.2

2.命令设置输出日志级别


通过在命令行设置HADOOP_ROOT_LOGGER的环境变量设置hadoop命令的日志输出级别,操作如下:

[root@cdh03 ~]# export HADOOP_ROOT_LOGGER=DEBUG,console
[root@cdh03 ~]# hadoop fs -ls /

(可左右滑动)

怎么指定Hadoop命令行日志输出级别

可以看到有了详细的DEBUG日志输出。

注意:在Cloudera Manager5.3之前,可以通过如下方式实现

export HADOOP_CLIENT_OPTS="-Droot.logger=DEBUG,console"
hadoop fs -ls /

“怎么指定Hadoop命令行日志输出级别”的内容就介绍到这里了,感谢大家的阅读。如果想了解更多行业相关的知识可以关注网站,小编将为大家输出更多高质量的实用文章!