Spark + Intellij + Azure - 输出到屏幕

Question

我正在使用Intellij编写Scala代码，然后将它发送到Azure HDInsight Spark集群以供执行。我收到有关正在运行的作业的日志详细信息，但我没有看到来自我的println()声明的任何输出。

这是正常的吗？有什么方法可以查看程序执行的输出吗？

Answer 1

这是不正常的。您为什么不尝试使用我们的新远程调试功能连接到HDInsight群集并逐步执行代码。请在下面找到文档和调试视频。

https://docs.microsoft.com/en-us/azure/hdinsight/hdinsight-apache-spark-intellij-tool-debug-remotely-through-ssh

https://www.youtube.com/watch?v=wQtj_wjn1Ac

让我们知道您有任何问题。

感谢， -Jenny

Answer 2

这是一个已知的问题，请参见https://github.com/Microsoft/azure-tools-for-java/issues/957