小贝子编程

使用'groupByKey'进行火花过程跟踪



我想得到一些关于我的火花过程的日志。我假设一些带有"groupByKey"的代码花费了很多时间，但没有办法签出。有什么方法可以检查这个"groupByKey"函数在我的应用程序中是如何流动的吗？

如果你想监控流程，最好的解决方案是Spark WEB UI：https://jaceklaskowski.gitbooks.io/mastering-apache-spark/content/spark-webui.html

相关内容

最新更新


热门标签：

javascript python java c# php android html jquery c++ css ios sql mysql arrays asp.net json python-3.x ruby-on-rails .net sql-server django objective-c excel regex ruby linux ajax iphone xml vba spring asp.net-mvc database wordpress string postgresql wpf windows xcode bash git oracle list vb.net multithreading eclipse algorithm macos powershell visual-studio image forms numpy scala function api selenium