如何结束Spark Submit和State Accepted



我正在使用apache griffin运行数据清理作业:https://griffin.apache.org/docs/quickstart.html

并且在提交火花作业之后

spark-submit--class org.apache.griffin.measure.Application--master yarn--部署模式客户端--队列默认值\--驱动程序内存1g——执行程序内存1g——执行程序数量2\/home/bigdata/apache-hive-2.20-bin/mesure-0.4.0.jar\/home/bigdata/apache-hive-2.0-bin/env.json/home/bigdata/apache-hive-2.20-bin/q.json

我的工作提交如下:

2008年4月20日13:18:30 INFO纱线。客户端:应用程序_1586344612496_0247的应用程序报告(状态:已接受(2008年4月20日13:18:31信息纱线。客户端:应用程序_1586344612496_0247的应用程序报告(状态:已接受(2008年4月20日13:18:32 INFO纱线。客户端:应用程序_1586344612496_0247的应用程序报告(状态:已接受(2008年4月20日13:18:33 INFO纱线。客户端:应用程序_1586344612496_0247的应用程序报告(状态:已接受(2008年4月20日13:18:34 INFO纱线。客户端:应用程序_1586344612496_0247的应用程序报告(状态:已接受(2008年4月20日13:18:35 INFO纱线。客户端:应用程序_1586344612496_0247的应用程序报告(状态:已接受(2008年4月20日13:18:36 INFO纱线。客户端:应用程序_1586344612496_0247的应用程序报告(状态:已接受(2008年4月20日13:18:37 INFO纱线。客户端:应用程序_1586344612496_0247的应用程序报告(状态:已接受(2008年4月20日13:18:38 INFO纱线。客户端:应用程序_1586344612496_0247的应用程序报告(状态:已接受(2008年4月20日13:18:39信息纱线。客户端:应用程序_1586344612496_0247的应用程序报告(状态:已接受(2008年4月20日13:18:40 INFO纱线。客户端:应用程序_1586344612496_0247的应用程序报告(状态:已接受(

永不停歇:

当我检查纱线的状态时:

bigdata@dq2:~$纱线应用程序-状态应用程序_1586344612496_02312008年4月20日13:16:31 INFO客户端。RMProxy:正在连接到ResourceManager,网址为0.0.0.0:8032申请报告:应用程序Id:Application_1586344612496_0231应用程序名称:batch_accu应用程序类型:SPARK用户:bigdata队列:默认开始时间:1586348775760完成时间:0进度:0%状态:已接受最终状态:未定义跟踪URL:N/ARPC端口:-1AM主机:不适用聚合资源分配:0 MB秒,0 vcore秒诊断:

工作没有进展,有人能帮忙吗。。。。

根据我的经验,这个问题可能有很多原因,但你应该做的第一步检查如下:

  • 您的防火墙可能会阻塞Hadoop集群内节点之间的一些端口,因此计算永远不会启动。尝试暂时禁用专用接口的防火墙,然后再次尝试排除此问题(如果是此问题,请重新激活防火墙并确定需要打开的端口!(
  • Spark可能配置不正确(即资源需求(

相关内容

  • 没有找到相关文章

最新更新