如何将 Spark Thrift 服务器连接分配给队列



我想为每个开发和QA建立一个Spark Thrift服务器2个连接。这两个连接应通过 2 个独立的队列传递。

为了实现上述目标,我在连接Thrift服务器时从直线设置了以下属性。1( mapred.job.queue.name2( 火花线队列

连接网址:jdbc:hive2://host:port?mapred.job.queue.name=queue_name

并且,使用上述 URL 从直线执行查询。但是,我无法验证查询是否使用正确的队列执行。

请帮忙。

谢谢斯拉万

你可以检查 YARN 资源管理器 UI,运行在 YARN 之上的每个应用程序都会显示在那里,你也可以使用 yarn application -list 命令行来验证应用程序分配到哪个队列。

相关内容

最新更新