我们如何与Dataproc Metastore交互以获取数据库和表的列表



我使用Dataproc元存储作为GCP的元存储服务。如何与它交互以从中获取数据库和表的列表?是否可以在不运行dataproc集群的情况下执行

编辑-我必须在不运行Dataproc集群的情况下获取元数据。由于我使用Dataproc Metastore服务来存储元数据,所以我需要直接从中获取元数据

Dataproc Metastore API用于管理Dataproc Metastore服务实例(获取/创建/更新等(。正如其中一条评论中所提到的,您可以使用旧版URI(如果您使用控制台,您将在元存储服务的配置选项卡下找到该URI(。

一旦您有了连接到节俭URI的节俭客户端,就可以获取数据库或表。尽管您也可以使用节俭的API来创建数据库和表,但典型的用例是配置大型数据处理引擎/框架,如spark或hive,以使用元存储,而不直接与元存储交互。

最新更新