我想在GCP中创建一个逻辑流,它将从任何RDBMS (mysql/postgres/sql server/Oracle)导入数据(作为源),并将数据转储在Bigquery中(作为目的地)。目前,云数据融合似乎是可行的选择。我试图从mysql云实例导入数据,但它要求连接参数,我不知道。所以我不能尝试后面的步骤。我们有其他的选择来实现这个吗?(Python . .等等)
我尝试了云数据融合从GCS导入CSV数据,并按预期工作。我的期望是在这里创建一个流,它将从oracle/sql server/我的sql云实例表中获取数据。
下面是在Google Cloud https://cloud.google.com/data-fusion/docs/how-to/connect-to-cloud-sql-source中从MySql数据库导入数据的文档。
连接参数是必需的,否则插件将不知道连接到哪个DB并使用它进行身份验证。也许如果你能把你得到的错误贴出来,我们可以帮助你。