Cloud Dataproc使用BigQuery Connector读取BigQuery Views

问题描述 投票:0回答:1

是否可以让Cloud Dataproc使用BigQuery Connector读取BigQuery Views?

此外,对于用例来说,在Apache Spark(Dataproc)中运行一些工作负载,并且在BigQuery上对相同数据运行一些工作负载=>是否更好地将数据保存在Google云存储(GCS)中作为avro编码格式(或者)是否更好地将数据放在BigQuery中,并且是否可以在BigQuery中公开授权视图以使用BigQuery Connector访问Cloud Dataproc?

google-bigquery google-cloud-dataproc
1个回答
1
投票

不,这是不可能的,因为BigQuery Connector将BigQuery Tables导出到GCS,但BigQuery API目前不支持BigQuery Views的导出:

您无法运行从视图导出数据的BigQuery作业。

© www.soinside.com 2019 - 2024. All rights reserved.