google-bigquery 相关问题

Google BigQuery是一款Google Cloud Platform产品,可使用SQL提供无人值守数据集的无服务器查询。 BigQuery提供多个读写流水线,并支持数据分析,从而改变企业分析数据的方式。

包含不同结构的Array_agg

我正在尝试创建一个具有不同结构的数组作为列的值,如下所示 选择 array_agg(distinct struct(field_a, field_b)) as c FROM 表 ... 这可能吗?

回答 2 投票 0

进行 jobs.insert 调用时处理 503 错误

在 Bigquery 的文档中,503 backendError 的故障排除部分指出: 如果您在调用 jobs.insert 时收到此错误,则不清楚作业是否成功。在这种情况下...

回答 1 投票 0

使用具有空字段的数据流进行 Bigquery 流式插入

我们使用预定义的 Dataflow 作业模板将 Bigquery 流式插入与 Dataflow 结合使用。 当我将其与可为空和重复的字段一起使用时,我遇到了一些特殊情况。 例如,wi...

回答 2 投票 0

使用 Go API 时出现 Google BigQuery 权限错误

使用 Google 帐户对 Google BigQuery 进行身份验证后,在使用 BigQuery 控制台时,我可以运行我的查询。这些查询创建一个作业(在弹出窗口中可见)。 但是在执行相同的操作时...

回答 1 投票 0

如何在 BigQuery 中取消透视?

不确定要调用什么函数,但转置是我能想到的最接近的函数。 我在 BigQuery 中有一个表,配置如下: 但我想查询一个配置如下的表...

回答 5 投票 0

错误:标量子查询产生多个元素

我们刚刚开始将查询从旧版迁移到标准 SQL,因此我们现在正在学习如何处理嵌套数据和数组。 基本上我们想要做的是从 ga_sessions 选项卡中检索...

回答 1 投票 0

Apache_beam 写入大查询 json 负载错误

在 Dataflow 中编写一个管道,将流拆分为由数据中的 event_name 和 event_date 动态命名的表。 正在创建表,名称正确,但数据是

回答 1 投票 0

Apoache_beam 写入大查询 json 负载错误

在 Dataflow 中编写一个管道,将流拆分为由数据中的 event_name 和 event_date 动态命名的表。 正在创建表,名称正确,但数据是

回答 1 投票 0

GCP 数据流的 Python 脚本在 GitHub 操作流中失败

当我尝试将数据从 Pub/Sub 写入 BigQuery 时,我遇到了 GitHub 操作工作流程上的 GCP Dataflow 的 python 脚本问题。 它返回与写入 Big Query 相关的错误。 蟒蛇

回答 1 投票 0

模块“apache_beam.io.gcp.internal.clients.bigquery”没有属性“TableFieldSchema”?

我正在尝试从 json 文件解析架构,该文件包含 bigquery 表的架构文件。 我正在使用以下代码。 导入 apache_beam 作为光束 从 apache_beam.io.gcp.bigquery 导入

回答 2 投票 0

是否可以创建两个名称相同但位置不同的不同 Bigquery 数据集?

是否可以为同一个项目创建两个名称相同但位置不同的不同 BigQuery 数据集?

回答 1 投票 0

DBT Post_hook 执行

我在 dbt 中遇到宏问题,该宏旨在在执行条件删除之前检查表是否存在。宏看起来像这样: {% 宏 check_table_exists(项目,

回答 1 投票 0

我在 BigQuery 上使用 SQL 时不断收到语法错误消息

我是一名正在学习数据分析在线课程的学生。我正在学习 SQL,这是我第一次进行任何类型的编码。最近,我遇到了一个问题,在遵循

回答 1 投票 0

Bigquery:创建临时外部表

根据GCP官方文档 您可以使用永久表或临时表在 BigQuery 中查询外部数据源 https://cloud.google.com/bigquery/docs/external-tables#

回答 1 投票 0

如何获取 BigQuery 中运行的所有查询的计数

我正在尝试获取有关 BigQuery 中运行的查询数量及其状态的信息。 我试过这个: 选择计数(job_id)作为 job_count,状态 来自`MY_PROJECT`。`region-MY_REGION`。

回答 1 投票 0

如何在 BigQuery 中给定大图生成连接组件?

我想使用 BigQuery 生成图形的连接组件。 给定下图(由连接的节点对表示): (E1、E2) (E2、E3) (E3、E4) (E4、E5) ...

回答 2 投票 0

我正在使用 BigQuery Studio,我的简单查询花费的时间太长

我的查询很简单,但花了很长时间。我是 BigQuery Studio 的新手,但我怀疑我已导入 BigQuery 的电子表格。 这是查询: 每日最大步数为 ( 东南...

回答 1 投票 0

动态 SQL 将许多列转换为行

我有一个包含超过 100 列的表,我想保留 2 列作为固定列并转换其余列。我可以通过 union 来做到这一点,但这将是大量的工作和很长的代码。我愿意

回答 1 投票 0

如何通过 GIT 和 Jenkin 并使用回滚策略来自动化 BigQuery CI?

我们如何在具有表数据集和视图以及授权视图和视图更新的 Jenkin 中实现 CI 自动化? 有什么方法可以恢复通过 Jenkin 管道意外删除的视图/权限

回答 1 投票 0

如何自动备份和版本存储过程等BigQuery代码?

备份 BigQuery DDL 的选项有哪些 - 特别是视图、存储过程和函数代码? 我们在 BigQuery 中有大量代码,我们希望自动返回...

回答 5 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.