[好朋友,我希望利用您在BigQuery中的经验来确定适合我的数据的最佳结构,我在关系数据库(尤其是Oracle DB)方面拥有5年的经验,并且我熟悉在关系数据库中使用最佳实践来构建数据仓库,但是在涉及云解决方案时,我还是新手]]
我的问题是关于BigQuery中的分区表,据我所知,BigQuery仅在一天中有分区,
因此,我的很多数据每天都有很少的行数(最大1K到12K之间),但是它们包含很长一段时间的数据,所以基于一天对表进行分区是一个好主意吗?如果我每年将数据划分为表格,并创建一个代表所有表格的视图,这对您有帮助吗?还是BigQuery上还有其他解决方案。以您的经验,当在BQ中使用分区有效时,每日数据应该是多少?
如果您有关于在DWH中使用BQ的最佳实践的任何参考或书籍,请提供给我。
谢谢
早安朋友,我希望利用您在BigQuery中的经验来确定最佳的数据结构,我在关系数据库(尤其是Oracle DB)中有5年的经验,并且我很熟悉...
因此,我的很多数据每天都有很少的行数(最大1K到12K之间),但是它们包含很长一段时间的数据,所以基于一天对表进行分区是一个好主意吗?