amazon-redshift 相关问题

Amazon Redshift是一种PB级数据仓库服务,它使用现有的商业智能工具来分析数据。 Redshift是一个基于ParAccel的面向列的MPP数据库

我尝试使用 AWS Glue 将数据从 S3 传输到 Amazon Redshift,但在调用 o209.pyWriteDynamicFrame 时发生错误。我该怎么办?

我正在尝试使用 AWS Glue 将一些 CSV 格式的数据从 S3 存储桶传输到 Amazon Redshift 中的表。但是,我的工作失败并出现以下错误: 错误类别:UNCCLASSIFIED_ERROR;一个

回答 1 投票 0

Redshift PIVOT 多列

我在 Redshift 中有以下数据框,其中每个帐户都有 6 个月的多列数据。在此示例中,我仅显示一个帐户,其中包含两列 purch 和 bal: 我知道...

回答 1 投票 0

从 REDSHIFT 中的出生日期计算年龄

我尝试了以下方法,但它们都不能在红移中工作 datediff(current_date, str_to_date(dob, '%d,-%m-%Y'))/365 作为age_today 年(当前日期)-年(出生日期)作为age_in_years 出生日期的格式为 1955-0...

回答 4 投票 0

是否有 Athenas EXPLAIN ANALYZE 的 AWS Redshift 替代品

我正在寻找一种方法来“分析”在 AWS Redshift 数据库中运行的 SQL 查询。 Redshift 确实支持“EXPLAIN”——但是它确实描述了执行计划 雅典娜

回答 1 投票 0

使用 psycopg2 将 Python 字典插入 Super 类型的 Redshfit 列中

将字典作为没有 JSON_PARSE 的 Json 字符串插入“有效”,但随后该列包含一个字符串,并且我无法访问列中的“testdict”等各个属性....

回答 1 投票 0

使用大型 IN 子句和大型列优化 Redshift 查询性能

我正在使用 Amazon Redshift 数据库,并遇到涉及大型 IN 子句(或等效的多个 OR 条件)来获取多个 ID 的查询的性能问题。典型的

回答 1 投票 0

为存储在 Amazon S3 中的表生成 DDL 并将其加载到 Amazon Redshift 中的最佳方法?

我需要将一些表从 Redshift 备份到 S3(首选镶木地板,但不是强制) 但问题是我无法找到一种方法来存储表 DDL 和数据。 最终,我应该...

回答 1 投票 0

当 AWS Glue 作业提供 Amazon Redshift 数据库时避免重复数据

如何防止使用 AWS Glue 作业将重复数据传输到 Amazon Redshift 表?我有一个场景,其中每日 CSV 文件添加到 S3 存储桶中,而我的 Glue 作业则用于传输数据...

回答 2 投票 0

将csv文件的数据递归传输到redshift

我有一个场景,s3 中有大约 90 个 CSV 文件,我希望我的胶水作业一次选择一个文件(不是一次全部)并将数据加载到红移。我怎样才能实现这个目标? 我不知道什么...

回答 1 投票 0

如何使用 Redshift 查询编辑器 v2 创建查询计划?

查询编辑器 v2 似乎没有 v1 中的计划按钮。我已按照建议的步骤使用 AWS EventBridge 创建计划并已成功附加所述计划...

回答 2 投票 0

未找到 Redshift COPY 命令分隔符

我正在尝试将一些文本文件加载到 Redshift。它们以制表符分隔,最终行值之后除外。这会导致未找到分隔符错误。我只看到一种设置字段分隔符的方法...

回答 10 投票 0

Redshift 慢速 COPY 命令

我有一堆数据(100 列和大约 30M 行),我想从 S3 复制。复制速度非常慢 -3-4 小时。我在目标表上定义了一个 dist 键和排序键。 我想知道什么

回答 1 投票 0

如何从一个表中选择另一个表中不存在的所有记录?

我的表 A 包含键和日期列,表 B 包含键、日期和标志列。我想从 A 中选择键和日期与 B 匹配的所有记录,但忽略 fla...

回答 1 投票 0

如何在RedShift中从数组中的每个json中提取json元素?

我有一个带有超级列扫描的表格,其值类似于 [{"A": 1}, {"A": 2}], [{"A": 3}, {"A": 4}, {“A”:5}]。 我如何用 val 制作一个列...

回答 1 投票 0

在 Redshift 中,如何复制表、添加 dist 和排序键以及保留列编码?

我想在 Redshift 中复制一个表,这样我就可以保留现有的列编码,同时添加 DIST 和 SORT 键。有没有一种简单的可重复的方法来做到这一点? 以前我有

回答 3 投票 0

Redshift 中的 JSON 字段

我想将“住房”键拆分到不同的行上。所以在这个例子中我预计有 4 行。每行内都有以下列: id(这是桌子上的钥匙),housing.id,

回答 1 投票 0

如何在 SUPER 数据类型列上编写 SQL“in”查询

我在 redshift 中有一个简单的表,其架构如下: 专栏 |类型 |整理|可空 |默认 ------------------+----------------------------------------+-- ---------...

回答 1 投票 0

批量数据框数据到redshift数据库表如何快速插入

我尝试了很多方法将数据从数据帧插入数据库。 没有任何方法可以帮助我快速插入,在出现超时错误后花了 2 天和 3 天。 这是我尝试过的几种方法 第一种方法...

回答 1 投票 0

列“”具有不受支持的类型“information_schema.sql_identifier”

我正在尝试在 MySQL Workbench/j 中测试我的存储过程。当我尝试调用存储过程时出现错误。 我创建了一个表来存储存储过程的结果 创建...

回答 3 投票 0

为什么在 PostGIS 中进行空间连接时出现 SRID 错误?

我有两张桌子想加入: sd_lat_long:该表包含英国位置及其各自的纬度和经度 sd_geo_uk_counties:此表包含英国各县及其

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.