amazon-athena 相关问题

Amazon Athena是一种针对存储在Amazon S3上的数据运行SQL查询的服务。 Amazon Athena是Amazon Web Services(AWS)的一部分。

s3 分区 - aws 胶水爬虫 - athena

在s3中我使用脚本(python脚本)创建了文件夹(分区) 文件夹看起来像这样 my_bucket/dev_zone/merchant_id=1/年=2025/月=01/日期=01/ 我正在从我的 AWS 胶水脚本写入数据...

回答 1 投票 0

Athena 无法使用 OpenCSVSerde 解析日期

我在 S3 上有一个非常简单的 csv 文件 “我”,“d”,“f”,“s” "1","2018-01-01","1.001","很棒的东西!" "2","2018-01-02","2.002","可怕的事情!" "3","2018-01-03","3.003","我是石油人" 我正在努力...

回答 3 投票 0

在 Athena 上查询 json 数据时出错

我在 S3 中存储了 JSON 数据,我想使用 Athena 查询它。我使用 AWS Glue 爬网程序来检索已正确获取的元数据和列,但我仍然无法查询...

回答 1 投票 0

保留 UNLOAD 生成的 Parquet 中的列名称大小写

默认情况下,在 Athena(可能更普遍的是 Presto/Trino)中 SELECT * 小写列名称。 我找到了一种解决方法,通过在适当的情况下显式指定列名称 SELECT SomeColumn,

回答 1 投票 0

如何在 athena 视图定义中添加条件以修改列值?

我在 s3 中有一个数据仓库,具有铜牌、银牌和金牌层,其中数据以增量格式保存。我需要从银桌创建金桌,并决定最好的方法

回答 1 投票 0

`lag()` 与 `over` 和 `range Between` 会在前一条记录超出范围时返回一个值

我想在使用 RANGE BETWEEN 定义的分区上使用 lag() 获取先前的值。我按照文档中的示例进行操作: 带订单(custkey、订单日期、总价) 作为 ( ...

回答 1 投票 0

使用 ODBC 将 powerBI Desktop 连接到 AWS Athena 错误

我正在尝试使用 ODBC 连接测试将 powerBI Desktop 连接到 AWS Athena:https://docs.aws.amazon.com/athena/latest/ug/odbc-v2-driver.html 我已经安装了驱动程序(Windows 2.x Amazon

回答 1 投票 0

查询 athena aws 的正确方法

我用 athena 查询 https://commoncrawl.org/overview 数据时超时...如果成功,每次查询将花费我 1000 美元...每 TB 5 美元,200 TB(?) ……其实太多了 这是……

回答 1 投票 0

Amazon Athena 查询 S3 Common Crawl 索引返回状态代码:503

我使用 Amazon Athena 成功查询 Common Crawl 档案的索引,直到几周后它开始返回“服务:Amazon S3;状态代码:503;错误代码:缓慢...

回答 1 投票 0

AWS Glue 无法访问视图

我在 Glue / Athena 中注册了一个视图,将其命名为 my-db.vm_view。我可以通过 Athena 查询它,一切似乎都正常。 我正在尝试在胶水作业中使用这张桌子

回答 1 投票 0

添加从表列确定的日期间隔

我正在尝试向 AWS Athena 表中的日期列添加天数,其中天数由另一列确定。 我可以向该列添加固定的天数,如下所示: 选择(

回答 1 投票 0

如何正确从分区的 Athena 表中读取数据?

我正在尝试使用分区的 Athena 表读取上传到 S3 的文件的数据。我将 Parquet 文件上传到 S3 并创建了带有分区的 Athena 表。我使用了 storage.location.template

回答 1 投票 0

如何计算数组与原始数组的差异?

我有一个整数数组,我想计算相邻元素之间的差异并返回一个差异数组。 SELECT ARRAY[3, 2, 5, 1, 2] AS my_arr -- 原始数组 -- 我的_arr ...

回答 1 投票 0

将 Looker 连接到 Amazon Athena

我正在尝试将 Looker 连接到 Amazon Athena,但由于某种原因,该连接器对我不可用。 我需要 Studio Pro 许可证吗?

回答 1 投票 0

Athena SQL 中的正确案例

我是 Athena 新手,正在尝试将字段“国家/地区”转换为正确的大小写。例如: 美国 -> 美国 雅典娜有办法做到这一点吗?

回答 2 投票 0

无法从 Athena 表中提取 JSON 中的嵌套数组子字段

我们有一个 Athena 表,其中有一列包含 JSON 值。 Athena 中主列(包含 JSON 值)的数据类型是字符串数据类型。 Athena 表的 DDL 就像...

回答 1 投票 0

在 Athena 中将日期时间戳从 UTC 转换为 EST,无需时区

我正在尝试将日期时间戳列从 UTC 转换为 EST,而不输出包括时区,并将其 CAST 为时间戳。 我已经尝试了下面的方法,但是结果列...

回答 1 投票 0

将数组 Athena 转换为字符串

我目前在 Athena 中有一个 JSON 输出作为数组: 这是我正在运行的查询 使用数据集 AS (选择 项目 从 (选择*从( 选择 JSON_EXTRACT(message, '$.items') AS 项目 来自

回答 1 投票 0

使用 serverless.yaml 创建 Glue 表会出现“表名称不得包含大写字符”错误,即使名称为小写也是如此

我正在尝试使用无服务器框架创建 AWS Glue 数据库和表。这是我用来测试的 yaml 代码: 组织: 测试组织 服务:TestAthenaServerless 提供者: 名称: 一个...

回答 1 投票 0

是否可以向现有 AWS Athena 表中的结构添加字段?

我有一个表,用于跟踪高吞吐量站点上的用户操作,其定义为(不相关字段等已删除): 创建外部表 `actions`( `uuid` 字符串 COMMENT '来自反序列化器',...

回答 2 投票 0

最新问题
© www.soinside.com 2019 - 2025. All rights reserved.