etl 相关问题

使用WSO2 SP，我的应用程序从以下CSV文件中读取行：20170801 000001237,1.321420,1.321510,0 20170801 000001487,1.321440,1.321530,0 20170801 000001737,1.321450,1.321530,0 20170801 000001987，...

csv timestamp etl wso2sp

回答 1 投票 0

Nifi-仅变换一个键后复制所有键

我想将所有它们的键复制到json中，但要转换的键除外。例如输入JSON {“ ts”：“ 20200420121222”，“ name”：“经纪人”，“ city”：“昆士兰”，“年龄”：21，“ gender”：“男性”“ ...

etl apache-nifi jolt

回答 1 投票 0

在ETL中为每个层（提取，转换和加载）使用单独的层/专用模式有什么好处？ [关闭]

etl analytics data-warehouse business-intelligence azure-sql-data-warehouse

回答 2 投票 -2

pyspark读取带有多行列的文本文件

我有以下格式错误的txt文件：id; text; contact_id 1;原因联系人\ \客户对产品的质量不满意\ \; c_102932131我正尝试使用...加载文件] >

csv dataframe apache-spark pyspark etl

回答 1 投票 0

错误：将多个.csv文件加载到单个SQL表中时，数据转换失败

问题定义：我们无法将文件夹中多个Excel工作表中的数据加载到SQL Server上的单个SQL数据库表中。我已经使用了forloop容器来检索多个...

sql-server ssis etl

回答 1 投票 0

Azure数据工厂/聚合为逗号分隔的字符串

我想使用Aggregate按数据进行汇总。这是场景：我有一个表，其值如下：值1 | v1 1 | v2 2 | v1 2 | v3执行聚合后，我要输出...

azure ssis etl azure-data-factory data-transform

回答 1 投票 1

AWS Glue-pySpark：将字符串列拆分为新的整数数组列

我正在尝试使用Glue和pySpark在AWS上执行ETL作业，但不幸的是，我对此确实很陌生。在大多数情况下，使用胶水动态数据框执行...

amazon-web-services pyspark etl aws-glue aws-glue-job

回答 1 投票 0

SQL Server 2017 SSIS-SSISDB和MSDB理解

我是SSIS的新手。首先：已安装SQL Server 2017已安装SSMS v17已独立安装SSDT（这很困难）已安装SSIS完成所有安装后。 SSIS有两个组件：...

sql-server ssis etl business-intelligence ssis-2017

回答 1 投票 -1

SqlServer 2017 SSIS-SSISDB和MSDB理解

我是SSIS的新手。首先，*已安装SqlServer-2017 *已安装SSMS版本17 *已独立安装SSDT（这很困难）*已安装SSIS在完成所有安装之后。 ...

sql-server ssis etl business-intelligence ssis-2017

回答 1 投票 0

将Google Cloud Composer集群缩小到零节点？

我有一个Cloud Composer集群，每天运行大约十二个工作日。它们都在深夜的5小时内运行。最大的DAG需要大约3个小时才能在5个节点上完成运行，并且...

etl airflow google-cloud-composer

回答 3 投票 0

我如何将数据从一个AWS账户的RDS移至另一个账户

我们早在AWS上就已经建立了Web服务和数据库，并且应用程序现已投入生产。出于某种原因，我们需要终止旧的AWS并将所有内容移至新创建的AWS之下...

postgresql amazon-web-services etl amazon-rds data-migration

回答 1 投票 3

在数据集成系统中检测重复项

我正在寻找避免通过HTTP和SFTP传输重复文件的方法。我的系统每次执行转移到外部设备时，都会存储转移的状态...

etl apache-nifi data-transfer fault-tolerance system-design

回答 1 投票 0

etl 相关问题

最新问题