etl 相关问题

ETL是Extract,Transform和Load的首字母缩写。它指的是从源系统提取数据,以某种方式转换数据(操纵它,过滤它,将其与其他源组合),最后将转换后的数据加载到目标系统的过程。

无法通过SSIS连接到Excel

SSIS无法识别Excel文件。错误:无法从连接管理器检索表信息“Excel连接管理器无法使用连接连接到源...

回答 2 投票 3

执行SSIS包会产生System.IO.IOException

我试图执行包,每次看到以下错误。特别是当我执行数据流任务时。错误:System.IO.IOException:进程无法访问该文件...

回答 1 投票 2

将平面文件导入SQL - 添加字符后不会抛出错误

我正在开发一个包,将数据从文本文件加载到SQL服务器上的表中。文本文件包含以下格式的数据我在这里包括平面文件连接管理器 - 我有......

回答 3 投票 3

在SSIS中显示foreach循环迭代次数

我需要检查我在Visual Studio 2017中运行的foreach循环容器任务的迭代次数。我怎么能实现这一点?

回答 1 投票 4

基于单元位置,从excel到sql的批量插入选择性字段

我有一个SSIS包,我必须从excel表中选择一些值并将它们插入到SQL Server数据库表中,我通过执行sql任务来完成它。以下是步骤:选择......

回答 2 投票 3

使用SSIS存储过程部署和备份

我正在尝试为我们的项目创建存储过程部署和备份的SSIS包。我有一些.sql文件,每个文件包含一个存储过程定义,文件名是...

回答 1 投票 1

每个部署配置的SSIS变量值

我正在使用Visual Studio创建一个非常简单的ETL包,它读取一些Excel文件并将其上传到数据库中。我们有一个配置的变量,它包含源文件的位置。 ...

回答 1 投票 1

如何在xlsx文件中转换数据,删除单元格中的合并并转置一些列以使用SSIS在SQL Server中提取数据?

我有一个As-Is电子表格数据源,在某些列中应用了合并,并且每周数据列以增量格式使用,例如,对于2019W12,将填充下一列(R列)....

回答 1 投票 3

SSIS删除双引号内的单引号

我试图创建一个派生列,将删除包含在双引号中的字符串周围的单引号。例如:“Robert'Bob'LaBla”我需要删除......

回答 1 投票 3

我们可以在SSIS中从string或char数据类型转换为int(或数字)

我觉得这很有挑战性。我有源表和目标表。源表有一个char数据类型的列,长度为2.目标表有一个列为int ...

回答 2 投票 4

Luigi vs Spring Batch

我必须将txt文件加载到oracle表中。现在,正在使用bash脚本,sql加载器和命令行工具进行验证。我正在努力寻找更强大的替代方案。 ...

回答 1 投票 0

如何使用AWS Glue从S3导入JSON数据?

我在AWS S3中存储了一大堆以JSON格式存储的数据。它看起来像这样:s3://my-bucket/store-1/20190101/sales.json s3://my-bucket/store-1/20190102/sales.json s3:// my-bucket / store-1 / ...

回答 2 投票 0

AWS Glue作业将列合并到时间戳中

我很擅长使用AWS Glue和Spark。我正在尝试运行ETL作业,因此我的数据当前被解析为三个单独的列(年,月和日),我需要将这些列合并到一个...

回答 1 投票 0

Spring Batch通用工作设计

我无法找到这个问题的正确答案。使用Spring Batch框架时,可以尝试解决一个通用作业中的所有批处理问题吗?例如,我正试图......

回答 1 投票 0

ETL:在AWS粘合作业中展平嵌套数组

我目前正在尝试使用AWS Glue导入存储在json中的数据。 jsons包含一个属性'tags',定义为一个字符串数组。我最初已经导入了没有标签的表格......

回答 1 投票 1

SSIS - 仅当第一个数据集中不存在键时才合并结果

我正在尝试将两个库存来源与SSIS结合起来。第一个包含来自我们新系统的库存信息,而第二个包含旧数据。我从...获取数据

回答 3 投票 2

用于收集沿袭ID的SSIS脚本任务

我有一个SSIS脚本任务,收集扩展的错误信息。脚本的内容如下:/// /// ScriptMain是脚本的入口点类。不要 ...

回答 1 投票 1

SSIS - 第二个脚本任务未在Foreach循环容器中执行

我在SSIS包中的foreach循环容器中有2个脚本任务。见图。第一个脚本任务确定呈现的文件被执行得很好。然而,第二个存档...

回答 1 投票 2

为什么我的数据不写入excel目的地? SSIS

我创建了一个SSIS包,可以将多行导出到Excel,通常少于200行(包括标题)。当我在VS2015中运行它时,一切都变为绿色。我甚至等待这个问题......

回答 2 投票 3

SSIS将文件从一个位置复制到另一个位置

我想将特定文件从一个位置复制到另一个位置。我有一个消息框打印文件被复制到源和目标的位置如下所示:我得到以下错误:

回答 2 投票 2

© www.soinside.com 2019 - 2024. All rights reserved.