etl 相关问题

ETL是Extract,Transform和Load的首字母缩写。它指的是从源系统提取数据,以某种方式转换数据(操纵它,过滤它,将其与其他源组合),最后将转换后的数据加载到目标系统的过程。

一起运行多个.dtsx文件

我在一个ssis包下有三个不同的.dtsx包。如何只需单击即可执行所有三个,而无需打开每个dtsx文件并单独执行它们

回答 2 投票 -2

如何在SSIS包中获取和存储来自不同源的数据

我有一个XML源文件,我必须从中获取“文件名”和一个表,我必须从中获取文件状态。一旦我得到两个值,我需要将两个数据保存在表中。 XML:

回答 1 投票 1

列Excel源配置为在SSIS中进行unicode,但其中一些被读取为float

在过去的几天里,我厌倦了使用SSIS包来配置包含不同类型数据的Excel源代码。我已经为所有列配置了unicode(DT_WSTR),但是......

回答 1 投票 2

使用Pyspark的Jsons列表分解列

我试图爆炸一个名为phone的列,如下面的架构和内容:(customer_external_id,StringType phones,StringType)customer_id phones x8x46x5 [{“phone”:“(xx)...

回答 2 投票 1

如何处理SSIS中的NULL /空白

我正在构建一个SSIS包来加载一个平面文件(CSV)到SQL服务器。当我尝试将列state_code(char(2))插入SQL服务器时,我收到以下错误。如果我改变了......

回答 1 投票 2

尝试使用SSIS循环并删除表列表

我目前正在为数据库建立存档和清除过程。我从几天前离开的一名员工那里继承了这项任务 - 他一直在为此工作(不经常)......

回答 3 投票 1

表达式上的SSIS派生列错误

我有一个SSIS包,我有四个不同的数据流任务。每个数据流任务(例如,A,B,C,D)具有相同的派生列表达式,并将来自不同oledb源的结果附加到...

回答 2 投票 1

ssis [文件系统任务]错误:出现以下错误消息时出错:“拒绝访问路径。”

所以,我有一个SSIS包来检查服务器上是否存在文件,将文件中的数据复制到sql server上的表中并将文件移动到done文件夹。我创造了环境......

回答 1 投票 0

SQL脚本到SSIS表达式

我有下面的T-SQL查询行,我试图将Visual Studio SSIS表达式转换为派生列任务。所以tableA只有[工作项/提交没有#]列,但我需要......

回答 3 投票 2

在供应商添加/删除列时,将CSV加载到数据库

我有一些SSIS包,它们接收来自供应商的CSV文件并将它们放入我们的本地数据库。我遇到的问题是,有时供应商添加或删除列,我们不......

回答 4 投票 1

使用SSIS包将超过255列数据从SQL导入excel

几天前,我有一个要求客户端每天将数据从SQL服务器(这是一个产生超过300列的多个连接的结果集)导入/转储到Excel中。 ...

回答 1 投票 0

SSIS - 由于潜在的数据丢失,无法转换该值

我对SSIS比较陌生。我正在尝试使用Microsoft OLEDB for Oracle从Oracle数据库中提取信息,我正在使用此查询:SELECT ID FROM Test我收到一条错误消息:...

回答 1 投票 22

我们可以在AWS EFS上运行ETL作业

我想知道我们是否可以在EFS挂载文件上运行ETL作业..如果是这样的话?是使用Hive还是其他任何服务?我们的目标是将一个挂载点中的所有文件减少到一个文件...并存储...

回答 1 投票 0

在SSIS导出中自动转义引号

我正在使用带有SSIS的SQL Server 2014我有这样的数据集:ID名称状态1很棒“存储”活动2市场,活跃3供应商活动在SSMS中,...

回答 1 投票 3

控制流“跳过”执行SQL任务[重复]

在包中,第一个EST提供表中的文件名,脚本任务检查其存在。表达式任务设置了相应的消息,希望发送到第二个EST更新表...

回答 2 投票 1

SSIS中的动态连接字符串

我在从SSIS变量填充XML文件的动态文件路径时遇到以下问题。在Visual Studio 2017中,我具有一个带有MS SQL存储过程的Execute SQL任务,该过程......>

回答 3 投票 2

SSIS Excel导入多少或少于255个字符的列

我有一个Excel文件,其列可能超过255个字符,但有时字符数可能少于255.在这种情况下,更改注册表值以检查整个工作表,...

回答 1 投票 2

替换SSIS中的随机字符

我在SSIS中创建了一个派生列表达式,用于替换随机字符,这些字符在运行包时出现在描述列中。表达式除了?出现在...的标记

回答 1 投票 1

MongoDB ETL嵌套文档的读写

什么是最好的ETL工具,可以帮助读取和编写MongoDB中的嵌套文档?

回答 1 投票 0

如何检查在SSDT VS2015中的SSIS项目中将whcich包设置为启动

在用于VS 2015的SQL Server数据工具中,如何检查我的哪个SSIS包已设置为项目的启动包。我无法找到确认这一点的设置/属性。我知道 ...

回答 1 投票 2

© www.soinside.com 2019 - 2024. All rights reserved.