etl 相关问题

ETL是Extract,Transform和Load的首字母缩写。它指的是从源系统提取数据,以某种方式转换数据(操纵它,过滤它,将其与其他源组合),最后将转换后的数据加载到目标系统的过程。

如何修复“[OData源[56]]错误:无法从运行时连接管理器获取托管连接。”SSIS中的错误?

我在运行从SharePoint列表中提取数据的SSIS时遇到问题。 SSIS包运行正常,直到2周后,突然包裹失败并出现此错误:[OData Source [...

回答 2 投票 2

必需参数问题dtsx powershell脚本

必需的参数问题dtsx power shell脚本。下面的包只有2个参数,两个都传递仍然得到错误(你需要指定所需参数的值)参考附图...

回答 1 投票 1

在SSIS中将日期转换为字符串,当前名称是月份?

我收到错误,错误将数据类型varchar转换为日期。来自此表达式(DT_STR,30,1252)@ [User :: ToDate] DO NET Source [40]:执行提供的SQL命令时出错:“...

回答 3 投票 4

“将结果提取到类型变量(DBTYPE_I2)时发生错误”

我在生产实例中遇到错误。 ETL没有变化,每天工作都运行良好。今天突然它已经开始失败并出现错误:来源:SQL Update Audit ...

回答 1 投票 2

是否可以通过SSIS脚本转换传递列?

我有100多列的来源。我需要通过脚本组件转换传递这些内容,这些转换会更改一些列。是否有一种简单的方法来允许任何我不修改的列...

回答 1 投票 1


如何使用AWS Glue将csv文件加载到AWS Aurora数据库(关系数据库)?

我有一个csv文件,它将在S3存储桶中出现(每日新文件)。从这里开始,我尝试使用AWS Glue在AWS Aurora数据库中提取,转换和加载。 Aurora DB被设计为......

回答 1 投票 0

如何使用 Boto3 从 Amazon S3 读取大型 JSON 文件

我正在尝试从 Amazon S3 读取一个 JSON 文件,它的文件大小约为 2GB。当我使用 .read() 方法时,它会给我 MemoryError。 这个问题有什么解决办法吗?任何帮助都可以,...

回答 4 投票 0

在Python中使用JSON构建表

我正在尝试使用Python将JSON文本转换为标准数据表,但是我对此没有什么经验,当我在线搜索解决方案时,我发现我很难实现...

回答 2 投票 1

Apache NIFI for ETL

使用Apache NIFI进行ETL流程的效果如何,其源为HDFS,目标为Oracle DB。与其他ETL工具(如Pentaho,Datastage,...

回答 2 投票 1

组合使用类似主键的两个源表时的自然键

我有两个源表,一个基本上是发票,另一个是迁移的发票。两者都应该使用相同的对象,但我有这个。它们包含大部分相同的......

回答 1 投票 0

SSIS错误:无法从SQL命令的参数中检索目标列描述

我收到一个错误:[将更新的记录加载到Table_vwAs_FixedIdentifier [85]]错误:无法从SQL命令的参数中检索目标列描述。当我执行...

回答 1 投票 3

我想将DATEADD(“d”, - (DAY(GETDATE()))+ 1,GETDATE())转换为YYYY-MM-DD格式

表达式DATEADD(“d”, - (DAY(GETDATE()))+ 1,GETDATE())是正确的,它给我2/1/2019 3:45:02 PM但我希望我的答案是2019年-02-01在SSIS PLease帮助我

回答 2 投票 2

脚本任务问题列出目录中的excel文件

问题:我的D:驱动器上的文件夹中有Excel表格。我想在Script任务中查看变量中的所有excel文件。 SSIS变量:只读:文件夹路径只读和写:Excel文件C#...

回答 1 投票 1

使用SSIS动态地将每个表的数据从服务器A复制到服务器B.

我的任务是在SSIS中创建工作流,它将每个表的数据从服务器A复制到服务器B中的相同表。现在,我已经停止了我从服务器获取数据的步骤...

回答 2 投票 3

SQL Server代理和SSIS包

我正在尝试将SQL Server代理作业中的变量值传递给SSIS包,但该变量中包含一个撇号,导致SQL Server代理作业失败,例如在作业的SQL Server代理中...

回答 5 投票 6

空字符串导致“在命令行参数中检测到错误,请确保正确设置所有参数”

在SQL 2016 Server上,我有一个调用SSIS包的作业。该软件包位于SSISDB中的一个项目中,并具有参数。其中一个参数是字符串类型,默认为空。一世 ...

回答 4 投票 5

表达式变量通过运行时更改

我有一个包含以下表达式的变量:@ [User :: DestinationDirectory] +“\\ files \\ Charges_”+ RIGHT(“0”+(DT_STR,2,1252)DATEPART(“dd”,GETDATE()) ,2)+“_”+右(“0”+(...

回答 2 投票 2

无法从SSIS访问DB2的全局临时表

我在DB2中手动创建了全局临时表,并试图在SSIS DFT中访问它。但我无法访问。注意:会话已打开创建脚本:DECLARE GLOBAL TEMPORARY TABLE ...

回答 1 投票 2

在SSIS中保存/记录变量的值以供下次执行

我目前正在将数据库中的数据导出到XML文件中。这非常有效。根据数据量,XML文件仅包含一个数据集或数百个。这个过程被触发了......

回答 2 投票 3

© www.soinside.com 2019 - 2024. All rights reserved.