etl 相关问题

ETL是Extract,Transform和Load的首字母缩写。它指的是从源系统提取数据,以某种方式转换数据(操纵它,过滤它,将其与其他源组合),最后将转换后的数据加载到目标系统的过程。

Python中的ETL脚本将数据从另一台服务器.csv文件加载到mysql中

我是一名业务分析师,也是Python的新手。在我的一个项目中,我想从.csv文件中提取数据并将该数据加载到我的MySQL DB(Staging)中。任何人都可以用示例代码指导我......

回答 2 投票 0

使用Nifi表达语言处理多个状态更改

我有一个“UpdateAttribute”处理器,用于评估JSON文件中的信息。最初,这只会检查客户端是否已更新,语句如下所示:$ {literal(...

回答 1 投票 0

解压缩文件并上传到S3

节点上的路由采用zip文件,然后从中将其解压缩到内存中并将其上传到S3存储桶。一切都工作正常,但我正在努力解决zip文件中的所有文件...

回答 2 投票 1

在ssis foreach容器中运行powershell脚本时没有结果

几点要做的事情。 Powershell处于不受限制的模式,因此不需要添加ExecutionPolicy旁路。当我硬编码变量文件名然后设置参数时运行成功...

回答 1 投票 4

雪花转换中的数据类型(算术运算符)

美好的一天,我对我的非功能代码有疑问。如您所见,我想将一些表与union连接起来。我想有营销应用程序的记录,但我需要使用一些...

回答 1 投票 1

在FME中使用多个表转换Excel工作表

我需要使用FME将Excel文件转换为ESRI FileGDB。问题是我的excel工作表包含多个表。示例:在第1行,我具有第一个表的属性。第2行到......

回答 1 投票 0

将视觉工作室2017年降级到2015年是否会影响代码?

我正在使用visual studio 2017和sql server 2016来开发SSIS。我处于这种情况,我想将我的SSIS包部署到使用旧的visual studio 2015的客户端。因为......

回答 1 投票 2

Pentaho:根据另一列添加另一列

我有这种情况,我有关于年龄的数据,我想添加另一列,年龄范围:范围1(0-18岁)=儿童;范围2(19-50)=成年人;范围3(50+)老年人我该怎么办...

回答 2 投票 2

ssis中的批量插入任务错误

运行ssis批量插入时出现以下错误。发生以下错误消息时出错:“无法从OLE DB提供程序获取行”BULK“为链接服务器”(null)“。OLE DB ...

回答 1 投票 1

使脚本组件根据文本文件中的值动态分配数据类型

我有一个任务是使用SSIS中的脚本组件将数据从.txt文件加载到SQL Server表。我已经使用脚本成功加载了它。 public void Main(){//声明......

回答 1 投票 1

从ssis2005升级到ssis2008r2的包没有从sql代理作业执行

我从2005年到2008年升级了一套ssis软件包。相应的数据库已经从sql2005升级到sql2014。 BIDS的套餐运行良好。但是当我从新的SQL服务器执行它们时......

回答 1 投票 0

SSIS Collection中的WildCards {not include}名称为xlsx

我有一个在SSIS中构建的进程,它循环遍历Excel文件,并仅从包含名称Report的那些文件中导入数据。我用作表达式的UserVariable是:* Report * .xlsx,它完美地工作......

回答 2 投票 3

选项Copy的SSIS Argument SQL无效

我正在尝试对SQL Server 2008进行SSIS包部署。我生成了清单文件,但是双击它并没有打开部署向导。我试过从...执行dtutil命令

回答 3 投票 2

每个文件枚举器中的SSIS文件筛选器

我有一个For For file Enumerator。在文件夹下我有E:\输入文件我有“*”+ @ [User:Date] +“*。*”日期变量设置为20180101.变量映射设置为User :: ...

回答 1 投票 0

加载平面文件/将文件名添加到表列

我试图将大量的平面文件加载到sql表中并向表中添加文件名列。在控制流程中我有2个foreech循环抓取文件名并将它们传递给2个变量。 ...

回答 2 投票 5

如何跳过ssis平面文件源中的错误行

我正在将17列CSV文件读入数据库。偶尔文件有一个“少于17列”的行。我试图忽略该行,但即使所有列都设置为忽略,我也不能......

回答 2 投票 2

数据工厂 - 使用通配符确定文件名

我正在使用Data Factory将文件从我的文件系统移动到Blob存储。问题是:文件使用YYYYMMDD标识符命名,[我可以通过分区解析({year} {...

回答 1 投票 1

SSIS ExecutePackageTask在SQL Server 2016中不是avavailbe

我正在编写代码来从SQL Server 2016中的SSISDB目录中读取SSIS包。在其中一个要求中,我需要读取ExecutePackage任务并从中获取包名。按照 ...

回答 2 投票 2

Informatica - 无法删除WORKFLOW MONITOR中的工作流程

创建了映射,工作流,会话并成功执行。决定删除映射,工作流,会话(不是源/目标),最后删除。遵循编辑-...等各种程序。

回答 1 投票 1

CRM到SQL Server数据迁移 - 数据丢失问题

我创建了一个SSIS包,用于将数据从Microsoft动态CRM迁移到SQL服务器.SSIS包工作正常。但是迁移后SQL Server中的表中缺少一些数据。什么...

回答 1 投票 1

© www.soinside.com 2019 - 2024. All rights reserved.