etl 相关问题

ETL是Extract,Transform和Load的首字母缩写。它指的是从源系统提取数据,以某种方式转换数据(操纵它,过滤它,将其与其他源组合),最后将转换后的数据加载到目标系统的过程。

在SSIS中使用正则表达式解析地址

我们知道SSIS中没有正则表达式的功能。我们开始知道我们需要在自定义脚本转换中编写.Net脚本。但是,我们想写Java方法...

回答 1 投票 2

SSIS无法保存包并重新启动Visual Studio

这是我第一次使用SSIS,所以请耐心等待......我正在使用SSIS将表从Oracle迁移到SSMS,我正在尝试传输一些非常大的表(5000万行+)。 SSIS是......

回答 2 投票 2

SSIS:到1个目的地的多个来源

我是SSIS的新手。我有多个来源,例如我在sql数据库和excel表中有产品,我需要将它们迁移到1个目的地,这是另一个sql数据库。我有 ...

回答 1 投票 1

如何通过Glue在AWS Athena中查询嵌套的XML文件

我希望嵌套的XML文件使用AWS胶水从AWS Athena进行查询。 99988881111 25.0 &...

回答 1 投票 0

SSIS和NULL值

我有SSIS包。它有一个执行sql任务,从不同服务器上的表中获取一些配置值。因此,SSIS包获取这些配置值并将它们存储在SSIS中的变量中。 ...

回答 3 投票 0

SSIS表达

我有以下SQL代码更新ETL.TempRH set resourcer = IF(资格IN(47,49,50,164,187,252,185,239,251),“resourcer”,type_Staff);我需要......

回答 2 投票 2

SSIS - varchar(max)

我有sp连接一个长字符串,然后传回SSIS。但目前SSIS只是部分地挑选字符串。有没有一种方法允许T-SQL存储过程传递...

回答 1 投票 1

插入时SSIS出错 - 字符串或二进制数据将被截断

我的ssis pakage中有一个错误,我不理解它:错误:InsertStudent的0xC0202009,InsertStudent [303]:SSIS错误代码DTS_E_OLEDBERROR。发生OLE DB错误。错误代码: ...

回答 2 投票 0

如何在没有脚本的情况下使用ssis创建空的.text文件

我的第一个任务是文件系统任务。此任务创建一个文件夹。现在我无法弄清楚如何在文件系统任务刚创建的文件夹中创建空白文本文件。我创造了2 ...

回答 2 投票 2

根据组的长度拆分和更改pandas'groupby'元素的值

我有一个pandas DataFrame对象,其中一个列名为'order_id'。具有相同id的行属于同一个顺序(大小可以是1到1000之间的任何值),例如:sales_orders = {'order_id'...

回答 1 投票 1

将SQL Server数据库数据移动到SAP BW

我已经阅读了一些关于将数据从SAP BW迁移到SQL Server的文章。我找不到任何关于将数据从SQL Server移动到SAP BW的文章,它是否可能,如果是这样的话,那将是什么......

回答 3 投票 1

由于日期格式无效,SSIS包中的Derived列出错。如何跳过这样的价值? [重复]

我正在从另一个应用程序生成的文件夹中导入CSV文件。虽然在某些CSV文件中使用SSIS包导入而不是日期格式十进制值,但是如何跳过这样的...

回答 1 投票 0

OLE DB命令到Oracle - unicode / non-unodeode转换错误

当我进入RDP时,我的桌面和我的ETL服务器上的包运行正常。但是,当作为作业的一部分运行时,我在所有字符串列上都出现以下错误:“错误:列”***状态“...

回答 1 投票 1

SQL Server目标与OLE DB目标

我使用OLE Db目标批量导入多个平面文件。经过一些调整后,我最终得到的SQL Server目标速度提高了25-50%。虽然我对这个目的地感到困惑,因为......

回答 2 投票 2

在SSIS中从CSV导入yyyyMMdd日期

我有12列使用yyyymmdd格式。在数据流任务中,我有一个平面文件源,一个派生列任务和一个OLE DB目标。我正在将以下表达式应用于......

回答 2 投票 2

'C#脚本任务在加载.CSV文件之前删除四重引号“

我有一个相当基本的SSIS包,它将.csv文件加载到SQL表中。但是,当程序包尝试读取数据流任务中的.csv源时,我收到错误消息:“...

回答 1 投票 2

从高级编辑器到数据转换转换更改数据类型

我正在使用SSIS创建一些包。我对数据转换转换组件和从高级编辑器更改列数据类型感到困惑如果我可以进入高级...

回答 1 投票 2

SSIS派生列表达式根据单独的OLE DB源中的另一个字段的值显示空白

我有两个不同的OLE DB源来自不同的服务器合并到合并连接。我想我需要使用派生列将一个字段的值放在一个OLE DB源中作为...

回答 1 投票 3

json变换就像xslt / saxon一样简单

我正在开发一个“Extract Transformation Load”项目。在我之前的ETL项目中,dataload是用XML构建的,我使用xslt作为Transformation部分。对于这个项目,数据......

回答 1 投票 1

数据类型已从文本10 - >代码10更改,mysql中的等效类型是什么?

我有一个ssis包,从第三方数据库读取数据,然后将该数据写入我的数据库。我收到了他们发来的电子邮件,他们的数据库中的以下内容正在发生变化:......

回答 1 投票 2

© www.soinside.com 2019 - 2024. All rights reserved.