etl 相关问题

ETL是Extract,Transform和Load的首字母缩写。它指的是从源系统提取数据,以某种方式转换数据(操纵它,过滤它,将其与其他源组合),最后将转换后的数据加载到目标系统的过程。

如何将SQL查询输出作为excel文件放入SSIS中的Azure数据湖

所以基本上,我想在SSIS包本身中完成所有这些工作。 SQL查询输出->转换为不包含任何本地文件的Excel文件->上载到Azure Blob。 “ azure斑点目标” ...

回答 1 投票 0

如何将值传递给OLE DB Source组件中的存储过程参数?

我正在使用SSIS2008。我有一个选择查询名称sqlquery1,该查询返回一些行:aq dr tb目前此查询尚未在SSIS上实现。我正在从...

回答 1 投票 3

If-then语句来过滤数据流任务中的行[关闭]

我正在使用数据流任务来传输数据。我正在寻找使用以下if-then逻辑过滤行的方法:它检查字符串是否以某个特定的值310开始,然后我要删除整个......>

回答 1 投票 0

如何在Infromatica过滤条件中的多个字段上使用ISNULL?

我有一种情况,我必须根据informatica应该是否将记录加载到目标中来检查多个字段中的空值。例如:我有col1,col2,col3,col4 ...

回答 2 投票 0

将新的列名映射到Pandas中的数据框

我有这样的列名列表:column_labels = ['a','b','c','d','e','f','g']和数据:data = [ df ['ts'],t.dt.hour,t.dt.day,t.dt.week,t.dt.month,t.dt.year,t.dt.weekday],我需要...] >

回答 1 投票 0

SSIS电源查询源OData连接不起作用

我正在尝试在SSIS(VS 2017)中使用Power Query Source连接器从OData数据源获取数据。我可以创建一个OData连接器,然后连接到它。当我尝试查看......>

回答 1 投票 2

使用SSIS将Excel工作表从工作簿移动到另一个工作簿

我具有使用System将excel模板工作表移动到新工作簿中的代码(请参见下文);使用System.Collections.Generic;使用System.Linq;使用System.Text;使用Microsoft。...

回答 1 投票 1

是否要在Postgres DB中安装Datastage版本11.x支持元数据

[我们正在使用Oracle处理Datatage元数据,并计划移动Postgres,只是想知道是否可以在Postgres中安装Datastage元数据

回答 1 投票 0

SSIS Web API连接

我正在执行ETL流程,我需要通过SSIS提取Web api(Konviva),我仅由RestSharp(C#)尝试过。 RestSharp,但在安装他时出现错误:无法安装软件包'RestSharp ...

回答 1 投票 0

WHERE子句用于不同的列名

下面的脚本反映了我更新的,经过编辑的尝试(遵循以下建议),以操作数据库中表中的行填充维表,条件是提供来自...的主键。]

回答 1 投票 0

从Pentaho中其他列对应的列中获取值的最佳方法

我有带有此列的表:id |名称| idx | value_1 | value_2 | value_3 | ... 1 |红色| 2 |空| 10 | null 2 |绿色| 1 | 25 |空| null 3 |粉色| 3 | null ...

回答 1 投票 0

读取较大的Excel文件时收到“存储空间不足”错误

虽然我正在将数据从excel导入到SQL,但收到以下错误。内存最大。 excel的格式为.xlsx。 Excel的大小为170 MB(178,587,611字节)。但是我得到了:不是...

回答 2 投票 0

SSIS无法访问每个人都可以访问的文件夹

因此我们有一个网络地址,可以将其称为每个人都可以访问的Z驱动器。每个人都是整个组织。为了完整起见,我实际上继续并允许访问实际的SQL ...

回答 1 投票 1

在SQL where子句中使用通配符作为列名

我已经在Jupyter Notebooks中使用Python / SQL函数创建了一条插入语句。我有一些表的PK列名称为“ id”,还有一个表的PK列名为“ order_id”。但是,我想使用...

回答 1 投票 0

自动化:将数据从本地CSV推送到Kusto数据库表

我有从网页下载的不同数据,并另存为.csv文件在我的本地目录中。我想将这些数据推送到我在Kusto Explorer上创建的表中,理想情况下,我希望这样做...

回答 1 投票 0

PostgreSQL事务ID(xmin)是否按顺序出现在提交的版本中?

由于PostgreSQL docs https://postgrespro.com/docs/postgrespro/9.6/ddl-system-columns xmin此行版本的插入事务的标识(事务ID)。 (行版本是一个...

回答 1 投票 0

在写入Redshift DW之前如何从S3存储桶转换数据?

我正在redshift中创建一个(现代)数据仓库。我们所有的基础架构都托管在Amazon中。到目前为止,我已经设置了DMS以从我们业务的某些表中提取数据(包括更改的数据)...

回答 2 投票 1

If-then语句删除记录的整个行

我正在运行此代码,该代码将检查字符串是否以某个特定值310开始,然后我要删除整行,以使其不显示具有字符串的任何行...

回答 1 投票 -2

为什么派生列组件的表达式在SSIS中不能与空值一起使用?

有人可以请我告诫吗?我在MSSQL中创建表t_test_date(tcol_date日期,tcol_varchar varchar(20),tcol_date1日期),当我尝试使用...

回答 1 投票 2

如何将以下查询用作sis中的条件拆分表达式

如何在条件拆分中使用以下查询,nxdt是日期列;它的值如11/30/0002 00:00:00.000000。因此,在下面的查询中使用了该过滤条件,因此需要在我的程序包中使用... ...>

回答 1 投票 1

© www.soinside.com 2019 - 2024. All rights reserved.