azure-data-factory 相关问题

Microsoft Azure Data Factory是一种云服务,用于使用时间片的概念以受控方式调用(编排)其他Azure服务。数据工厂主要使用手工制作的JSON开发,这为工具提供了执行哪些活动的说明。虽然仍处于预览阶段,但Azure Data Factory V2的引入可以使用api而不仅仅是JSON文件提供更轻松的数据集成体验。

使用Azure Data Factory删除远程文件

如何删除源文件夹(位于本地文件系统中)中的所有文件。我需要帮助.NET自定义活动或Azure数据工厂中的任何开箱即用的解决方案。 PS:我确实发现......

回答 2 投票 2

使用Azure Data Factory捕获元数据并存储在SQL数据库中?

我所追求的元数据类型包括文件大小,行数,文件名,文件是否已被处理等等,我想捕获从源到目标的数据流,包括...

回答 1 投票 0

是否可以将启用ssh的MySql数据库连接到azure数据工厂?

使用虚拟机获取支持ssh的MySql数据库(内部部署数据)并尝试使用Data Factory在云上进行复制。是否可以将启用ssh的MySql数据库连接到Azure数据工厂?...

回答 1 投票 0

如何使用azure SDK for .net在Azure Data Factory Web活动中设置标头

我只是想知道如何将标题添加到azure数据工厂Web活动中。我尝试了下面的代码:new WebActivity(){Name =“Authenticating”,...

回答 1 投票 0

我必须使用数据工厂进行增量加载

我正在增加数据量,其中我没有数据时间戳,我该怎么做。

回答 1 投票 -1

通过Azure数据工厂复制活动在cosmos DB中保存的数据中添加其他列

我正在使用azure数据工厂的复制活动将数据从blob中的csv文件复制到CosmosDB(使用SQL API)。在Sink的链接服务中如果我不导入任何模式,我的执行复制活动......

回答 1 投票 2

将数据从单个电子表格复制到Azure Data Factory中的多个表中

Azure数据工厂中的“复制数据”活动似乎仅限于复制到单个目标表。我有一个电子表格,其中包含应扩展到多个表的行...

回答 1 投票 0

具有复制活动的其他列的动态内容

我正在尝试创建一个简单的复制活动,将数据从源Azure表复制到接收器Mongo Cosmos DB,但是还希望输出一个额外的列到接收器数据,其中...

回答 1 投票 0

如何基于SQL Server值驱动Azure数据工厂

我在Azure数据工厂中有一个管道设置,它有一个名为MonthsBack的管道变量设置,假设默认为12。在Until循环中,我构建一个使用此MonthsBack的SQL语句...

回答 1 投票 0

将SSIS dtsx迁移到数据工厂管道

我是数据工厂的新手。 Data Factory v2刚刚发布了类似于SSIS工作的新控制流和数据流。有没有办法将现有的SSIS dtsx文件迁移到数据工厂......

回答 1 投票 3

如何在发布后将Azure数据工厂参数放入ARM模板参数文件(ARMTemplateParametersForFactory.json)

我正在尝试为Azure Data Factory创建Azure DevOps版本管道。我遵循了微软相当神秘的指南(https://docs.microsoft.com/en-us/azure/data-factory/continuous-...

回答 4 投票 0

在文件名中使用通配符(*)时,无法从Azure数据工厂中的SFTP复制文件

在文件名中使用通配符(*)时,我无法将csv文件从SFTP连接复制到blob存储。更具体地说,我每天都会在SFTP中收到csv文件,它们属于......

回答 2 投票 0

将DocumentDB集合移动到Azure Data Lake存储

我想知道将documentDB移动到Azure Data Lake Storage的最佳做法是什么。我应该为集合中的每个文档创建一个文件还是移动整个documentDB?我也没找到......

回答 2 投票 11

Azure:从MySQL数据库创建O365事件

我想创建MySQL表(内部服务器)中的Office 365日历事件。目前,我计划使用Azure数据工厂和功能应用程序。我从......复制MySQL数据

回答 1 投票 2

使用Azure Data Factory将HTTP端点中的数据加载到Azure Data Lake中

我正在尝试使用Azure服务构建一个所谓的“现代数据仓库”。第一步是将其本机原始格式的所有数据收集到Azure Data Lake存储中。对于某些数据源......

回答 1 投票 0

从azure数据工厂执行python脚本

有人可以帮助我从azure数据工厂执行python函数。我已经在blob中存储了python函数,我试图触发它。但是我无法做到。请协助。 ...

回答 1 投票 1

Azure SQL数据库:使用“复制活动”将表从一个Azure SQL数据库传输/迁移到另一个Azure SQL数据库

我正在尝试将表从数据库A迁移到同一Azure SQL Server中的数据库B.我使用Azure Data Factory成功地将数据从Azure blob存储迁移到Azure数据库,但我不......

回答 2 投票 0

在ForEach活动Azure Data Factory中迭代Activity

我有一个MetaData活动和一个连接到它的foreach活动。我按顺序运行这个ForEach活动,这里是它迭代的项目:我在这个foreach活动中有一个复制活动:...

回答 1 投票 1

Azure数据工厂复制活动无法将字符串(从csv)映射到Azure SQL表sink uniqueidentifier字段

我有一个Azure数据工厂(DF)管道,它包含一个Copy活动。 Copy活动使用HTTP连接器作为源来调用REST端点并返回使用Azure SQL汇总的csv流...

回答 1 投票 1

将值从父管道传递到Azure数据工厂中的子管道

我很确定这很简单,但我似乎无法在任何地方找到它。我在数据工厂的父管道中创建了一个参数(比如管道名称是TestParent):这个父管道调用...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.