Microsoft Azure Data Factory是一种云服务,用于使用时间片的概念以受控方式调用(编排)其他Azure服务。数据工厂主要使用手工制作的JSON开发,这为工具提供了执行哪些活动的说明。虽然仍处于预览阶段,但Azure Data Factory V2的引入可以使用api而不仅仅是JSON文件提供更轻松的数据集成体验。
我想设置一个Azure数据工厂管道,它执行移动(即复制,验证,删除)操作,而不仅仅是Blob存储和Data Lake Store之间的复制操作。我不能 ...
我有一个复制Activity,它将数据从Blob复制到Azure Data Lake。 Blob由具有事件中心触发器的Azure功能填充。 Blob文件附加了UNIX时间戳,这是...
有人可以帮助我使用azure数据工厂实现与数据库的动态连接吗?
我目前正在研究PostgreSql,并努力将增量数据从PostgresDb移动到Blob,请帮助我解决方案,以前尝试过复制工具模板但没有用。我想要 ...
我刚开始学习数据工厂,我有一个非常简单的管道,它将Azure Blob存储中的CSV文件加载到Azure SQL数据仓库中。源CSV文件第3列包括......
ARM模板 - 改进 - customSetupScriptProperties
在由ADF生成的用于从Azure DevOps部署的ARM模板中,是否可以添加参数...
如何使用SSIS C#脚本组件将程序集文件加载到Azure Data Factory集成的运行时?
我有一个SSIS包,其中包含一个脚本组件,可以从Dynamics 365中提取数据。该包从Visual Studio以及我将其部署到的本地SQL服务器中执行得很好...
我正在使用一个场景,我有一个azure文件存储帐户,其中我有不同的文件夹,每个文件夹包含* .csv文件。我想在不同的Azure SQL数据库中加载每个* .csv文件...
如何使用Azure Data Factory V2中的HTTP或REST连接器创建动态API端点连接
我有一个基于REST的外部API,我需要创建一个连接,以便定期检索数据(用于BI)。这个API相当强大,支持大约60 ...
如何将Tumbling Window参数传递给Data Factory UI中的Data Factory管道?
我在Azure Data Factory中定义了一个带有Tumbling Window触发器的管道,如下所示:我希望我的活动能够接收Tumbling窗口参数(trigger()。输出....
我试图将数据从Onplace Postgres移动到blob,但数据移动速度非常慢,是否有任何性能调整步骤要遵循?
我想使用Azure Data Factory执行以下操作...读入CSV文件,根据该文件中的地址执行Google Maps Geocode查找,并将结果转储到Azure SQL中。我已经能够......
我在Azure blob存储中有这样的文件:entity | - part001.parquet | - part002.parquet | - part003.parquet | - part004.parquet ...这个镶木地板数据有一个日期列,让我们给它命名......
我有一个ADF管道,应该是ETL工作。我添加了IF CONDITION,它应该评估获得的最后一个结果(复制数据活动)(如果输出为Succeeded,则为true activity ...
我正在使用Azure Data Factory v2,使用具有专用节点的批处理帐户池来进行处理。我发现随着时间的推移批处理活动失败,因为D:/ temp驱动器上没有更多空间......
在我的管道中,我有一个Lookup活动,它将数据输出到Azure Function活动。我想将Azure Function活动的结果保存到SQL数据库。我能做的唯一活动......
在AzureDataFactory管道中创建LinkedSerive时,自托管集成运行时不可用
我想使用ADF管道将数据从我的本地sql db加载到ADLS。为了执行此活动,我需要自托管Integration Runtime.I下载并配置了Integration ...
目前,我正在尝试设置动态密钥库链接服务。不幸的是,无论我尝试什么,我都无法成功测试连接。 {“name”:“AzureKeyVault1”,“properties”:{...
无法使用Azure数据工厂从Dynamics CRM到SQL Server获取选项集字符串。我正在使用Azure数据工厂将数据从Dynamics CRM移动到SQL DB。我使用fetchXML查询来获取...
我无法在任何浏览器中打开Azure数据工厂,它只是在过去1小时内继续加载。我尝试刷新并使用其他浏览器,是否有任何具体原因发生?所有其他......