Azure Data Factory从foreach值获取数据

问题描述 投票:6回答:1

我有一个查找活动,从blob中的容器中获取值。我有一个与查找活动相关的foreach活动

enter image description here

在设置下它具有以下值:

@activity('LookupMessageType').output.value

我还有另一个在这个foreach活动中运行的复制活动。它将数据从cosmos DB复制到Azure Data Lake。 enter image description here

这是源数据集中的查询:

select c.Tag, data.assetTag, data.timestamp, data.jsonVersion, data.messageType, data.speed from c join data in c.data
where (data.speed>  item().speed_Value) AND
(data.timestamp >= '@{formatDateTime(addhours(pipeline().TriggerTime, -1), 'yyyy-MM-ddTHH:mm:ssZ' )}' 
AND data.timestamp < '@{formatDateTime(pipeline().TriggerTime, 'yyyy-MM-ddTHH:mm:ssZ' )}')

我运行此管道时遇到错误:

{
    "errorCode": "2200",
    "message": "Failure happened on 'Source' side. ErrorCode=UserErrorDocumentDBReadError,'Type=Microsoft.DataTransfer.Common.Shared.HybridDeliveryException,Message=DocumentDb operation failed: Message: {\"errors\":[{\"severity\":\"Error\",\"location\":{\"start\":231,\"end\":235},\"code\":\"SC2005\",\"message\":\"'item' is not a recognized built-in function name.\"}]}\r\nActivityId: *redacted*, documentdb-dotnet-sdk/1.21.1 Host/64-bit MicrosoftWindowsNT/6.2.9200.0.,Source=Microsoft.DataTransfer.ClientLibrary.DocumentDb,''Type=Microsoft.Azure.Documents.BadRequestException,Message=Message: {\"errors\":[{\"severity\":\"Error\",\"location\":{\"start\":231,\"end\":235},\"code\":\"SC2005\",\"message\":\"'item' is not a recognized built-in function name.\"}]}\r\nActivityId: redacted, documentdb-dotnet-sdk/1.21.1 Host/64-bit MicrosoftWindowsNT/6.2.9200.0,Source=Microsoft.Azure.Documents.Client,''Type=System.Runtime.InteropServices.COMException,Message=Exception from HRESULT: 0x800A0B00,Source=,'",
    "failureType": "UserError",
    "target": "Copy Data1"
}

它说item不是内置的函数名。我想使用foreach活动中的值来查询源代码。

此外,这是我的动态文件路径内容

@concat('test_', item().speed, '.csv')

如果我在查询中使用静态值,我会使用此表达式获得所需的动态文件结构:data.speed> 500

azure azure-cosmosdb azure-data-factory
1个回答
8
投票

所以,我弄清楚查询有什么问题:而不是

where (data.speed> item().speed_Value)

我不得不使用

where (data.speed> @{item().speed_value})
© www.soinside.com 2019 - 2024. All rights reserved.