apache-nifi 相关问题

Apache NiFi是一个易于使用,功能强大且可靠的分布式系统,用于转换和分发数据。

ListFile处理器,强制处理器每次都列出完整目录

我的用例。某些处理的某些处理将文件添加到某个目录(_use_it) - >使用REST调用我的流 - >现在我希望我的进程从所提到的目录(_use_it)中读取所有文件。我想要 ...

回答 1 投票 1

处理NIFI错误的最佳实践

我正在使用NIFI,我有数据流,我使用以下过程:ExecuteScript RouteOnAttribute FetchMapDistribuedCache InvokeHTTPRequest EvaluateJSONPath和两级进程组如...

回答 1 投票 1

从FetchHDFS处理器获取文件总数

是一种从单次运行FetchHDFS处理器获取文件总数的方法?我的用例是==>从目录(hdfs)读取所有文件,连接它们然后进行进一步处理。但要停止......

回答 1 投票 0

Apache NiFi在群集中分发Map Cache问题

我将在单个节点NiFi上工作的流移动到3节点NiFi集群,突然间使用DistributedMapCache的等待处理器无法按预期工作,这意味着它不是......

回答 1 投票 1

Nifi:在自定义处理器中读取外部属性

我已经更新了变量注册表以指向自定义属性文件,并且我能够使用表达式语言读取我的处理器中的那些并且没有任何问题。我怎么想在...中阅读它们

回答 1 投票 1

从SplitRecord处理器Nifi运行记录计数

有没有办法从SplitRecord处理器Nifi获取片段索引?我将一个非常大的xls(4毫米记录)分成“每分裂记录数”= 100000.现在我想处理前两个分裂,到......

回答 1 投票 1

可以在单个Apache NiFi实例上配置的数据库连接控制器服务数量的限制是多少?

我正在使用DBCPConnectionPoolLookup控制器服务,该服务可能包含大量数据库(100的订单) - 使用DBCPConnectionPool控制器服务进行配置。所有这些......

回答 1 投票 1

mergecontent处理器没有给出预期的结果

我在多个小文件中有json数据(有时在文件中只有一行或空文件)。我想将所有小文件合并到单个大文件中。我正在意外地收到一个大文件......

回答 1 投票 0

Nifi摇晃规格压扁阵列

我有json输入数组:{“id”:3,“name”:“ROOT”,“mylist”:[{“id”:10,“info”:“hello”},{“id”:11, “信息”:“世界”} ...

回答 1 投票 0

使用NiFi的动态模式的CSV到json

我从第三方获取CSV文件。这个文件的模式是动态的,我唯一可以肯定的是,每个包含数据的列也都有标题名称。文件将始终有一个标题。 ...

回答 1 投票 1

NIFI将大型CSV插入SQL数据库

我正在尝试将大量的大型CSV文件插入到数据库中。我正在使用PutDataBaseRecord处理器,这使得这个过程非常快速和简单。问题是我不......

回答 1 投票 0

将NiFi连接到ElasticSearch

我正在尝试解决一项任务,并会感谢任何帮助 - 文档链接,论坛链接或其他常见问题解答,除了https://cwiki.apache.org/confluence/display/NIFI/FAQs,或任何有意义的.. 。

回答 1 投票 5

在NiFi中将两个JSON流文件合并在一起

我想通过相同的指定属性合并包含JSON对象的两个流文件... flow1:attribute:xuuid = 123456内容:{“sname”:“jack”,“id”:“00001”,“state”:“NY” } flow2:属性:...

回答 2 投票 1

从JSON重命名无效密钥

我在NIFI中有以下流程,JSON中有(1000+)个对象。 invokeHTTP-> SPLIT JSON-> putMongo Flow工作正常,直到我在json中收到一些带有“。”的键。在名字里。例如“火花....

回答 1 投票 2

Nifi通过Rest-API创建控制器服务

我正在尝试从nifi rest api创建一个DbcpController服务。我也得到了正确的响应但是当我转到UI时,控制器服务不可见。 curl -i -X POST -H'内容类型:...

回答 1 投票 1

在nifi中没有jmx指标进程

我想提取kafka指标,发现这可以通过JMX使用jconsole来完成。但我需要为此创建一种程序化的方式,并认为nifi将是一个伟大的......

回答 1 投票 0

apache-nifi:如何将时区传递给crontab字符串

NIFI能够使用类似策略的crontab来安排任务。在某些处理器的调度选项卡中,您可以选择“CRON驱动”。这个CRON使用Quartz Scheduler模块,我发现如何设置...

回答 1 投票 2

流媒体与德鲁伊,卡夫卡,Superset

我正在使用Kafka,Druid和SuperSet测试数据流。我正处于德鲁伊的一些数据(见1. picutre)。之后,我可以通过...在Superset中生成德鲁伊数据源。

回答 2 投票 0

适用于nifi处理器的JOLT规范

我有以下JSON输入{“events”:[{“cluster_id”:“0717-035521-puny598”,“timestamp”:1535540053785,“type”:“TERMINATING”,“details”:{“reason”:{.. 。

回答 1 投票 0

NiFi:获取特定运行中涉及的所有处理器名称

我有一个30个处理器的nifi模板。模板中有多个条件分支。现在,我想在模板的末尾添加一些东西,以便我可以获得所有的列表......

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.