在 Flink 流中使用可更新数据丰富数据流

问题描述 投票:0回答:1

我正在编写一个 Flink 流程序,我需要用一些每 24 小时更新一次的数据(~10GB)来丰富 DataStream

如果是静态数据,我可以在流管道启动之前将其加载为键值状态,但如何每 24 小时更新一次?或者也许以某种方式在后台更新它?

apache-flink flink-streaming
1个回答
0
投票

创建一个自定义源(扩展 sourceFunction),每 24 小时提取一次数据

© www.soinside.com 2019 - 2024. All rights reserved.