Flink中keyed state 不keyby()的流, 怎么存储状态呢?-[阿里云_云淘科技]

Flink中keyed state can only be used on a ‘keyed stream’
不keyby()的流, 怎么存储状态呢?

以下为热心网友提供的参考意见

在Flink中,keyed state只能用于keyed stream。如果您的流没有使用keyby()进行分区,您可以考虑以下方法来存储状态:

  1. 使用全局变量或静态变量:您可以在程序的主类中定义一个全局变量或静态变量,用于存储状态。这样,即使流没有使用keyby()进行分区,您仍然可以在程序的其他部分访问和修改这个变量。但是,这种方法的缺点是全局变量或静态变量可能会受到其他线程的影响,导致数据不一致。

  2. 使用外部存储系统:您可以将状态存储在外部存储系统中,例如HDFS、HBase等。这样,即使流没有使用keyby()进行分区,您仍然可以通过外部存储系统访问和修改状态。但是,这种方法的缺点是需要额外的存储和管理成本。

  3. 使用RocksDB或其他嵌入式键值存储系统:您可以使用RocksDB或其他嵌入式键值存储系统来存储状态。这样,即使流没有使用keyby()进行分区,您仍然可以通过键值存储系统访问和修改状态。但是,这种方法的缺点是需要额外的依赖和配置成本。

本文来自投稿,不代表新手站长_郑州云淘科技有限公司立场,如若转载,请注明出处:https://www.cnzhanzhang.com/22099.html

(0)
匿名
上一篇 2024年1月9日 下午12:26
下一篇 2024年1月9日 下午12:29

相关推荐

新手站长从“心”出发,感谢16年您始终不离不弃。