码迷,mamicode.com
首页 > 其他好文 > 详细

理解Flink State

时间:2020-05-26 12:38:24      阅读:87      评论:0      收藏:0      [点我收藏+]

标签:保存   opera   fun   rocksdb   数据流   ons   维护   支持   put   

在Flink的官网写着:Stateful Computations over Data Streams。
基于状态计算的数据流。

在流式计算中,希望做一些聚合分析等。那么就需要保存当前日志的状态,以备与后来的日志做比较。

在Flink中每个操作都会有状态的保存无论是source、sink还是operator。

按照使用使用keyby可将State分为Keyed State 和 Operator State。他们的区别主要在于Keyed State有key而Operator State没有key。

而按照State的操作是否为运行时的可分为:Raw State和Managed State。Raw State是用户自定义的使用State,虽然不太建议。用户可以在RichFunction中使用。

Flink支持不少State的保存方式:memory、fs、rocksdb。

State可以用于状态保存还可以用于容错、checkpoint等。总之功能很强大。

但是,感觉State都是Flink在维护不需要用户定义使用。

理解Flink State

标签:保存   opera   fun   rocksdb   数据流   ons   维护   支持   put   

原文地址:https://www.cnblogs.com/hnrainll/p/12964511.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!