Flink技术灵活使用总结(一)状态与状态后端

本文详细介绍了Flink中的状态管理,包括Operator State和Keyed State及其不同类型,如ValueState、ListState和MapState,并通过实例展示了它们的应用。同时,探讨了Flink的状态后端,如MemoryStateBackend、FSStateBackend和RocksDBStateBackend的特性和适用场景,为读者提供了理论与实践相结合的理解。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

目录

前言

1.状态state

1.1知识引入

1.2State类型 

1.2.1Operator State

1.2.2Keyed State

1.2.3ValueState 

1.2.4ListState

1.2.5MapState 

1.3KeyedState 案例演示

1.4Operator State案例演示

2 State backend

2.2MemoryStateBackend

2.3FSStateBackend 

2.4RocksDBStateBackend 

2.5StateBackend配置方式 


前言

掌握任何一项技术只知道概念,无法在实际中灵活应用是远远不够的不能"以管窥天,以蠡测海"。但是只懂运用不懂原理就会"学而不思则罔",下面着力于实践联系理论的角度对flink进行新视觉的理解。

1.状态state

1.1知识引入

回顾单词计数的例子 

/**
* 单词计数 
*/
public class WordCount {
   public static void main(String[] args) throws Exception { 
       StreamExecutionEnvironment env =
StreamExecutionEnvironment.getExecutionEnvironment();
       DataStreamSource<String> data = env.socketTextStream("localhost", 8888); 
       SingleOutputStreamOperator<Tuple2<String, Integer>> result =
data.flatMap(new FlatMapFunc
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

数据与算法架构提升之路

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值