如何正确使用Flink Connector?( 七 )
4.Async I/O
流计算中经常需要与外部存储系统交互 , 比如需要关联 MySQL 中的某个表 。 一般来说 , 如果用同步 I/O 的方式 , 会造成系统中出现大的等待时间 , 影响吞吐和延迟 。 为了解决这个问题 , 异步 I/O 可以并发处理多个请求 , 提高吞吐 , 减少延迟 。
Tips:Async 的原理可参考官方文档
Flink Kafka Connector
本章重点介绍生产环境中最常用到的 Flink kafka connector 。 使用 Flink 的同学 , 一定会很熟悉 kafka , 它是一个分布式的、分区的、多副本的、 支持高吞吐的、发布订阅消息系统 。 生产环境环境中也经常会跟 kafka 进行一些数据的交换 , 比如利用 kafka consumer 读取数据 , 然后进行一系列的处理之后 , 再将结果写出到 kafka 中 。 这里会主要分两个部分进行介绍 , 一是 Flink kafka Consumer , 一个是 Flink kafka Producer 。
首先看一个例子来串联下 Flink kafka connector 。 代码逻辑里主要是从 kafka 里读数据 , 然后做简单的处理 , 再写回到 kafka 中 。
推荐阅读
- 小鱼人|如何在新赛季稳定上分?善于抓失误的小鱼人,值得认真练上一波
- 阴阳师|阴阳师SR川猿强度如何 是否值得抽卡 改变斗技环境 大佬的新玩具
- 手机游戏|梦幻西游手游:活力如何换金币 一切都已给出 就看你的选择
- 华佗|三国杀:两位\奶爸\,朱治与华佗比,强度如何呢?
- 亲朋上分|《亲朋上分》266391亲朋下分亲朋上下分永劫无间崔三娘技能介绍 崔三娘如何获得更多技能
- 金铲铲之战|金铲铲之战新赛季最强阵容:学院名流永恩,低分段玩家谨慎使用
- 激战2|MMORPG集体放大招?魔兽、FF14、激战2均使用End迎来主线剧情终章!
- s6|金铲铲之战:S6双城传说如何才能快速上手?基础知识很关键
- |冰雪传奇:平民玩家四转后如何打金
- 穿越火线|CF:传说武器再度上新,那王者、炫金该如何发展?