如何正确使用Flink Connector?( 六 )
详细也可以参考 Flink 源码中提供的一些相对应的 Examples 来查看异常预定义 source 和 sink 的使用方法 , 例如 WordCount、SocketWindowWordCount 。
2.Bundled Connectors
Flink 里已经提供了一些绑定的 Connector , 例如 kafka source 和 sink , Es sink等 。 读写 kafka、es、rabbitMQ 时可以直接使用相应 connector 的 api 即可 。 第二部分会详细介绍生产环境中最常用的 kafka connector 。
虽然该部分是 Flink 项目源代码里的一部分 , 但是真正意义上不算作 Flink 引擎相关逻辑 , 并且该部分没有打包在二进制的发布包里面 。 所以在提交 Job 时候需要注意 , job 代码 jar 包中一定要将相应的 connetor 相关类打包进去 , 否则在提交作业时就会失败 , 提示找不到相应的类 , 或初始化某些类异常 。
3.Apache Bahir 中的连接器
Apache Bahir 最初是从 Apache Spark 中独立出来项目提供 , 以提供不限于 Spark 相关的扩展/插件、连接器和其他可插入组件的实现 。 通过提供多样化的流连接器(streaming connectors)和 SQL 数据源扩展分析平台的覆盖面 。 如有需要写到 flume、redis 的需求的话 , 可以使用该项目提供的 connector 。
推荐阅读
- 小鱼人|如何在新赛季稳定上分?善于抓失误的小鱼人,值得认真练上一波
- 阴阳师|阴阳师SR川猿强度如何 是否值得抽卡 改变斗技环境 大佬的新玩具
- 手机游戏|梦幻西游手游:活力如何换金币 一切都已给出 就看你的选择
- 华佗|三国杀:两位\奶爸\,朱治与华佗比,强度如何呢?
- 亲朋上分|《亲朋上分》266391亲朋下分亲朋上下分永劫无间崔三娘技能介绍 崔三娘如何获得更多技能
- 金铲铲之战|金铲铲之战新赛季最强阵容:学院名流永恩,低分段玩家谨慎使用
- 激战2|MMORPG集体放大招?魔兽、FF14、激战2均使用End迎来主线剧情终章!
- s6|金铲铲之战:S6双城传说如何才能快速上手?基础知识很关键
- |冰雪传奇:平民玩家四转后如何打金
- 穿越火线|CF:传说武器再度上新,那王者、炫金该如何发展?