Flink从入门到精通100篇(十一)-Java SPI 机制在 Flink SQL 中的应用
Java SPI 機制簡介
Java SPI機制,即Java Service Provider Interface,是Java提供的基于“接口編程 + 策略模式 + 配置文件”組合實現(xiàn)的動態(tài)加載機制。調(diào)用者可以根據(jù)實際使用需要,來啟用、擴展或者替換框架的現(xiàn)有實現(xiàn)策略。在Java中,基于該SPI思想,提供了具體的實現(xiàn),ServiceLoader,利用該類可以輕松實現(xiàn)面向服務的注冊與發(fā)現(xiàn),完成服務提供與使用的解耦。
Java SPI機制常見的例子,如:
-
數(shù)據(jù)庫驅(qū)動接口實現(xiàn)類的加載:JDBC可以根據(jù)實際使用加載不同類型數(shù)據(jù)庫的驅(qū)動,如OracleDriver、SQLServerDriver、Driver(MySql)。
-
slf4j日志門面接口實現(xiàn)類的加載:slf4j日志門面并不是日志框架,需要使用Java SPI機制加載符合條件的日志框架接口實現(xiàn)類來完成日志框架的綁定,如Log4j、Logback等。
Java SPI機制在Flink中的應用
在Flink SQL程序中用到了Java SPI機制動態(tài)加載各種Factory的實現(xiàn)類。比如說,對于TableFactory接口,F(xiàn)link程序會從程序所使用到的依賴中找到META-INF/services/org.apache.flink.table.factories.TableFactory,并通過反射實例化TableFactory接口的實現(xiàn),并通過TableFactoryService#filter()方法篩選出符合條件的TableFactory實現(xiàn)類。以Flink SQL程序從Kafka(版本0.11)讀取數(shù)據(jù)為例,F(xiàn)link SQL程序會首先獲得TableFactory所有可用的實現(xiàn)類,通過Tabl
總結(jié)
以上是生活随笔為你收集整理的Flink从入门到精通100篇(十一)-Java SPI 机制在 Flink SQL 中的应用的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 最全 Prometheus 踩坑集锦
- 下一篇: 2020年阿里大数据一面面经,看看你还有