基于Flinkcep-1.11.2 动态规则修改实践

1,事先说明

这个代码搞出来说白了就是在大佬的代码参考下完成的,之前就一直想搞 cep规则动态修改,苦于对cep的源码不熟悉,没法下手。

之前有个大佬搞过 基于flink-cep 1.8版本的动态规则修改。

后来有个大佬搞过基于flink-cep 1.1.0的。

https://mp.weixin.qq.com/s/mh--wQvAWQq2tDPKq0-m8Q 

我看代码的逻辑是后者更复杂,前者更好理解,后者需要修改的地方太多,后来我仔细思考之后发现,还是前者效果更好一些。

因为可以结合配置流,或者数据里面获取新的规则,实现规则的自动更新,后者可能需要定时获取规则比对是否发现修改。

配置流这个目前还没有跟这个代码逻辑整合,不过之前已经做过,很简单的。

2,先整cep,整合源码

   这里只讲几个主要的地方跟步骤,毕竟我也只是知道个大概步骤:

  1) 在github下载源码到idea,只需要下载cep的源码就可以 。

        https://github.com/apache/flink/tree/master/flink-libraries/flink-cep

  2)在本地编译下载依赖之后,我们可以写test类测试,可能1.10之后的版本在这里会运行失败,没关系,放上依赖(就是flink-client依赖):

 


   org.apache.flink
   flink-connector-kafka_2.11
   ${flink.version}



   com.googlecode.aviator
   aviator
   5.2.1



   org.codehaus.groovy
   groovy-all
   ${groovy.version}


      

   org.apache.flink
   flink-clients_2.11
   ${project.version}
   provided




          org.apache.flink
          flink-core
          ${project.version}
          provided
      

      
          org.apache.flink
          flink-streaming-java_${scala.version}
          ${project.version}
          provided
      


   org.apache.flink
   flink-shaded-guava


      


   org.apache.flink
   flink-core
   ${project.version}
   test-jar
   test


      
          org.apache.flink
          flink-test-utils_${scala.version}
          ${project.version}
          test
      

      
          org.apache.flink
          flink-streaming-java_${scala.version}
          ${project.version}
          test-jar
          test
      

     
          org.apache.flink
          flink-runtime_${scala.version}
          ${project.version}
          test-jar
          test
      


      
          org.apache.flink
          flink-statebackend-rocksdb_${scala.version}
          ${project.version}
          test
      


   com.alibaba
   fastjson
   1.2.47


   com.google.code.gson
   gson
   2.8.6

你可能感兴趣的:(基于Flinkcep-1.11.2 动态规则修改实践)