nothing
java版本的logstash
浅谈大数据平台架构的选型,包含离线计算,实时计算等
基于FlinkSQL实现流与维表的join
1. FlinkX概览 一.FlinkX是一个基于Flink的异构数据源离线同步工具,用于在多种数据源(MySQL、Oracle、SqlServer、Ftp、Hdfs,HBase、Hive、Elasticsearch等)之间进行高效稳定的数据同步。
用过ruby 版本 的logstash 大家都知道,在input 数据消费进来之后,output数据要是失败了,就会扔掉,这个对数据要求较高的应用中是很难接受的。 举一个列,input kafka,output elasticsearch,在消费kafka数据到内存队
jlogstash
写之前,这里先打个广告,java 版本的logstash已经开源,git地址 https://github.com/dtstack。 现在ELK很流行,能快速搭建一套日志采集系统。其实自己一开始就不理解为什么后端日志采集这一层logstash 是用ruby来编写