数据仓库介绍与实时数仓案例
1.数据仓库简介
数据仓库是一个面向主题的（Subject Oriented）、集成的（Integrate）、相对稳定的（Non-Volatile）、反映历史变化（Time Variant）的数据集合，用于支持管理决策。
java logstash 如何保证数据不丢失
用过ruby 版本 的logstash 大家都知道，在input 数据消费进来之后，output数据要是失败了，就会扔掉，这个对数据要求较高的应用中是很难接受的。
举一个列，input kafka，output elasticsearch，在消费kafka数据到内存队
Redis Stream简介
## 背景
Redis Stream是一个作者已经谋划多年的feature，本质是一个消息队列，但是和kafka、RocketMq等消息中间件相比也有其独特之处。Redis Stream本来是计划放在4.0这个大版本中发布（原计划4.2）,但是由于确实是个比较重磅的feature，对内核的改动也比较大，目前已经提升到Redis 5.0发布，根据作者Twitter的消息，不出意外，18年上半年
IM系统的MQ消息中间件选型：Kafka还是RabbitMQ？
1、前言
在IM这种讲究高并发、高消息吞吐的互联网场景下，MQ消息中间件是个很重要的基础设施，它在IM系统的服务端架构中担当消息中转、消息削峰、消息交换异步化等等角色，当然MQ消息中间件的作用远不止于此，它的价值不仅仅存在于技术上，更重要的是改变了以往同步处理消息的思路（比如进行IM消息历史存储时，传统的信息系统作法可能是收到一条消息就马上同步存入数据库，这种作法在小并发量的情况下可以很好的工作，但互联网大并发环境下就是灾难）。