# 日志服务 #
0
关注
47531内容
|
模拟使用Flume监听日志变化，并且把增量的日志文件写入到hdfs中
1.采集日志文件时一个很常见的现象
采集需求：比如业务系统使用log4j生成日志，日志内容不断增加，需要把追加到日志文件中的数据实时采集到hdfs中。
1.1.根据需求，首先定义一下3大要素：
采集源，即source—监控日志文件内容更新：exec ‘tail -F file’ 下沉目标，即sink—HDFS文件系统：hdfs sink
Source和sink之
|
Linux 记录所有用户登录和操作的详细日志
1、起因
最近Linux服务器上一些文件呗篡改，想追查已经查不到记录了，所以得想个办法记录下所有用户的操作记录。
一般大家通常会采用history来记录，但是history有个缺陷就是默认是1000行，当然你也可以vim /etc/profile将1000修改成1000000行，但是这只是比较笼统的做法，看不到详细的用户来源已经操作记录，比如来源ip地址、操作时间、操作用户等。
|
支付宝17年新春红包技术体系剖析（含资料下载）
支付宝17年春节红包最大的特点是AR技术应用以及五福红包（敬业福）的回归，截止大年三十晚，支付宝页面显示约有1.68亿人集齐五福，除夕当天参与人数是2.2亿；开奖峰值高达90W/s。支撑如此之高的并发业务和庞大的人群背后的技术体系究竟隐藏着什么奥秘呢？在本文，16、17年红包技术负责人天镜飞将为您讲解红包背后“不为人知”的秘密。
|
性能测试脚本的编写和调试
性能测试是一个入门简单，但是精通难，很依赖实践经验的技术活。如何编写压测脚本只是小术，而如何快速找到问题的原因，压出瓶颈却是大有学问。这次，云享团的专家从“术”入手，对一个自己临时写的的一个网站进行压测，希望能帮大家更好理解性能测试产品，特别是脚本编写的部分。
最佳实践：如何基于MNS实现事务消息
事务消息的背景：
有时候我们需要实现本地操作和消息发送的事务一致性功能。即：消息发送成功，则本地操作成功；反之，如果消息发送失败，本地操作失败（成功也需要rollback）。保证不出现操作成功但消息发送失败；或者操作失败但消息发送成功的情况；
另外，消费端，我们也希望消息一定被成功处理一次，不会
日志服务（原SLS）新功能发布(5)--使用Logstash接入数据
日志服务结合Logstash
目前，阿里云用户可以通过API/SDK或Logtail将数据写入日志服务，参考。
今天要介绍一个新方法：使用著名开源软件Logstash采集机器日志数据，并结合日志服务插件完成数据上传日志服务功能。
DTCC 2019 | 深度解码阿里数据库实现 数据库内核——基于HLC的分布式事务实现深度剖析
摘要：分布式事务是分布式数据库最难攻克的技术之一，分布式事务为分布式数据库提供一致性数据访问的支持，保证全局读写原子性和隔离性，提供一体化分布式数据库的用户体验。本文主要分享分布式数据库中的时钟解决方案及分布式事务管理技术方案。
免费试用