抱泽_个人页

Kubernetes 文件采集实践：Sidecar + hostPath 卷

本文通过一个简单的示例应用（Dockerfile）以及相应的部署配置（YAML），介绍了如何结合 Sidecar + hostPath 来实现 Kubernetes 文件的采集并保证数据在极端情况（Pod 崩溃、Node 宕机）下的安全性。

日志服务（SLS）初体验：采集、加工、查询分析及可视化

日志服务（SLS）是阿里集团自研的一站式日志平台，它包含数据实时采集、数据加工、智能查询分析以及数据分发四大基础功能，用户无需开发就能能够开箱即用地使用它来提升运维、运营效率，建立 DT 时代海量日志处理能力。 为了让大家对日志服务有更直观的感受，本文将带着大家体验一下这些基础功能，以最常见的 Linux Syslog 作为对象，看看如何简单快速地实现对它的采集、加工、查询分析以及可视化。

FAST20 论文学习：Buffer-Controlled Writes to HDDs for SSD-HDD Hybrid Storage Server

批量开启 SLS 服务日志

背景 SLS 服务日志支持记录 Project 内的用户操作日志等多种日志数据，并提供多种分析维度的仪表盘。在开通此功能后，相关的日志都会被存储到指定位置（project）下的两个特殊 logstore：internal-operation_log 以及 internal-diagnostic_log，我们可以像操作普通 logstore 一样，对它们进行查询、分析、消费以及构建仪表盘等。

Logtail 新功能：采集路径黑名单

背景 在某些场景下，我们需要采集的日志会分散在多个目录，为了在一个采集配置中同时采集它们，我们往往需要把采集配置中的目录指定为这些目录的共同父目录，这在实际使用用可能会产生一些问题。以如下的目录结构为例，我们希望在一个采集配置内指定采集 dira/b/c 目录下的 *.log，就必须将采集目录指定为父目录 admin。

Logtail 心跳监控最佳实践

作为采集 agent，logtail 所采集的日志可能会就被用于对应用程序进行监控/告警，所以保证它自身处于正常状态对整个系统的稳定显得尤为重要。在之前的[《全方位 Logtail 状态监控》](https://yq.aliyun.com/articles/691336)中，我们曾介绍了关于监控 Logtail 各类状态的方法，包括基本的链路状态、资源使用情况等。

Logtail新增支持自定义数据处理

Linux C++ 应用二进制兼容实践

本文将介绍一些在开发多 Linux 平台 C++ 应用时可能遇到的兼容性问题和相关的解法。虽然是以 C++ 为讲述对象，但兼容性这个问题，在没有 VM 帮你做这些脏活累活的情况下，是所有 C-like 语言（比如 Go、Rust 等）都可能遇到的。

Logtail 混合模式：使用插件处理文件日志

作为一个服务百万机器的日志采集 agent，Logtail 目前已经提供了包括日志切分、日志解析（完整正则、JSON、分隔符）、日志过滤在内的常见处理功能，能够应对绝大多数场景的处理需求。但有些时候，由于应用的历史原因或是本身业务日志的复杂性，单一功能可能无法满足所采集日志的处理需求，比如： 日志可能不再是单一格式，有可能同时由 JSON 或者分隔符日志组成。

Kubernetes 日志查询分析实践

本文将介绍如何基于日志服务实现对 Kubernetes（以下简称 K8s）日志的采集以及查询分析，此外，还附带了对 Ingress、Audit 方案的简要介绍。为了方便大家通过操作来加深理解，本文提供了详细的操作步骤以及对应截图和配置代码。

全方位 Logtail 状态监控

作为日志服务的采集 agent，Logtail 目前已运行于上百万的机器，为万级别的应用提供服务，每天采集的数据已达到 PB 级别，这些实战的打磨使得 Logtail 在稳定性和性能上都已非常出色，在机器、网络等环境不变的情况下，配置完成后基本不再需要进行任何运维。

如何实现 Logtail 的状态监控与异常告警

作为日志服务的采集 agent，Logtail 一般位于业务数据链路的前段，为链路中的后续部分输送数据，因此，它的正常运行显得至关重要。经过多年的实战打磨，Logtail 在稳定性和性能上都已经比较出色，在机器、网络等环境不变的情况下，配置完成后基本不再需要进行任何运维。

Logtail 文件日志采集之完整正则模式

为了简化文件日志的采集过程，Logtail 提供了按行采集的极简模式：通过换行符来切分日志，每行作为一条日志。极简模式具有高效、配置简单等优势，但它将整条日志的内容作为整体，而不会对单条日志的内容进行额外解析，在有些场景下无法满足需求。

对接生态：Logstash 接入日志服务

作为日志服务的采集 Agent，Logtail 目前已运行在 100W+ 机器上，为万级别应用提供服务，但在输入源以及日志处理方式上仍有不足。为了弥补这些不足并更好地贴近于开源生态，我们为 Logtail 引入了插件系统，现已支持包括 HTTP、MySQL Query、MySQL Binlog 等输入源。