技术博文

本文档主要介绍如何在挂载文件存储HDFS版的 Hadoop 集群上安装及使用 Spark。

阿里云日志服务（SLS）提供了Log，Metric，Trace等三种数据快速接入的能力，同时也提供了丰富的分析功能和可定制化的Dashboard的能力，客户可以利用SLS快速的搭建可观测性平台，让用户更加关注于分析，降低用户接入各类数据的门槛。本文主要讲述应用接入SLS Trace服务后，针对各种场景化如何配置告警。

日志服务（Log Service，简称 SLS） 是阿里云提供的行业领先的日志大数据解决方案，一站式提供数据收集、清洗、分析、可视化、告警等功能。智能查询分析是数据中台重要的一环，SLS支持秒级查询10亿到千亿级别的日志数据，为万级开发者提供每日百亿级的查询服务。SLS查询语句是日志服务的专有语法，为了帮助用户简单、快速地构建查询语句，降低用户的学习成本，SLS推出了查询辅助输入（Query Builder）功能，让用户无需关注语法细节也可完成查询。

阿里云文件存储CPFS现已支持“数据流动”特性。该功能适用于2021年9月29日以后建立的CPFS文件系统。当文件系统启用该特性后，“数据流动”功能可以实现将对象存储OSS的bucket中的数据合并入CPFS进行统一命名空间的元数据管理。用户可以手动或者通过自动Lazy-load能力，将OSS中的数据复制到CPFS中，实现通过POSIX文件接口高速访问OSS中的数据，在保持数据在OSS中低成本存储的同时，获得高性能文件访问能力，满足云上自动驾驶、机器学习、HPC等大数据计算场景的需求。

阿里云 ESSD 为云服务器 ECS 提供低时延、持久性和高可靠的块存储服务，成为云厂商全闪块存储的业界标杆。存储团队推出了 ESSD Auto PL 新的云盘规格，把性能与容量解耦，提供 IO 性能按需供给两大关键特性。AutoPL 具备的灵活性和弹性能力降低了 IT 规模规划难度和因规划不当带来的风险，本文详细介绍了Auto PL 新产品特性、揭秘背后的技术原理。

运维工程师在通过日志调查问题时，或者通过日志搭建监控系统时，不仅需要查看原始的日志内容，还需要把日志经多深度加工分析，例如计算每分钟的延时，每分钟的流量等等监控。这些数字指标，如果能够通过可视化的手段直观的展示出来，会更直观、有效的理解监控数据。今天我们介绍一种比较简洁、也比较酷的可视化方式，就是在终端上直接通过命令行可视化分析日志。

Zabbix作为常用的开源监控系统，提供了丰富的告警规则用于系统监控，同时支持多种告警通知渠道。您可以将日志服务告警系统设为Zabbix的一个通知渠道，由日志服务告警系统完成告警降噪、通知等处理，并且通过包括短信、电话、微信、钉钉、邮箱在内的10多种通知渠道发送给用户。

在SLS告警中，告警监控通过对数据源的查询监控，然后产生告警，并将告警发送到告警管理，告警管理会对告警进行降噪处理包括合并抑制静默后，在将告警发送给行动管理，最终发送通知到用户配置的接收渠道。在整个过程中，告警监控作为告警的源头，决定着告警是否能准确的发出。在配置告警监控规则时，配置不当或者配置错误都会导致告警不能触发或者不是希望的触发。本文主要介绍在告警监控中如何进行自助排查问题。

Linux系统基于"一切皆文件"的理念，重要文件分布在如/root（root用户目录）、/home（普通用户目录）、/etc（应用配置）、/dev（设备文件）、/boot（内核及启动文件）、/proc（动态系统信息）、/lib64（库文件）、/opt（软件存放）、/tmp（临时文件）。"[root@localhost ~]#"代表管理员在root目录，"$"代表普通用户。创建新用户用`useradd`命令。调节终端字体大小：Ctrl+Shift++增大，Ctrl+减号缩小。绝对路径从根目录开始，相对路径从当前目录开始。

本文介绍三款 "schema-on-read" 类型日志系统。

本文主要介绍如何在日志审计中开启RDS错误日志以及Polardb错误日志的采集与监控

Prometheus作为一个开源的云原生监控系统，具有很广泛的应用场景，通过各种Exporter收集各类设备，应用的指标，将各类指标抽象为时序数据，在Prometheus上可以使用PromQL进行高效的指标查询和分析。SLS告警是云上的一站式告警监控运维平台，支持各种Ops场景。SLS告警系统主要包括指标采集，监控系统，告警管理，通知管理等子系统。本文介绍如何将Prometheus告警无缝转换为SLS告警，并使用SLS告警的管理功能。

近年来，Kubernetes作为众多公司云原生改造的首选容器化编排平台，越来越多的开发和运维工作都围绕Kubernetes展开，保证Kubernetes的稳定性和可用性是最基础的需求，而这其中最核心的就是如何有效地监控Kubernetes集群，保证整个集群的一个良好的可观察性。本期将为大家介绍Kubernetes的监控方案。

PolarDB是阿里巴巴自主研发的下一代云原生关系型数据库，阿里云日志服务PolarDB Lens围绕其提供了一站式的数据库资产概览、日志采集管理、分析和场景应用落地支持，本文介绍了PolarDB和PolarDB Lens的基本特性，并通过性能实验使读者对PolarDB Lens的功能有一个直观的认知。

阿里云日志服务致力于为用户提供统一的可观测性平台，同时支持日志、时序以及Trace数据的查询存储。用户可以基于收集到的各类数据构建统一的监控以及业务大盘，从而及时发现系统异常，感知业务趋势。但是随着收集到的数据量不断增长，特别是遇到业务峰值的时候，大盘报表展示会产生明显的延迟，无法及时查看重要数据。Scheduled SQL支持定时分析数据、存储聚合数据、投影与过滤数据，并将执行的分析结果存入用户指定的日志库或者时序库中，供用户后续分析使用。由于在聚合后数据量将大大小于之前，因而非常适合进行即时数据分析以及大盘展示。

在大数据时代，数据就是企业的核心资产，是企业的生命线。在现实世界中，灾难时有发生，当发生灾难时，容灾能力成为企业能否生存的关键。云上容灾服务，通常称为 DRaaS（灾难恢复即服务）不但能够省去自建容灾中心的开销，还能节省后续运维成本，帮助客户快速建立起跨地域的容灾方案，即买即用，随时释放的特性也为用户提供了极大的弹性。本文介绍了云上容灾产品形态，企业可结合自身特点选择合适的容灾方案，针对异步复制产品解析了传统容灾与云上容灾的技术架构。阿里云块存储也结合自身架构特点实现了块存储的异步复制产品。

对象存储OSS是阿里云提供的云存储服务，能够以低成本为用户提供高可靠性的海量数据存储服务。作为基础服务，用户需要时刻关注OSS的使用状况，检测异常状态，从而及时作出响应。

NAS SMB ACL的系列文章详细叙述了如何安装并启用AD域服务与DNS服务，将阿里云SMB协议文件系统挂载点接入AD域，将Windows客户端加入AD域，Windows客户端以AD域用户身份挂载并使用阿里云SMB协议文件系统。 即便我们提供了多篇文章尽力描述清楚整个NAS SMB ACL的配置步骤，但是复杂的流程仍然给用户造成了困扰。为了让配置更加简单，我们开发了NAS SMB ACL自动配置和自动检查脚本，将复杂的步骤尽量压缩在数个Powershell命令中。 注意：该Powershell每次运行一条修改命令，会弹出确认框，需要手动确认要执行的命令。

Prometheus作为监控告警的事实标准，提供了标准的指标采集、数据查询以及告警管理开源方案。但是同时在短信、语音、微信等告警通知渠道，告警管理的便捷方面都有缺陷。阿里云日志服务SLS致力于为用户提供统一的可观测性平台，为用户提供了企业级的AlertManager服务，解决客户在告警管理工作中遇到的问题。

本文主要介绍日志审计结合DDoS防护保障云上业务安全的新实践。

SLS在2021年4月份正式发布了对OpenTelemetry Trace 1.0版本的支持，完全兼容OpenTelemetry Trace1.0版本的所有字段，提供了Trace显示、分析、拓扑展示等功能。在功能发布后，众多客户开始接入SLS Trace并深度使用，其中对我们也提出来非常多的建议和需求。从中我们提取出了呼声最高的一些功能和优化点，加入到了SLS的Trace方案1.1版本中。

阿里云日志服务（SLS）通过提供一个Splunk插件（Add-on）实现SLS与Splunk的日志对接, 以便确保阿里云上的所有法规、审计、与其他相关日志能够导入到客户的安全运维中心（SOC）中。本文主要介绍如何在该Splunk Add-on中使用ECS实例RAM角色的鉴权方式，完成日志服务（SLS）到Splunk的日志投递过程。

数据库是企业业务的数据核心，其安全方面的问题已经成为数据泄漏和被篡改的重要根源。因此，对数据库的操作行为尤其是全量 SQL 执行记录的审计日志，就显得尤为重要。

立即报名，抢占现场参会名额，与各位大咖面对面探讨技术创新与应用模式！

连接1次孤岛，服务N个场景。Tapdata Live Data Platform （LDP）通过为实时数据集成增加一个高速缓存的方式，将企业核心的常用的数据实时复制到缓存层（最后一次ETL），再从缓存层为企业的多个应用场景快速提供数据， 实现一次打通，多次复用的降本增效价值。Tapdata LDP 现已入驻阿里云云市场。

阿里云对象存储OSS是低成本高可靠的存储服务，使用阿里云OSS对象存储搭建个人网盘或企业网盘的方法

本文主要介绍在日志审计下如何开启ALB访问日志的自动化采集与监控

本文档介绍如何将开源HDFS的数据平滑地迁移到文件存储HDFS版。

本文档介绍如何使用Sqoop工具实现文件存储HDFS版和关系型数据库MySQL之间的双向数据迁移。