|
SQL 监控 负载均衡
|

日志服务消费延迟问题排查

2514 0
来自: 日志服务SLS  版块
|
分布式计算 监控 DataWorks
|

使用dataworks投递日志服务数据到MaxCompute

日志服务提供了多种投递数据的方式,如: 在控制台直接配置投递任务,通过消费组获取数据然后再投递。控制台直接投递配置方式与dataworks类似,不过配置项更少,更容易操作。

6117 0
来自: 日志服务SLS  版块
|
监控 数据可视化 机器人
|

日志服务告警使用与常见问题排查

3288 0
来自: 日志服务SLS  版块
|
存储 资源调度 容灾
|

五个问答,告诉你阿里云对象存储如何助力钉钉战胜业务洪峰

为了积极迎接此次疫情的挑战,政府组织、企业、院校等纷纷开启了线上办公,视频会议、在线教育以及基于互联网的数据分析已然成为当下最重要的刚需。在这样如此巨大的业务流量和数据增量的压力下,钉钉是如何积极应对,从而实现存储的快速扩容,保障了业务连续性。

1802 0
|
弹性计算 算法 数据安全/隐私保护
|

[New Feature]阿里云云盘支持BYOK加密

2414 0
|
存储 缓存 固态存储
|

云存储网关的缓存最佳实践

前言 云存储网关支持通过传统的文件协议(SMB/NFS)来访问OSS Bucket里面的数据,并能够通过缓存技术将用户频繁访问的热点数据保留在网关侧的缓存盘里,从而提供给用户更好的访问体验。用户在使用阿里云云存储网关时,经常会碰到一些缓存相关的问题,比如在创建共享时如何选择缓存盘的容量和类型,比如缓存的数据淘汰策略是什么等。

2553 0
|
消息中间件 存储 Linux
|

如何同步OSS Bucket数据到云存储网关SMB/NFS共享

云存储网关主要提供了反向同步和极速同步两种方法来同步OSS Bucket里面的数据到网关侧的共享里。本文将对这两种数据同步的方法均做下介绍,给出它们的实现原理以及分别适用的场景。反向同步是基于对文件夹进行全量扫描比对的方式来发现OSS Bucket里面的数据变化,极速同步则是基于OSS Bucket数据变化增量的方式来实现的。

3847 0
|
存储 消息中间件 JSON
|

SLS数据处理实践:加工延迟篇

在日志服务,数据加工功能(功能介绍)用于完成对Logstore数据的预处理,为后续的分析阶段准备数据。本文主要介绍数据加工实践中可能遇到的延迟问题,帮助大家理清延迟现象背后的原因,以及如何去监控、解决延迟问题。

3393 0
|
监控 应用服务中间件 vr&ar
|

[日志服务][数据加工]e_anchor函数与e_regex函数的使用总结

简单介绍日志服务数据加工e_anchor函数与e_regex使用场景总结

1356 0
来自: 日志服务SLS  版块
|
存储 缓存 网络协议
|

云存储网关"NFS V4优化"选项详解

本文主要介绍了云存储网关的“NFS V4优化”选项的工作原理,如果您并没有需求必须使用NFSv3的方式挂载网关的NFS共享,建议您都以NFSv4的方式挂载并打开这个选项,从而获得更理想的文件上传效率。

3866 0
|
存储 数据挖掘 API
|

利用智能媒体管理(IMM) 搭建云相册指南

- 为用户创建智能云相册 - 支持人脸检测,获取包括人脸位置、表情、年龄等信息 - 支持人脸分组,可以根据人物搜索、展示照片 - 支持照片标签检测,可以根据标签对照片进行分类 - 支持地理位置检测,获取照片拍摄的具体位置、时间,并且可以进行搜索

1507 0
|
存储 监控 机器人
|

Logtail 心跳监控最佳实践

作为采集 agent,logtail 所采集的日志可能会就被用于对应用程序进行监控/告警,所以保证它自身处于正常状态对整个系统的稳定显得尤为重要。在之前的[《全方位 Logtail 状态监控》](https://yq.aliyun.com/articles/691336)中,我们曾介绍了关于监控 Logtail 各类状态的方法,包括基本的链路状态、资源使用情况等。

1945 0
|
消息中间件 JSON 监控
|

使用Kafka Connect 同步Kafka数据到日志服务

使用Kafka Connect 同步Kafka数据到日志服务 简介 Kafka作为最流行的消息队列,在业界有这非常广泛的使用。不少用户把日志投递到Kafka之后,再使用其他的软件如ElasticSearch进行分析。

6403 0
|
存储 应用服务中间件 Linux
|

如何基于云存储网关搭建Nginx服务器

本文介绍在Linux服务器中,如何通过云存储网关的NFS共享来搭建集运OSS对象存储的的Nginx Web服务。

1881 0
|
SQL 存储 专有云
|

数据库代码化(Database-as-Code)实战(二)

前言 在数据库代码化(Database-as-Code)实战一文中介绍了如何借助 Flyway 实现 migration based 的数据库迁移。但在实践过程中,发现了如下问题: 随着项目的发展,迁移脚本数量会越来越多,而全新部署时由于要执行所有的历史变更,部署时间会越来越长。

1490 0
|
分布式计算 Kubernetes 监控
|

全方位事件监控管理,阿里云日志服务Kubernetes事件中心正式上线

Kubernetes事件中心正式上线

707 0
来自: 日志服务SLS  版块
|
运维 Kubernetes 监控
|

Kubernetes可观察性:全方位事件监控

为了让大家更便捷的使用Kubernetes事件功能,阿里云容器服务Kubernetes和日志服务SLS合作推出了Kubernetes事件中心,支持将Kubernetes中的事件实时采集到日志服务中,把阿里工程师在多年Kubernetes运维中积累的事件监控、告警指标提炼到事件中心,开箱即可获得这些积累的运维经验。

6825 0
|
SQL 机器学习/深度学习 监控
|

时序图在SLS中的使用技巧

场景问题 通过SQL分析出实际场景中的数据,如果有数据缺失怎么办? 在折线图中如果有一些显著的异常点,能否主动的标记出来? 能否自定义某个观测指标的区间,在折线图中,添加区间的绘制能力? 能否支持多张图表在相同的时间轴上的联动操作? 基础数据的提取 假设我们现在有一个网站的访问日志,我们去找某个域名("aaa.aliyun.log.com"),访问的路径为("/account/query") 的分钟级别的流量,通过如下SQL,我们可以得到一条时序曲线,我们选择普通的折线图,我们可以发现,折线图中横坐标显示的比较凌乱,没有很好的适应数据本身对时间进行格式化。

1779 0
|
存储 SQL 关系型数据库
|

MySQL实战—更新过程

10390 0
|
存储 安全 API
|

使用临时令牌访问 OSS 遇到授权问题的分析说明

本文针对移动APP开发客户在使用OSS过程中遇到的一个常见的权限错误问题,进行了分析说明,并在说明过程中引用了阿里云官方文档里RAM的部分解释。

2820 0
|
存储 SQL 缓存
|

MySQL实战——基础架构

MySQL架构 MySQL 可以分为 Server 层和存储引擎层两部分。不同的存储引擎共用一个Server层。 Server层 概述 Server层包括 连接器 查询缓存 分析器 优化器 执行器 ... Server层功能 MySQL大多数核心服务功能 所有的内置函数,如日期、时间、数学和加密函数等 跨存储引擎的功能,如存储过程、触发器、视图等 连接器 连接器做什么? 连接器负责跟客户端建立连接、获取权限、维持和管理连接。

3869 0
|
存储 文件存储 对象存储
|

如何使用阿里云云存储网关搭建IIS网站

本文将为大家介绍,如果基于阿里云存储网关提供的samba共享,在windows server中基于IIS服务和OSS对象存储搭建自己的web服务。

3026 0
|
存储 缓存 安全
|

云存储网关使用Windows权限控制管理数据访问权限

Windows权限控制功能是云存储网关在1.1.0版本推出的新特性,旨在给用户提供更加灵活的用户权限配置,满足不同用户的需求,具体来说它能够允许用户进行精细到每个文件或者文件夹粒度的权限控制,能够有效的保证数据安全性。

2091 0
|
弹性计算 虚拟化
|

终极武器-阿里云VMware无代理迁移发布增量迁移功能

前文说到,阿里云提供了针对VMware的无代理整机迁移服务,试用下来亮点颇多,可以极大地提高VMware用户上云的效率。 但是考虑到大部分需要迁移的用户都有指定的切换窗口,需要迁移的时间更加可控,并且还有会有需要临时切换做验证的需求,开发团队紧接着就发布了增量迁移的功能。

1905 0
|
存储 运维 监控
|

助力在线教育,阿里云推出百万专项扶持基金计划

阿里云存储在线教育解决方案发布会暨百万专项扶持基金计划

1233 0
|
人工智能 运维 监控
|

新发布:免费的防疫数据分析与可视化平台---阿里云新冠病毒疫情分析App

免费的防疫数据分析与可视化平台能力---阿里云新冠病毒疫情分析App 新冠病毒疫情分析App是基于阿里云日志服务中台,提供的一站式的数据处理可视化分析系统。借助它,可以在全球范围内了解各省份、市区的全面一手疫情信息和防疫新闻动态。目前该能力全面开放给政府、社区、第三方平台和开放者进行广泛应用。

4860 0
|
语音技术 对象存储 数据安全/隐私保护
|

智能媒体管理人脸语音识别

介绍如何使用阿里云智能媒体管理产品(IMM)及相关云产品搭建在线教育视频质量分析。

1089 0
|
存储 SQL 弹性计算
|

数据中台赋能云成本管理(2): 借助SQL完成分账

云时代对账单分析的强烈需求 对于传统的IT运维,通常上线机器,首先需要预估需求,然后申请预算,再发起采购单,等待采购完成,到最终上线,整个流程已经横跨几个月,甚至到1年。 云时代的到来,云厂商巨大的资源池,保证任何客户任意时刻都有足够的资源使用。

4560 0
|
存储 JSON 运维
|

系列文章:Kubernetes日志采集最佳实践

在Kubernetes中,日志采集和普通虚拟机的方式有很大不同,相对实现难度和部署代价也略大,但若使用恰当则比传统方式自动化程度更高、运维代价更低。本期将为大家介绍如何正确的进行Kubernetes的日志采集。

6406 0
|
弹性计算 数据可视化 Ubuntu
|

数据中台赋能云成本管理(1):创建账单项目

背景 在成本管家中,SLS提供了云产品账单的数据,通过SLS强大的分析和可视化能力,帮助客户分析云产品账单,优化成本。在发布后在客户中间引起强烈的反馈,不少客户要求在账单中增加实例名,Tag,资源用量等信息,通过更多维度数据做分账。

2390 0
|
存储 JSON Kubernetes
|

系列文章:Kubernetes中日志的正确输出姿势

上一期主要和大家介绍从全局维度考虑如何去构建K8s中的日志系统,本期我们从实践角度出发来一步步构建K8s中的日志监控体系。构建日志系统的第一步是如何去产生这些日志,而这也往往是最繁杂最困难的一步。

5402 0
|
监控 数据可视化
|

新型肺炎疫情实时分析与可视化(直播)

使用日志服务提供的疫情分析App,免费开通与使用(2月11日发布),实时同步数据,支持更灵活的自定义交互式分析、可视化、仪表盘构建、钉钉告警、订阅等功能(完全免费)

1932 0
|
缓存 JSON 监控
|

日志服务权限配置问题

一. 权限介绍 1. 为什么需要授权 RAM授权 您可以通过RAM创建、管理用户账号(例如员工、系统或应用程序),并控制这些用户账号对您名下资源具有的操作权限。当您的企业存在多用户协同操作资源时,使用RAM可以让您避免与其他用户共享云账号密钥,按需为用户分配最小权限,从而降低您的企业信息安全风险。

9949 0
来自: 日志服务SLS  版块
|
存储 缓存 网络协议
|

云存储网关结合Active Directory服务搭建Windows文件共享服务器

本文通过具体的实践展示了如何利用云存储网关搭建一个和Active Directory集成的文件共享服务器。让用户在感受到传统文件协议的便利的同时可以享受阿里云对象存储服务所带来的海量存储空间以及高可靠性等独特优势。

3679 0
|
存储 人工智能 弹性计算
|

容器应用使用阿里云文件存储NAS最佳实践

应用程序需要数据, IT方案被创造出来是为了解决商业业务数据的问题。容器问世之时,它最初的目的是应对无状态化服务。随着容器技术的成熟,越来越多的人希望容器化应用可以直接关联数据。不论是传统的还是新型应用,都需要持久化存储。

3015 0
|
存储 弹性计算 网络协议
|

如何利用云存储网关搭建SFTP服务器访问OSS存储

本文将介绍在linux服务器上如何通过在云存储网关共享上搭建FTP服务器来实现对OSS内数据的分发与共享。

6508 0
|
存储 缓存 应用服务中间件
|

云存储网关单共享管理多OSS Bucket

云存储网关支持通过单一共享来管理多个OSS Bucket从而提供单一的挂载点。当需要增加新的OSS Bucket时,只需要在GUI上进行简单的配置,在共享目录里面就可以访问新的OSS Bucket了。当需要切换OSS Bucket时,可以同时管理新旧OSS Bucket从而进行数据的拷贝,同时维持共享挂载地址不变。

2268 0
|
监控
|

新型肺炎疫情实时动态大盘(基于日志服务)

目前新型肺炎疫情扩散比较快,为了让大家能够较为实时看到最新的情况,我们使用日志服务技术构建了一张新型肺炎疫情实时动态大盘 (手机可打开) https://1340796328858956.cn-shanghai.

6806 0
|
存储 NoSQL 数据管理
|

Tablestore入门指南-GetRange范围查询详解

查询接口 表格存储Tablestore作为大数据存储服务,提供了多种数据输出接口,主要包含: 单行读(GetRow)、 批量读(BatchGetRow)、 范围读(GetRange)、多元索引检索(Search)以及通道服务的数据订阅(Tunnel Service)。

3243 0
|
存储 编解码 数据挖掘
|

解读阿里云内容协作平台-增值服务

AI,智能分类处理音视频,将非结构化数据汇聚成一系列结构化数据,提供海量的大数据检索

1535 0
|
消息中间件 监控 对象存储
|

极速同步如何保证反向同步数据一致性

背景 文件网关在一个事务中将客户户端数据写入缓存盘返回,然后以异步的方式在后台线程中上传到OSS,如果存在多个网关共享同时写入一个文件,对象的完整性是由OSS语义来保证的,网关始终能够保证正向同步的数据一致性。

1505 0
|
消息中间件 存储 负载均衡
|

极速同步:网关间多点协同实现数据共享最佳实践

背景 网关网关提供了从OSS到NAS协议转换,依托于OSS的稳定性和经济性,降低了用户的使用成本,又具备了传统NAS的易用性和POSIX兼容性,可以与用户的已有应用无缝对接,满足了中小企业客户的需求。

1976 0
|
消息中间件 Kafka 流计算
|

消息系统端到端Exactly-Once支持

消息系统对于消息的写入和消费提供多种模式,如 at-most-once,at-least-once 和 exactly-once,本文探讨如何在一个消息提供中高效支持exactly-once的写入和消费

1831 0
|
SQL 存储 弹性计算
|

阿里云上数据统一备份 – 混合云备份服务解析

近年来,随着越来越多的企业从传统经济向数字经济转型,核心业务系统上云,云上的业务创新,这些都产生了大量的业务数据,这些数据也成为了企业最重要的资产、资源。阿里云混合云备份服务(Hybrid Backup Recovery, 简称HBR)可以为阿里云ECS,NAS,OSS上的文件,数据库以及自建机房内的文件,VMware虚拟机提供安全,高效的保护。

3582 0
|
消息中间件 缓存 开发工具
|

文件网关秒级同步OSS变更对象初体验

2236 0

云存储

阿里云存储基于飞天盘古2.0分布式存储系统,产品多种多样,充分满足用户数据存储和迁移上云需求。

1
今日
8306
内容
45
活动
195727
关注
你好!
登录掌握更多精彩内容

相关产品