技术课堂的搬运工~_个人页

2020年04月

• 04.03 16:46:19
  发表了文章 2020-04-03 16:46:19

  玩 High API 系列之：拍照翻译

  谷歌翻译前些日子推出了一个很有意思的功能，就是通过手机获取拍摄照片，然后实时对图片中的文字进行翻译。终端用户不需要输入文字，去国外对不懂的地标、文字等只要拍照就能随时进行翻译了。看起来很炫酷有没有？好在，在API时代，我们自己也可以利用现成的API来快速实现同样的功能。

  
• 04.03 16:36:59
  发表了文章 2020-04-03 16:36:59

  Mysql数据库Slow_log中的lock_Time和Query_time

  主要用简单的例子来说明，slow log里的lock_time和query_time的关系，得出的结论是： 当一个sql的执行时间（排除lock_time）大于long_query_time的时候，才会被记录到slow log中，并且query_time是累计了lock_time的（如果有lock.

  
• 04.03 16:27:48
  发表了文章 2020-04-03 16:27:48

  mysql的Join算法

  用事例和图片简单的说明了mysql 中两表join的算法，主要包括Nested-Loop Join Algorithm，Block Nested-Loop Join Algorithm，Batched Key Access Joins算法，以及join buffer在这个过程中起的作用

  
• 04.03 14:29:47
  发表了文章 2020-04-03 14:29:47

  RDS for MySQL 大表操作

  RDS for MySQL 大表操作

  
• 04.03 13:31:41
  发表了文章 2020-04-03 13:31:41

  RDS for MySQL 5.7 备份恢复为本地实例

  RDS for MySQL 5.7 备份恢复为本地实例详细步骤

  
• 04.03 12:36:05
  发表了文章 2020-04-03 12:36:05

  如何使用MQTT.fx连接微服务消息队列

  本文主要演示如何使用MQTT.fx 测试连接阿里云微服务消息队列的Broker。

  
• 04.03 11:31:22
  发表了文章 2020-04-03 11:31:22

  RocketMQ Spring 集成

  本文介绍如何在 Spring 框架下用消息队列 RocketMQ 收发消息。

  
• 04.03 10:57:47
  发表了文章 2020-04-03 10:57:47

  阿里云日志服务Rest API使用示例参考

  本次分享主要介绍CreateProject、DeleteProject和ListLogstore三个API的使用示例，相关示例使用JAVA语言。
• 04.03 04:55:27
  发表了文章 2020-04-03 04:55:27

  【OSS 排查方案-12 livechannel 直播推流】

  OSS livechannel 推流过程 生成推流 URL设置推流状态 录制 M3u8 缺失 默认录制成品的 m3u8 所以只有最后 3 片，遵循的是 hls 协议的默认规则，是正常想象，可以通过调用 PostVodPlaylist 接口将指定时间范围内的 ts 文件汇聚到一个 m3u8 索引内来解决； tips EndTime 必须大于 StartTime，且时间跨度不能大于 1 天。

  
• 04.03 04:43:35
  发表了文章 2020-04-03 04:43:35

  【OSS 排查方案-14 url 编码问题】

  经过 url encode 编码访问失败 编码前 ： http://oss-cn-hangzhou.aliyuncs.com/fun-punch-hls/ji-test/c133249354654050a66ec4341e61c23f?Expires=1540451197&OSSAccessKey.

  
• 04.03 04:38:37
  发表了文章 2020-04-03 04:38:37

  OSS 咨询

  CDN + OSS 模式，OSS 地址被暴露后如何处理 用户可以将 OSS 设置为私有，在阿里云 CDN 上设置私有回原，然后在 CDN 上针对不想让人访问的 OSS 资源 prefix 做正则匹配，拒绝请求。或者在 CDN 上设置鉴权，拒绝没有授权的访问。

  
• 04.02 17:25:18
  发表了文章 2020-04-02 17:25:18

  OSS crc64 出现不一致

  客户端的循环冗余校验和服务端不一致，可以上传成功 排查 出现类似问题，需要先收集信息，经常发生在 Java sdk 上传的过程中。 requestID 出现 checksum 不一致的情况一定会伴随有 requestID 信息。

  
• 04.02 17:22:35
  发表了文章 2020-04-02 17:22:35

  OSS signature 计算

  场景 通过多个语言版本 OSS SDK 测试，在使用 CDN 结合 OSS 用法时，客户端使用 CDN 域名计算 signature，发起 HEAD 请求，OSS 收到后返回 403 ； 分析： 出现这个问题不区分什么 SDK 都会出现，问题原因是由于客户端发起的 HEAD 请求在通过 CDN 回原到 OSS 时，CDN 回原是用的 GET 请求，而 OSS 收到时就用 GET 请求方式去计算签名，得到的结果肯定和客户端计算不一致，可以升级到阿里云 CDN 处理。

  
• 04.02 17:11:00
  发表了文章 2020-04-02 17:11:00

  OSS Python SDK

  很多 oss 使用者在使用 Python SDK 时出现很多问题，不确定是否影响使用，有的安装失败环境有问题，今天说下遇到的几个案例 官方安装 pip install oss2 版本最好是 2.7.5 或以上 oss2 依赖 如果要开启 crc64 循环冗余校验，需要先将 crcmod 安装好。

  
• 04.02 16:44:08
  发表了文章 2020-04-02 16:44:08

  OSS brower js SDK

  浅谈 今天带来的是 OSS brower js SDK 的安装过程和使用的 demo 测试用例。 环境准备 OSS brower js SDK 是基于 node js 框架上的服务端程序，服务端启动以后，提供客户端的访问地址。

  
• 04.02 15:34:31
  发表了文章 2020-04-02 15:34:31

  媒体转码HLS标准加密详解

  视频加密是对视频内容保护的一种手段，对视频中的内容进行加密，可有效防止视频泄露和盗链问题，广泛用于在线教育及财经等领域。阿里云目前支持两种加密方式: 私有加密 和 HLS标准加密，HLS标准加密需要客户自己保护密钥，此文档介绍HLS标准加密
• 04.02 15:11:50
  发表了文章 2020-04-02 15:11:50

  【 CDN 最佳实践】CDN 加速 OSS 常见问题及处理思路

  CDN加速OSS是常见的站点动静分离的方式，可以实现将静态资源存储在OSS上，并通过CDN加速OSS实现静态资源的访问加速效果。但是在实际使用的过程中可能会出现使用方法以及配置上的问题导致使用上出现难题。本文档主要就CDN加速OSS的配置以及各注意事项进行描述已解决本使用场景中遇到的问题。

  
• 04.02 13:57:08
  发表了文章 2020-04-02 13:57:08

  【OSS 排查方案-2】CDN+OSS 基础排查工具

  工具说明： CDN+OSS 的服务架构。 目的：当用户遇到 CDN + OSS 投诉问题后，可以先用此工具测试一下基本的测试指标，初步判断问题故障点，同时可以将脚本结果粘贴给阿里云客服更快定位信息。 使用方法：sh check_cdn_oss.sh 域名 请求URL OSS公网域名 Usge: check_cdn_oss.sh www.zhangyb.mobi http://www.zhangyb.mobi/index.html youkou.oss-cn-beijing.aliyuncs.com 如有需求，可提改进意见，工具会继续完善，谢谢。
• 04.02 13:05:35
  发表了文章 2020-04-02 13:05:35

  【OSS 排查方案-3】OSS 的网络排查

  鉴于之前遇到很多 本地-》OSS ，上传、下载总是慢的情况，或者上传、下载经常出现错误或者异常的问题。根据多个典型案例，抽象出一下排查方案，希望对大家快速定位问题有所帮助。

  
• 04.02 12:57:21
  发表了文章 2020-04-02 12:57:21

  【CDN 排查方案-1】认识 CDN 网络调优

  面向不同业务类型的网站，很多人都选择了 CDN 加速来优化自己的网站，目的在于加速网民的体验效果，赢取流量。 在网站调优的过程中，如果正确理解基于 CDN 的网络调优以及正确的配合 CDN 服务方来快速提供调优信息做了详细的讲解， 希望对大家有用，希望对从事 CDN 的人和对网络调优感兴趣的人能有作用。

  
• 04.02 11:13:51
  发表了文章 2020-04-02 11:13:51

  【OSS 排查方案-4】OSS + RTMP 推流的 JAVA 方法

  目前有很多直播爱好者使用的是 OSS + RTMP 做的推流直播，其中不乏一些企业级别应用，由于 OSS 作为推流的接收略微有一些复杂，故单独开篇讲一下。其实不建议使用 OSS+RTMP 做直播推流，因为功能性相比专业的阿里云直播几乎为 0 ，而且性能上并不好。
• 04.01 18:00:41
  发表了文章 2020-04-01 18:00:41

  【CDN 常见问题】CDN HTTPS配置及常见问题

  CDN提供了HTTPS的加密传输方式保证在客户端访问CDN的L1节点的链路上对传输数据进行加密避免被恶意查看和篡改。客户通过将自行向证书CA机构申请的SSL证书上传到CDN上，CDN会完成对所有的L1节点的配置同步保证后续所有的L1节点支持HTTPS方式访问。

  
• 04.01 17:55:29
  发表了文章 2020-04-01 17:55:29

  【CDN 常见问题】CDN回源Host的意义

  CDN的配置项中包括源站设置和回源host设置两个参数。这两个参数概念可能会出现混淆并且设置错误会导致访问出现异常，因此本文主要向大家介绍源站设置和回源host两个参数的概念和设置方法。

  
• 04.01 17:36:31
  发表了文章 2020-04-01 17:36:31

  在使用CDN时配置源站30X的一些注意事项

  301/302跳转是网站业务常见的一种处理手段，把针对其他域名的访问重定向到主要承担业务的域名上，在使用CDN的过程中，源站配置30X跳转有一些注意事项。

  
• 04.01 17:30:23
  发表了文章 2020-04-01 17:30:23

  访问 cdn、oss 跨域问题

  经常遇到有跨域的问题，老生长谈，却又屡禁不止，谈到跨域我们就了解下它是什么？ 一句话简单说明 一个资源请求一个其它域名的资源时会发起一个跨域 HTTP 请求 (cross-origin HTTP request)。

  

2020年03月

• 03.31 17:09:51
  发表了文章 2020-03-31 17:09:51

  视频点播 SDK-播放器问题

  使用阿里云播放器 目前随便手机型号的增加，和大量短视频的接入，VOD 点播播放器会遇到各种奇葩问题，今天从几个非常多的案例入手讲下坑点。 案例分析：ios 3.4.7 播放器 crash 出现问题，先看下视频编码，发现客户源文件是 vcodec 是 h264 ，acodec 是 amr ，可以使用 ffprobe 命令分析视频的编码。

  
• 03.31 17:05:47
  发表了文章 2020-03-31 17:05:47

  媒体处理 MTS-截图问题

  案例：传入的截图时间无效，无论传多少值，都只截取视频的第一帧 分析： 如果选则是关键帧截图，需要看好关键帧的间隔设置，。可以参考下官网的 java 代码，测试是过是可以生成多张的。 package com.

  
• 03.31 16:47:31
  发表了文章 2020-03-31 16:47:31

  视频点播-上传视频状态异常

  浅谈 本章节主要讲解上传视频到点播 VOD 存储时，控制台上显示的状态异常问题排查。 案例分析 案例 用户调用 createuploadvideoauth 获取上传凭证成功后，开始上传点播存储，发现大量的视频都是上传中的状态 排查 1）先了解下用户点播上传凭证上传的流程 先通过 CreateUploadVideo 接口获取一个有效的上传地址。

  
• 03.31 16:33:58
  发表了文章 2020-03-31 16:33:58

  视频点播-水印排查

  浅谈 当用户端配置了工作流转码，并且打水印的情况下为什么没有生效？我们需要知道打水印是要对文件进行修改产生的一个效果，那么用户端先要知道水印是转码的一部分。 了解水印 添加水印模板可分为如下三个步骤： 1）调用CreateUploadAttachedMedia接口获取文件上传的路径以及临时授权。

  
• 03.31 16:30:07
  发表了文章 2020-03-31 16:30:07

  CDN - 跨域失败排查

  某个客户在阿里云 CDN 配置了加速域名 al.p2.com ，客户自己的主站域名 www.a.com 加载 al.p2.com 下的资源出现跨域的报错； 了解跨域 跨域资源共享(CORS) 是一种机制，它使用额外的 HTTP 头来告诉浏览器 让运行在一个 origin (domain) 上的Web应用被准许访问来自不同源服务器上的指定的资源。

  
• 03.31 15:49:52
  发表了文章 2020-03-31 15:49:52

  Windows Networking 2: 为什么我的Apache服务停不了。

  Windows Networking 2: 为什么我的Apache服务停不了。 这是Windows Networking 排查的第二篇，上次涉及了Windows NDIS的架构以及对该架构下网络问题排查的方法。

  
• 03.31 14:11:08
  发表了文章 2020-03-31 14:11:08

  ECS弹性网卡+弹性公网IP配置最佳实践之策略路由

  目前阿里云ECS部分机型可以配置多张网卡（一张原生网卡+若干张弹性网卡），用来实现业务上对于系统内多网卡的需求，详细可以参考 【新功能】弹性公网IP绑定弹性网卡新功能及最佳实践 。在使用过程中，可能会遇到多个弹性公网IP绑定到一个ECS上的原生网卡、弹性网卡上后无法通信的问题，这个时候需要检查系统内的路由配置和策略（policy rules）。
• 03.31 13:22:26
  发表了文章 2020-03-31 13:22:26

  为何客户端突然出现大量TIME_WAIT堆积

  本文介绍了一个在阿里云环境下某客户端ECS机器上突然发现TIME_WAIT突然增高的问题和排查过程。通过问题分析介绍了TCP TIME_WAIT快速回收的代码逻辑，以及TCP timestamps option字段对快速回收的影响。

  
• 03.31 13:16:20
  发表了文章 2020-03-31 13:16:20

  Linux内核协议栈丢弃SYN报文的主要场景剖析

  在排查网络问题的时候，经常会遇见TCP连接建立不成功的场景。如果能获取到两端抓包，两端抓包看起来如下：客户端在一直按照指数退避重传TCP SYN (因为首包没有获取到RTT及RTO，会在1, 2, 4, 8秒... 重传，直到完成net.ipv4.tcp_syn_retries次重传)；服务器端能看到TCP SYN报文已经到达网卡，但是TCP协议栈没有任何回包。

  
• 03.31 11:43:11
  发表了文章 2020-03-31 11:43:11

  记一次典型的TCP传输吞吐效率问题

  客户在ECS上实现了一个供小图片上传的接口，通过高防->SLB->ECS的网络链路将接口发布给终端用户，但是发现上传的速率很不理想。初看起来像是高防问题，但是通过排查最终发现这是一个典型的TCP传输吞吐量问题，并且是由于后端服务器端的配置而引起，在此记录下排查过程和相关原理。

  
• 03.31 10:57:16
  发表了文章 2020-03-31 10:57:16

  记一次吐血的ping: unknown host

  ping域名提示unknown host，ping ip则可以通，ping的时候抓包没有解析的包出去，是解析的问题吗？

  
• 03.31 10:47:28
  发表了文章 2020-03-31 10:47:28

  WAF+SLB负载不均衡案例分享

  问题演变过程 时间点1：高防+WAF+SLB+2台ECS时间点2：高防+WAF+SLB+4台ECS 问题描述 在时间点1时，没有发现明显的负载不均衡的情况。在时间点2时，出现大部分请求都打到了其中一台ECS上。

  
• 03.31 09:53:49
  发表了文章 2020-03-31 09:53:49

  使用NGINX作为HTTPS正向代理服务器

  NGINX主要设计作为反向代理服务器，但随着NGINX的发展，它同样能作为正向代理的选项之一。正向代理本身并不复杂，而如何代理加密的HTTPS流量是正向代理需要解决的主要问题。本文将介绍利用NGINX来正向代理HTTPS流量两种方案，及其使用场景和主要问题。

  
• 03.30 18:32:41
  发表了文章 2020-03-30 18:32:41

  【0331 - 0404 直播导视 | PPT 下载】云服务技术课堂带来阿里云物联网平台的实践分享

  本系列课程从一个Quick Start的案例开始引入，帮助使用者对阿里云物联网平台有一个快速的认识。
• 03.27 17:05:28
  发表了文章 2020-03-27 17:05:28

  如何在手机端上抓包？

  很多客户端移动端上访问视频、CDN 资源卡顿，但是无法进行抓包测试，本文和大家分享如何在手机端抓包。

  
• 03.27 16:59:23
  发表了文章 2020-03-27 16:59:23

  谈谈Windows迁移上云经常会遇到的问题 （一）

  最近在处理了几例Windows迁移上云的问题，问题还是比较有典型性的。分享一下具体的处理方法以及原理。 第一类问题是磁盘引起的，我们的云迁移工具支持迁移系统盘和数据盘。当我们机器上有至少两块磁盘的时候，在迁移之后，有时我们会发现系统在云上有很多奇怪的现象。

  
• 03.27 16:47:56
  发表了文章 2020-03-27 16:47:56

  上云就上阿里云，服务助力上好云

  就在新广告词“上云就上阿里云”引爆社交圈后不久，阿里云宣布全面升级支持与服务体系，升级后的支持与服务体系将更好的满足阿里云客户需求。其实随着云计算理念的普及，客户的需求逐渐从IaaS向PaaS、SaaS延展，除了需要基础支持外，客户对特定场景下的专家服务提出了更多诉求。

  
• 03.27 16:41:55
  发表了文章 2020-03-27 16:41:55

  Ossimport 大数据量迁移方案总结

  背景： 面临客户不断的将友商的存储数量迁移到阿里云上。ossimport 工具越来越多的暴露在用户端，但是合理的利用 ossimport 工具以及良好的迁移架构数据能否帮助用户高效的快速迁移。但是如果对 ossimport 不熟知，而且迁移架构没有经过测试，反而会降低我们的迁移效率，影响客户的全面战略上云计划安排。

  
• 03.27 16:07:44
  发表了文章 2020-03-27 16:07:44

  众安保险的云上之路

  18年6月7日，在上海世博中心，2018云栖大会·上海峰会阿里云支持与服务专场上，众安保险应用运维负责人梁亮发表主题演讲，深度解读了众安保险的云上之路。

  
• 03.27 15:32:59
  发表了文章 2020-03-27 15:32:59

  应用数据迁移网络异常案例分析

  某客户计划通过P2V工具迁移500台ECS镜像至阿里云华北1（青岛），在应用数据迁移传输过程中是把用户的系统盘、数据盘的数据通过公网传输到阿里云中转ECS实例上。6.12-6.13号批量迁移100台基本正常，从2018.6.13号晚10点左右开始连接阿里云中转ECS实例就出现中断，现象为在客户端telnet中转ECS实例8703端口提示Connection closed by foreign host. 但检查中转ECS实例的http 服务8080正常，而且其它地方测试中转ECS实例8073端口、8080端口服务均正常。

  
• 03.27 12:23:23
  发表了文章 2020-03-27 12:23:23

  k8s ingress获取真实IP地址配置

  背景 业务架构：Client->WAF->LB->ECS->容器问题：在容器中获取不到真实的客户端公网IP 抓包分析 在ECS上的抓包分析，看到WAF已经将 真实客户端地址放到了 x-Forwarded-For 的字段中传给了ECS ![image](https://yqfile.

  
• 03.27 12:10:51
  发表了文章 2020-03-27 12:10:51

  K8S从懵圈到熟练：读懂这一篇，集群节点不下线

  排查完全陌生的问题，完全不熟悉的系统组件，是售后工程师的一大工作乐趣，当然也是挑战。今天借这篇文章，跟大家分析一例这样的问题。排查过程中，需要理解一些自己完全陌生的组件，比如systemd和dbus。

  
• 03.27 10:34:49
  发表了文章 2020-03-27 10:34:49

  如何使用curl访问k8s的apiserver

  使用TOKEN授权访问api-server在k8s运维场景中比较常见， apiserver有三种级别的客户端认证方式 1，HTTPS证书认证：基于CA根证书签名的双向数字证书认证方式 2，HTTP Token认证：通过一个Token来识别合法用户 3，HTTP Base认证：通过用户名+密码的认证...
• 03.26 10:30:50
  发表了文章 2020-03-26 10:30:50

  K8S从懵圈到熟练 - 我们为什么会删除不了集群的命名空间？

  本文和大家讨论K8S集群的命名空间的相关问题

  
• 03.25 18:05:08
  发表了文章 2020-03-25 18:05:08

  K8S从懵圈到熟练 – 集群服务的三个要点和一种实现

  深入解释一下K8S集群服务的原理与实现