wilson9527_个人页

KVM 性能调优与限制

docker快速部署gitlab

我的博客即将入驻“云栖社区”，诚邀技术同仁一同入驻。

我的博客即将入驻“云栖社区”，诚邀技术同仁一同入驻。

docker 构建magent的memcached 集群

基于swarm 构建magent的memcached 集群： Magent 是一款开源的 Memcached 代理服务器软件，使用它可以搭建高可用性的集群应用的 Memcached 服务 ，备份 Memcached 数据，尽管 Memcached 服务挂掉，前端也能获取到数据，客户端先连到 Magent 代理服务器 ，然后Magent 代理服务器 在可以连接多台 Memcached 服务器，然后可以进行数据的保存和备份数据。

python 练习题2

常用函数考察：   dict(zip(('a','b','c','d','e'),(1,2,3,4,5)))   range(10)      sorted([i for i in range(10)])   { i:i*i for i in range(10) if i%/2==1...

python练习题

2道外企面试题。 1、统计连续字符串出现最大频次 #!/usr/bin/env python#-*-coding:utf-8 def maxblock(x):l = [ i for i in x ] #或者l=list(x)num=[]n=1for i in range(len(l)-1):if l[i] == l[i+1]:n+=1else:n=1num.append(n)print max(num)maxblock("waerfsddddamssddssssaasda") 2、删除字符串中的连续重复的字符，使其唯一。

KVM虚拟机磁盘readonly故障分析

集群有200余台虚拟机，运行在分布式文件系统mfs上。 现象：1、每天凌晨0:10 ，出现批量虚拟机分区出现readonly问题，导致用户无法正常写入。 原因分析：1、之前偶尔也会出现个别readonly的情况，没有深入排查，只是推测和chunkserver磁盘坏道有关，当vm读写正好在chunkserver坏道的块上时，可能出现报错，导致异常。

我的友情链接

11721816 重新来学JAVA 实践检验真理 北冰--Q 俊 90后 Not Only Linux

open-falcon部署

#falcon-plus server部署： https://github.com/open-falcon/falcon-plus/tree/master/docker Running falcon-plus container docker pull openfalcon/falcon-plus:0.

centos7.3 docker升级

#升级操作系统，centos7直接升级到7.3 yum clean all yum update #升级内核 rpm --import https://www.elrepo.org/RPM-GPG-KEY-elrepo.

基于swarm的elasticsearch集群搭建

es集群构建： 1、安装head插件：   for Elasticsearch 5.x: docker run -p 9100:9100 mobz/elasticsearch-head:5   （ docker run -p 9100:9100 10.

基于overlay2的docker17.06.ce部署

#升级操作系统，centos7直接升级到7.3 yum clean all yum update #升级内核，以支持overlay2 rpm --import https://www.

docker swarm集群部署

docker swarm 集群构建： swarm 在docker 1.12 版本后内置 #h官方文档tps://docs.docker.com/engine/swarm/#feature-highlights 系统环境：   centos7.3   docker17.06 1、初始化manager节点：   docker swarm init   为实现高可用，manager节点需要有奇数个，类似zookerper选举制度。

ceontos 7.3 部署 ceph12.1.1

ceontos 7.3 部署  ceph12.1.1 #http://docs.ceph.com/docs/master/start/quick-ceph-deploy/#create-a-cluster 参考官方手册即可。

task blocked for more than 120 seconds

ul  3 20:41:24 yz384 kernel:Jul  3 20:43:24 yz384 kernel: INFO: task chown:18647 blocked for more than 120 seconds.

systemd 对你的进程数限制横插一脚啦

原文：https://blog.apporc.org/2016/05/systemd-%E5%AF%B9%E4%BD%A0%E7%9A%84%E8%BF%9B%E7%A8%8B%E6%95%B0%E9%99%90%E5%88%B6%E6%A8%AA%E6%8F%92%E4%B8%80%E8%84%9A%E5%95%A6/ 以往在执行海量进程并发的时候，看到这错：”fork:retry:no child process”， 通常就想到 ulimit 了。

centos7快速部署ceph

1、机器： 10.39.3.22-26  2.优化   tcp参数优化        ntp时间同步配置   requiretty准备 执行命令visudo修改suoders文件： 1. 注释Defaults requiretty Defaults requiretty修改为 #Defaults requiretty， 表示不需要控制终端。

centos7离线安装ansible

centos7离线安装ansible： 1、通过在线的centos7将rpm包下载好了，上传到指定服务器。 下载官方repo，rpm -iUvh http://dl.Fedoraproject.

mfs1.6.x故障一例，血的经验教训 推荐

mfs集群故障报告 故障描述：     从2017年3月8日04:20--2017年3月8日06:20期间，调度系统mfs集群出现故障，导致无法正常使用。造成承载的虚拟机业务出现大批量的ping告警，同时影响到凌晨调度系统正常运行。

mfs3.0.85+heartbeat+drbd集群高可用实现

mfs集群部署文档 1、内容简介 MFS有元数据服务器(mfsmaster)、元数据日志存储服务器(mfsmetalogger)、数据存储服务器（mfschunkserver)、客户端(clients)组成。

yum downloadonly

How to use yum to download a package without installing it  SOLUTION VERIFIED - Updated October 22 2015 at 2:36 PM -  English  Environment R...

buffer和cache的区别

# free              total       used       free     shared    buffers     cached Mem:        255988     231704      24284          0       643...

文件系统性能测试指标

测试的定义Write: 测试向一个新文件写入的性能。当一个新文件被写入时，不仅仅是那些文件中的数据需要被存储，还包括那些用于定位数据存储在存储介质的具体位置的额外信息。这些额外信息被称作“元数据”。

python 列表生成式、生成器、迭代器、yield

 列表生成式：     python内置的用来创建list的生成式。  例子：     要生成list [1, 2, 3, 4, 5, 6, 7, 8, 9, 10]可以用list(range(1, 11))：          但如果要生成[1x1, 2x2, 3x3, .

centos6.2 64 部署docker

centos6.2 64 部署docker 安装docker yum源： yum install http://mirrors.yun-idc.com/epel/6/i386/epel-release-6-8.

hadoop集群同步实现

#!/usr/bin/env python #coding=utf-8 #scribe日志接收存在小集群到大集群之间， distcp 同步失败的情况，需要手动进行补入。 #1、如果查询补入的日志量少，则可以之间用脚本处理。

crontab环境变量问题

在crontab中运行脚本来查看hadoop相关信息，由于hadoop、java默认部署在/usr/local下面， 所以导致crontab执行时出现报错。具体与环境变量有关系，下文描述比较清楚。

hdfs web_ui深入讲解、服务启动日志分析、NN SNN关系

hdfs启动顺序：      1、namenode       2、datenode      3、secondnamenode              4、yarn webui:            默认为50070端口，dfsheath     ui内容讲解：           ClusterID: namenode格式化时生成的（hdfs namenode -format）           BlockpoolID：数据块池            （为了federation 和内存管理使用。

crontab中反引号和$()无效的解决

关于crontabQ1:为何可以手工执行，加入crontab后却不能正确执行A：1.如果crontab执行失败，会发送email给你，请在mail中查找出错原因2.crontab中的PATH变量设置与交互式shell环境中不同，要执行的命令必须有正确路径3.在crontab中%字符被认为是换行，所以你的命令中有%时，在crontab中要加\转义比如 30 * * * * date '+%D' >datefile   是错误的 正确的应该是 30 * * * * date '+\%D' >datefile mark一下。

kafka集群维护

kafka集群基本信息实时查看和修改：      集群信息实时查看（topic工具)      kafka-topics,sh --list --zookeeper x.x.x.x       kafka-topics.sh --describe --zookeeper x.x.x.x --topic topic_name       集群信息实时修改(topic工具）      提高topic并发，通过增加topic的partition数来解决。

zookeeper集群搭建

软件环境：           linux服务器 1、3、5  （2*n + 1 ）。   与选举相关，不能是偶数。           jdk1.7            zookeeper 3.

kafka学习记录

消息系统 kafka：支持协议仿AMQP，动态扩容（支持zk），支持负载均衡、集群。       （事物：多个全部提交，要么全部成功，要么全部失败。） AMQP： 高级消息队列   advanced message  queue  protocol。

kvm虚拟机操作常用命令

在我们KVM系列专题的第四部分，我们将会一起讨论下在命令行界面下来管理KVM环境。我们分别用‘virt-install’和virsh命令行工具来创建并配置虚拟机和存储池，用qemu-img命令行工具来创建并管理磁盘映像。

设置linux发送email（非sendmail）

vi /etc/mail.rc  在末尾添加邮箱和密码： set from=249016681@qq.com smtp=smtp.qq.comset smtp-auth-user=249016681@qq.

tcpdump抓取ipip报文

 根据目的ip抓取ipip单向报文 tcpdump -i p6p1 "ip proto 4 and (ip[20+16:1]=10 and ip[20+17:1]=184 and ip[20+18:1]=243 and ip[20+19:1]=62)" 双向报文 tcpdump -...

年轻人

年轻人，你不去创业，不去旅游 ，不去接受新鲜事物，不去给身边的人带去正能量，整天挂着QQ，看看 微信 ，逛逛淘宝，拿着包月的 工资 ，干着不计流量的工作。千篇一律地重复着昨天的生活，干着80岁老人都能做的事，等着天上掉馅饼的美事，你要青春有个毛用？—— 马云

光纤常识扫盲

光模块：目前一般是spf类型的 光纤接口类型： FC  圆头 用于ODF架     sc小方头 用于设备接口。 ST  和FC有点类似，ST和FC又俗称“圆头”。它旋转到一定角度就可以卡进插座。

IPRAN--网络工具

  一个是teamviewer   另外一个则是unistar   前者以前用过，功能就是和远程协助差不多吧。但是用起来比较简单方便。 另外一个是hw针对ipran专门设计的一款软件，unistar，做网络规划用的，建链路，建拓扑，规划子网等 是前期方案设计的一个好工具。

IPRAN学习---Qos

 对于mpls  te中使用到的qos技术学习了下。对于qos  以前就不是很熟悉，今天粗略的看了下。 了解到了qos的分类  主要是一些命令的意思          3种服务类型            intserv    通过信令 rsvp协议  进行资源预留        diffserv     对不同的业务进行区分，分配不同优先级，拥塞时对高优先级的优先转发       besteffort    尽力交付 还需要找些资料仔细研究研究。

ipran-te

 今天去网管导出了些脚本研究了下，主要是tunnel的创建。    单链的CSG只有一条到ASG的tunnel 。双归环的CSG有到主备ASG的tunnel。     在ASG上，有到其下挂接入环的tunnel和到主备RSG的tunnel  。