王清培_个人页

万级TPS亿级流水-中台账户系统架构设计

我们需要给所有前台业务提供统一的账户系统，用来支撑所有前台产品线的用户资产管理，统一提供支持大并发万级TPS、亿级流水、数据强一致、风控安全、日切对账、财务核算、审计等能力，在万级TPS下保证绝对的数据准确性和数据溯源能力。 >注：资金类系统只有合格和不合格，哪怕数据出现只有0.01分的差错也是不合格的，局部数据不准也就意味着全局数据都不可信。

golang 简单的读负责均衡

Mysql一分钟定位 Next-Key Lock，你需要几分钟

golang 服务大量 CLOSE_WAIT 故障排查

golang 服务诡异499、504网络故障排查

事故经过 排查 总结 事故经过 11-01 12:00 中午午饭期间，手机突然收到业务网关非200异常报警，平时也会有一些少量499或者网络抖动问题触发报警，但是很快就会恢复（目前配置的报警阈值是5%，阈值跟当时的采样窗口qps有直接关系）。

golang 服务平滑重启小结

背景 golang 程序平滑重启框架 supervisor 出现 defunct 原因 使用 master/worker 模式 背景 在业务快速增长中，前期只是验证模式是否可行，初期忽略程序发布重启带来的暂短停机影响。

Elasticsearch 评分排序

背景 通过脚本改变评分 背景 近期有一个需求，需要对优惠券可用商品列表加个排序，只针对面值类的券不包括折扣券。 需求是这样的，假设有一张面值券 50 块钱，可用商品列表 A 100、B 40、C 10，当用户查询当前券可用商品列表的时候优先将卡券可以直接抵扣且不需要用户在额外支付的商品排在前面。

zookeeper 实现分布式锁安全用法

背景 ConnectionLoss 链接丢失 SessionExpired 会话过期 绕开 zookeeper broker 进行状态通知 leader 选举与zkNode 断开 做好幂等 静态扩容、动态扩容 背景 分布式锁现在用的越来越多，通常用来协调多个并发任务。

诡异的druid链接池链接断开故障经验总结

诡异的druid链接池链接断开故障经验总结 标签： druid mysql mysqlReplication haproxy shardingJDBC 背景 症状 排查 修复 背景 最近在陆续做机房升级相关工作，配合DBA对产线数据库链接方式做个调整，将原来直接链接读库的地址切换到统一的读负载均衡的代理 haproxy 上，方便机柜和服务器的搬迁。

RabbitMQ 可靠投递

RabbitMQ 可靠投递 标签： RabbitMQ shovel-plugin ConfirmCallback RabbitMQ消息投递 背景 confirmCallback 确认模式 returnCallback 未投递到 queue 退回模式 shovel-plugin 跨机房可靠投递 背景 在使用 RabbitMQ 的时候，作为消息发送方希望杜绝任何消息丢失或者投递失败场景。

数据分表小结

微服务架构—自动化测试全链路设计

微服务架构—自动化测试全链路设计 标签：microServices autoTest mock unitTest testTrace 背景 被忽视的软件工程环节 - DEVTESTOPS 微服务架构下测试复杂度和效率问题 开发阶段 unitTest mock 外部依赖 连调阶段 mock 外部依.

数据结构与内存管理策略（下）

数据结构与内存管理策略（上）

后端服务性能压测实践

后端服务性能压测实践 标签（空格分隔）： 性能 压测 后端服务 压测实践 作者：王清培(Plen wang) 背景 环境检测 压力机及压力工具检测 Linux openfiles limit 设置 排查周边依赖 空接口压测检测 聚合报告中 throughput 计算 压测及性能排查方法 关注各纬度 log Linux 常规命令 性能排查两种方式（从上往下、从下往上） 总结 背景 最近大半年内有过两次负责性能压测的一些工作。

spring rest 容易被忽视的后端服务 chunked 性能问题

spring boot 容易被忽视的后端服务 chunked 性能问题 标签（空格分隔）： springboot springmvc chunked 背景 spring boot 创建的默认 spring mvc 项目 集成 JAX-RS 规范框架 Jersey 背景 在之前的一次性能压测的时候我们发现一个细节问题，我们使用 spring boot 创建的 web rest 项目，使用默认 spring mvc 作为 web rest 框架。

聊下 git 多账户问题

git 多账户问题 标签（空格分隔）：git github gitlab git多账户 背景 git 多账号配置 ssh 多密钥对配置 背景 在使用 git 的时候我们都会面临多账户问题，比较常见的就是公司内部的 gitlab，开源平台 github ，我们都需要在一台电脑上同时使用，这需要解决两个问题。

性能压测诡异的Requests/second 响应刺尖问题

最近一段时间都在忙着转java项目最后的冲刺，前期的coding翻代码、debug、fixbug都逐渐收尾，进入上线前的性能压测。 虽然不是大促前的性能压测要求，但是为了安全起见，需要摸个底心里有个数。

redis 简单使用总结

最近一段时间与redis接触比较频繁。发现有些东西还是工作中经常会用到的，自己也花了点时间巩固下。本篇文章主要是以总结性的方式梳理，因为redis的主题很大，任何一个技术点展开都是几篇文章的量。也可以说这篇文章是个概览。

Java 并发编程内部分享PPT分享

.NET程序员转向JAVA领域，必备技术首当其冲就是JAVA Concurrency 并发编程。 最近系统性的学习了 Doug Lea 《JAVA并发编程实战》一书。这书很有嚼劲，进入JAVA技术体系必看书籍之一。

alibaba druid 在springboot start autoconfig 下的bug

alibaba druid 在springboot start autoconfig下的bug 标签（空格分隔）：druid springboot start autoconfig 背景 发现、分析过程 总结 背景 最近在使用alibaba druid进行多数据源连接的时候无意中发现一个小bug，已经提交github issue 官方已经fix。

redisLock redis分布式锁

redis-lock redis setnx cmmand java object condition queue 条件队列 retrycount 带有重试次数限制 object wait time 带有超时时间的wait delete lock 删除远程锁 acquire lock 申请lock release lock 释放lock demo 演示 锁的粒度问题，锁分解、锁分段 github https://github.com/Plen-wang/redis-lock redis setnx 命令 redis setnx 命令特性 当指定key不存在时才设置。

记5.28大促压测的性能优化—线程池相关问题

目录： 1.环境介绍 2.症状 3.诊断 4.结论 5.解决 6.对比java实现 废话就不多说了，本文分享下博主在5.28大促压测期间解决的一个性能问题，觉得这个还是比较有意思的，值得总结拿出来分享下。

WebAPi的可视化输出模式(RabbitMQ、消息补偿相关）——所有webapi似乎都缺失的一个功能

最近的工作我在做一个有关于消息发送和接受封装工作。大概流程是这样的，消息中间件是采用rabbitmq，为了保证消息的绝对无丢失，我们需要在发送和接受前对消息进行DB落地。在发送前我会先进行DB的插入，单表插入，所以在性能上也是能接受的，单表插入做了压测基本上是一到两毫秒的时间，加上消息的发送（有ACK）再加上集群是两个节点的高可用（一个磁盘持久化节点），单台TPS基本上是在2000-3000左右。

log4net 自定义Layout日志字段

最近在使用log4net的时候有一个简单的需求，就是自定义个格式化输出符。这个输出符是专门用来帮我记录下业务ID、业务类型的。比如，“businessID:328593,businessType: orderID”。

聊下 git 使用前的一些注意事项

连接方式https、ssh 在使用git的时候，不管你的服务器是开源平台github还是私服gitlab，你都需要clone仓库到本地，这个clone的时候就需要你选择连接方式。这个连接方式决定了你与服务器交互的时候以一个什么协议进行。

.NET架构设计、框架设计系列文章总结

从事.NET开发到现在已经有七个年头了。慢慢的可能会很少写.NET文章了。不知不觉竟然走了这么多年，热爱.NET热爱c#。突然想对这一路的经历进行一个总结。 是时候开始下一阶段的旅途，希望这些文章可以在发挥点价值作用。

聊下 git remote prune origin

在你经常使用的命令当中有一个git branch –a 用来查看所有的分支，包括本地和远程的。但是时间长了你会发现有些分支在远程其实早就被删除了，但是在你本地依然可以看见这些被删除的分支。 你可以通过命令，git remote show origin 来查看有关于origin的一些信息，包括分支是否tracking。

聊下git pull --rebase

有一种场景是经常发生的。 大家都基于develop拉出分支进行并行开发，这里的分支可能是多到数十个。然后彼此在进行自己的逻辑编写，时间可能需要几天或者几周。在这期间你可能需要时不时的需要pull下远程develop分支上的同事的提交。

聊下git merge --squash

你经常会面临着将dev分支或者很多零散的分支merge到一个公共release分支里。 但是有一种情况是需要你处理的，就是在你的dev的分支里有很多commit记录。而这些commit是无需在release里体现的。

git 命令使用总结

聊下 git rebase -i 聊下 git merge --squash 聊下 git pull --rebase 聊下 git remote prune origin 聊下 git 使用前的一些注意事项 聊下 git 多账户问题

聊下 git rebase -i

在使用git作为源代码管理工具的时候，开发的时经常会面临一个常见的问题，多个commit 需要合并为一个完整的commit提交。 在一个基本的迭代周期里，你会有很多次commit，有跟配置文件相关的，有跟代码相关的，甚至有跟下次发布fixbug相关的。

ElasticSearch大数据分布式弹性搜索引擎使用

阅读目录： 背景 安装 查找、下载rpm包 、执行rpm包安装 配置elasticsearch专属账户和组 设置elasticsearch文件所有者 切换到elasticsearch专属账户测试能否成功启动 安装自启动elasticsearch servicewrapper包 下载el...

封装RabbitMQ.NET Library 的一点经验总结

这篇文章内容会很短，主要是想给大家分享下我最近在做一个简单的rabbitmq客户端类库的封装的经验总结，说是简单其实一点都不简单。为了节省时间我主要按照Library的执行顺序来介绍，在你看来这里仅仅是一个简单的经验总结，但是在我看来这些经验只有在你真正的封装rabbitmq客户端库的时候且将你的客户端安全稳定的发布上线后才会真的发现这些问题。

软件工程—思考项目开发那些事（一）

阅读目录： 1.背景 2.项目管理，质量、度量、进度 3.软件开发是一种设计活动而不是建筑活动 4.快速开发（简单的系统结构与复杂的业务模型） 5.技术人员的业务理解与产品经理的业务理解的最终业务模型 5.

SOA架构设计经验分享—架构、职责、数据一致性

阅读目录： 1.背景介绍 2.SOA的架构层次 2.1.应用服务（原子服务） 2.2.组合服务 2.3.业务服务（编排服务） 3.SOA化的重构 3.1.保留服务空间，为了将来服务的组合 4.

新书出版《.NET框架设计—模式、配置、工具》感恩回馈社区！

很高兴我的第一本书由图灵出版社出版。本书总结了我这些年来对框架学习、研究的总结，里面纯干货，无半句废话。 书的详情请看互动网的销售页面：http://product.china-pub.com/3770890   精彩推荐： “这本书最大的价值就在于告诉你如何在实战中运用平时学到的知识，如何站在不同的角度分析和解决问题。

.NET程序员项目开发必知必会—Dev环境中的集成测试用例执行时上下文环境检查（实战）

Microsoft.NET 解决方案，项目开发必知必会。 从这篇文章开始我将分享一系列我认为在实际工作中很有必要的一些.NET项目开发的核心技术点，所以我称为必知必会。尽管这一系列是使用.NET/C#来展现，但是同样适用于其他类似的OO技术平台，这些技术点可能称不上完整的技术，但是它是经验的总结，是掉过多少坑之后的觉醒，所以有必要花几分钟时间记住它，在真实的项目开发中你就知道是多么的有帮助。

.NET应用架构设计—工作单元模式（摆脱过程式代码的重要思想，代替DDD实现轻量级业务）

阅读目录： 1.背景介绍 2.过程式代码的真正困境 3.工作单元模式的简单示例 4.总结 1.背景介绍 一直都在谈论面向对象开发，但是开发企业应用系统时，使用面向对象开发最大的问题就是在于，多个对象之间的互操作需要涉及数据库操作。

.NET应用架构设计—适当使用活动记录模式代替领域模型模式

阅读目录： 1.背景介绍 2.简单介绍领域模型模式、活动记录模式 3.活动记录模式的简单示例及要点 4.总结 1.背景介绍 对软件开发方法论有兴趣的博友应该发现最近“领域驱动设计”慢慢的被人发现被人实践起来，园子里也慢慢有了DDD的学习气氛和宝贵实战经验的分享。

.NET应用架构设计—表模块模式与事务脚本模式的代码编写

阅读目录： 1.背景介绍 2.简单介绍表模块模式、事务脚本模式 3.正确的编写表模块模式、事务脚本模式的代码 4.总结 1.背景介绍 要想正确的设计系统架构就必须能正确的搞懂每个架构模式的用意，而不是胡子眉毛一把抓。

.NET应用架构设计—重新认识分层架构（现代企业级应用分层架构核心设计要素）

阅读目录： 1.背景介绍 2.简要回顾下传统三层架构 3.企业级应用分层架构（现代分层架构的基本演变过程） 3.1.服务层中应用契约式设计来解决动态条件不匹配错误（通过契约式设计模式来将问题在线下暴露出来） 3.

.NET应用架构设计—面向对象分析与设计四色原型模式（彩色建模、领域无关模型）（概念版）

阅读目录： 1.背景介绍 2.问自己，UML对你来说有意义吗？它帮助过你对系统进行分析、建模吗？ 3.一直以来其实我们被一个缝隙隔开了，使我们对OOAD遥不可及 4.四色原型模式填补这个历史缝隙，让我们真的看见OOAD的希望 5.在四色原型上运用彩色建模增强视觉冲击力 6.通过四色原型模式建模出领域无关模型 7.结束语：建模时你可以不考虑具体实现，但是建模者要懂技术实现 1.背景介绍 至今我都清楚的记得我第一次被面试官问起什么叫”建模“技术时的情景，那是好几年前的事情了，当时是胸有成竹的去面试一个有关系统分析、设计的.NET高级软件工程师岗位。

.NET应用架构设计—服务端开发多线程使用小结（多线程使用常识）

有一段时间没有更新博客了，最近半年都在着写书《.NET框架设计—大型企业级框架设计艺术》，很高兴这本书将于今年的10月份由图灵出版社出版，有关本书的具体介绍等书要出版的时候我在另写一篇文行做介绍。可以先透露一下，本书是博主多年来对应用框架学习的总结，里面包含了十几个重量级框架模式，这些模式都是我们目前所经常使用到的，对于学习框架和框架开发来说是很好的参考资料，大家敬请期待。

.NET系列文章——近一年文章分类整理，方便各位博友们查询学习

由于博主今后一段时间可能会很忙（准备出书：《.NET框架设计—模式、配置、工具》，外加换了新工作），所以博客会很少更新； 在最近一年左右时间里，博主各种.NET技术类型的文章都写过，根据博友们的反馈觉得还不错，所以应该有整理一下目录的必要，防止随着时间的推移很多现在来说还比较新的技术文章到时候就不知名的石沉大海了；整理之后更方便大家查询，阅读，谢谢； .

.NET应用架构设计—面向查询的领域驱动设计实践（调整传统三层架构，外加维护型的业务开关）

阅读目录： 1.背景介绍 2.在业务层中加入核心领域模型（引入DomainModel，让逻辑、数据有家可归，变成一个完整的业务对象） 3.统一协调层Application Layer（加入协调层来转换DomianModel） 4.

.NET应用架构设计—面向查询服务的参数化查询设计（分解业务点，单独配置各自的数据查询契约）

阅读目录： 1.背景介绍 2.对业务功能点进行逻辑划分（如：A、B、C分别三个业务点） 2.1.配置映射关系，对业务点配置查询契约（构造VS插件方便生成查询契约） 2.2.将配置好的映射策略文件放在调用端，与服务不耦合 3.

.NET/ASP.NETMVC 大型站点架构设计—迁移Model元数据设置项（自定义元数据提供程序）

阅读目录： 1.需求背景介绍（Model元数据设置项应该与View绑定而非ViewModel） 1.1.确定问题域范围（可以使用DSL管理问题域前提是锁定领域模型）  2.迁移ViewModel设置到外部配置文件（扩展Model元数据提供程序） 2.

.NET/ASP.NETMVC 深入剖析 Model元数据、HtmlHelper、自定义模板、模板的装饰者模式（三）

阅读目录： 7.HtmlHelper、HtmlHelper中的ViewModel的类型推断 8.控制ViewModel中的某个属性的呈现（使用PartialView部分视图细粒度控制ViewModel的呈现） 9.

.NET/ASP.NETMVC 深入剖析 Model元数据、HtmlHelper、自定义模板、模板的装饰者模式（二）

阅读目录： 4.ModelMetadata（ModelMetadata元数据如何支撑Model与View之间的组合关系） 4.1.ModelMetadata元数据结构（元数据与数据实体的结构关系） 4.