Java Web技术经验总结(三)

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介:
  1. 在Spring项目中,如果需要配置spring xml文件,要注意,将顶部的schema信息中的版本信息去掉,这样xml配置文件就不会跟具体的spring版本耦合;而且还可以避免一些诡异的问题,例如下面这种异常

    org.xml.sax.SAXParseException :schema_reference.4: 无法读取方案文档
    'http://www.springframework.org/schema/beans/spring-beans-3.0.xsd',
    原因为 1) 无法找到文档; 2) 无法读取文档; 3) 文档的根元素不是 <xsd:schema>。

    这种错误的原因是:spring xml配置文件中指定的xsd文件读取不到了,原因多是因为断网或spring的官网暂时无法连接导致的。
    参考:Spring如何加载XSD文件(org.xml.sax.SAXParseException: Failed to read schema document错误的解决方法)

  2. 在Spring + MyBatis项目中,写SQL语句的时候,要注意返回null的情况,例如:

    <select id="getFileSize" resultType="Long">
    SELECT sum(file_size) as fileSize
    FROM file_nodes
    WHERE uid=#{uid}
    </select>

    上述SQL语句,有可能返回null,因此resultType必须用Long,且Dao层的返回值也要用Long,并且需要在调用方做出判断和处理,否则会报空指针错误。

  3. awk,用于日志分析和数据统计。例如,最近有个数据统计的需求,那么命令awk -F '[:,]' '{s[$4] += $6; a[$4] += $8}END{for(i in s){print i, s[i], a[i]}}' OFS="\t" odsToolResBak可完成的工作是:将一个json字符串组成的日志文件,按照冒号和分号切割,并按照第4列分组,分别求第6列和第8列的和,最后每行的结果直接用'\t'分割。参考资料如下:

  4. vim,另一个上古神器,要熟悉常用的命令,例如10,100w!>>test.txt,该命令可将10行到100行的内容复制到另一个文件test.txt中;参考资料如下:

  5. 分享一个匹配中国大陆的有效手机号码的正则表达式:点我。另外,使用Java进行正则匹配的教程,可以参考:Java正则表达式

  6. Thymeleaf是一种用于代替JSP的新兴技术,Spring提供了与Thymeleaf的原生模板(nature template)协作的视图解析器。Thymeleaf与Velocity不同的地方在于,它看起来就像是原生的Html页面,不过在Html标签中增加了访问Spring bean的功能,并且可以直接在浏览器中打开。一言以蔽之:页面即原型。关于Thymeleaf的介绍可以参看这篇文章:新一代Java模板引擎Thymeleaf

  7. 别返回null值:当一个方法返回Collection集合的时候,不要返回null,如果没有结果则返回空的集合(例如:Collections.emptyList();),这样该方法的客户就不需要判断null的逻辑。这就是Java开发中的特例模式的应用。

  8. 如何学习开源项目,例如Spring?接触Spring近一年了,零零碎碎看了很多资料,看得阅读,就能将越多零碎的知识点拼接在一起,对Spring的整体设计思路也有渐渐加深的体会。整理一点优质材料在这里吧:

    • 好书
      • 《Spring揭秘》,关于Spring的技术图书,这本最好,具体怎么好?读了就知道,喜欢探究原理的人读起来一气呵成,很hi;
      • 《Spring实战 第4版》,最近国内刚出中文版,这本书的特点就是:知识点整理清楚,例子完整。虽然少了点原理讲解,比较适合Spring入门;
      • 《Spring技术内幕》,这本书去年浏览过一次,对代码的走读不错,但是有些原理性、设计思想阐述得不够深刻;
    • 好文
      • 我为什么要做瞎子摸象的践行者,文中的“如果一个事物庞大到你无法一眼就看透它,了解它, 那么, 不妨先一小块儿一小块儿的去探索,然后再结合你探索的这些碎片成果进行拼装和推演, 慢慢地,你就会对这个庞然大物有了更多的了解(当然, 是否能够完全了解,我就不敢妄言了)”这句,非常适合用在这里。spring发展到现在的4.3,已经非常复杂且包含了太多内容,我们不可能一上来就掌握全局,只能一点一点去看。
      • Spring框架的设计理念和设计模式分析
  9. 今天遇到一个应用启动失败的例子,一直处在tomcat wait的状态,查了很多问题没发现原因,最后才想到要看线程堆栈,用命令jstack pid >> temp.123将线程堆栈dump到文件中,发现某个bean初始化的时候依赖了第三方服务,而部署的机器跟那个服务属于两个独立环境,因此线程在这里Hold住了。

    • 当发现应用表现为性能低下、启动卡主时,要使用jstack看线程堆栈;
    • 当发现应用表现为内存gc异常,要使用jstat查看内存使用情况
  10. 今天对应用做性能测试的时候,发现CPU一直打满,由于该应用中大量应用了异步任务,怀疑是线程太多导致的CPU争用。根据关于JVM CPU资源占用过高的问题排查一文的提示,首先通过top命令,获得JVM进程的PID;然后用命令top -H -p PID,获得JVM中各个线程的运行情况,可以看到某些进程消耗的CPU一直在90多,记录这些线程的thread id,并转成十六进制;然后用命令jstack -l PID >> temp.123将JVM的运行栈打印到文件中,然后利用上述的十六进制thread_id在文件中查找,就可以看该线程的CPU都消耗在哪里了。
    通过抓堆栈发现,那些占用CPU比例过高的线程都是http处理线程:要不就是在等待请求到来;要不就是在处理一个JSON字符串——String responseContent = JSON.toJSONString(retResponse);,然后我们把这个retResponse打印出来一看,NND,这个对象得有1kb大小,好的,那就是这个东西占用了大量的CPU时间!

  11. 在性能问题上,有两个低级问题首先要排除:(1)大对象的json序列化;(2)日志级别要调到warn级别,不能在debug级别上进行压测。

  12. 最新的版本:fastjson 1.2.11版本,据说性能比1.1有了很大提升,建议升级。


相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
2天前
|
SQL 负载均衡 安全
安全至上:Web应用防火墙技术深度剖析与实战
【10月更文挑战第29天】在数字化时代,Web应用防火墙(WAF)成为保护Web应用免受攻击的关键技术。本文深入解析WAF的工作原理和核心组件,如Envoy和Coraza,并提供实战指南,涵盖动态加载规则、集成威胁情报、高可用性配置等内容,帮助开发者和安全专家构建更安全的Web环境。
9 1
|
7天前
|
SQL 监控 Java
技术前沿:Java连接池技术的最新发展与应用
本文探讨了Java连接池技术的最新发展与应用,包括高性能与低延迟、智能化管理和监控、扩展性与兼容性等方面。同时,结合最佳实践,介绍了如何选择合适的连接池库、合理配置参数、使用监控工具及优化数据库操作,为开发者提供了一份详尽的技术指南。
20 7
|
9天前
|
移动开发 前端开发 Java
过时的Java技术盘点:避免在这些领域浪费时间
【10月更文挑战第14天】 在快速发展的Java生态系统中,新技术层出不穷,而一些旧技术则逐渐被淘汰。对于Java开发者来说,了解哪些技术已经过时是至关重要的,这可以帮助他们避免在这些领域浪费时间,并将精力集中在更有前景的技术上。本文将盘点一些已经或即将被淘汰的Java技术,为开发者提供指导。
41 7
|
5天前
|
SQL Java 数据库连接
在Java应用中,数据库访问常成为性能瓶颈。连接池技术通过预建立并复用数据库连接,有效减少连接开销,提升访问效率
在Java应用中,数据库访问常成为性能瓶颈。连接池技术通过预建立并复用数据库连接,有效减少连接开销,提升访问效率。本文介绍了连接池的工作原理、优势及实现方法,并提供了HikariCP的示例代码。
16 3
|
5天前
|
SQL 监控 Java
Java连接池技术的最新发展,包括高性能与低延迟、智能化管理与监控、扩展性与兼容性等方面
本文探讨了Java连接池技术的最新发展,包括高性能与低延迟、智能化管理与监控、扩展性与兼容性等方面。同时,结合最佳实践,介绍了如何选择合适的连接池库、合理配置参数、使用监控工具及优化数据库操作,以实现高效稳定的数据库访问。示例代码展示了如何使用HikariCP连接池。
7 2
|
7天前
|
Java 数据库连接 数据库
优化之路:Java连接池技术助力数据库性能飞跃
在Java应用开发中,数据库操作常成为性能瓶颈。频繁的数据库连接建立和断开增加了系统开销,导致性能下降。本文通过问题解答形式,深入探讨Java连接池技术如何通过复用数据库连接,显著减少连接开销,提升系统性能。文章详细介绍了连接池的优势、选择标准、使用方法及优化策略,帮助开发者实现数据库性能的飞跃。
16 4
|
5天前
|
Java 数据库连接 数据库
深入探讨Java连接池技术如何通过复用数据库连接、减少连接建立和断开的开销,从而显著提升系统性能
在Java应用开发中,数据库操作常成为性能瓶颈。本文通过问题解答形式,深入探讨Java连接池技术如何通过复用数据库连接、减少连接建立和断开的开销,从而显著提升系统性能。文章介绍了连接池的优势、选择和使用方法,以及优化配置的技巧。
10 1
|
5天前
|
算法 Java 数据库连接
Java连接池技术,从基础概念出发,解析了连接池的工作原理及其重要性
本文详细介绍了Java连接池技术,从基础概念出发,解析了连接池的工作原理及其重要性。连接池通过复用数据库连接,显著提升了应用的性能和稳定性。文章还展示了使用HikariCP连接池的示例代码,帮助读者更好地理解和应用这一技术。
15 1
|
5天前
|
负载均衡 监控 算法
论负载均衡技术在Web系统中的应用
【11月更文挑战第4天】在当今高并发的互联网环境中,负载均衡技术已经成为提升Web系统性能不可或缺的一环。通过有效地将请求分发到多个服务器上,负载均衡不仅能够提高系统的响应速度和处理能力,还能增强系统的可扩展性和稳定性。本文将结合我参与的一个实际软件项目,从项目概述、负载均衡算法原理以及实际应用三个方面,深入探讨负载均衡技术在Web系统中的应用。
29 2
|
7天前
|
SQL Java 数据库连接
打破瓶颈:利用Java连接池技术提升数据库访问效率
在Java应用中,数据库访问常成为性能瓶颈。连接池技术通过预建立并复用数据库连接,避免了频繁的连接建立和断开,显著提升了数据库访问效率。常见的连接池库包括HikariCP、C3P0和DBCP,它们提供了丰富的配置选项和强大的功能,帮助优化应用性能。
24 2