登录 |  注册
首页 >  架构·案例 >  架构师学习之路-Java开发实战学习笔记 >  java线程切换消耗时间排查-借助top指令对cpu消耗分析

java线程切换消耗时间排查-借助top指令对cpu消耗分析

top指令.png

在Linux中,CPU主要用于中断、内核以及用户进程的任务处理,优先级为中断>内核>用户进程,在学习如何分析CPU消耗状况前。先要掌握三个重要的概念

1、上下文切换

每个CPU在同一时间只能执行一个线程,Linux采用的是抢占式调度,即为每个线程分配一定的执行时间,当到达执行时间、线程中有IO阻塞或高级优先线程要执行时,Linux将切换执行线程,在切换时要存储目前线程的执行状态,并要恢复要执行的线程状态,这个过程称为上下文切换。对于java应用,典型的是进行文件IO操作、网络IO操作、锁等待或线程sleep时,当前线程会进入阻塞或休眠状态,从而促发上下文切换,上下文切换过多会造成内核占据较多的CPU使用,使得应用的相应速度下降。

2、运行队列

每个CPU核都维护了一个可运行的线程队列,例如一个4核的CPU,JAVA应用中启动了8个线程。且这8个线程都初一可运行的状态,那么在分配平均的情况下每个CPU中运行队列里就会有两个线程。通常而言,系统的load主要由cpu的运行队列来决定,假定以上状况运行维持了1分钟,那么这1分钟内系统load就会是2,但用于load是个复杂的值,因此也不是绝对的,运行队列值越大,就意味着线程会要消耗长时间才能执行完。Linux System and NetWork Performance Monitoring中建议控制在每个cpu核上的运行队列为1~3个。

3、利用率

CPU利用率为CPU在用户进程、内核、中断处理、IO等待以及空闲五个部分使用百分比,这5个值用来分析CPU消耗情况的关键指标。Linux System and NetWork Performance Monitoring中建议用户的CPU消耗/内核的CPU消耗的比率在65%~70%/30%~35%左右。

使用top命令查看

top - 23:22:02 up  5:47,  1 user,  load average: 0.00, 0.00, 0.00
Tasks: 107 total,   1 running, 106 sleeping,   0 stopped,   0 zombie
Cpu(s):  0.3%us,  0.3%sy,  0.0%ni, 99.3%id,  0.0%wa,  0.0%hi,  0.0%si,  0.0%st
Mem:   1017464k total,   359292k used,   658172k free,    56748k buffers
Swap:  2064376k total,        0k used,  2064376k free,   106200k cached

此信息关注第三行信息

0.4%us表示用户处理进程所占的百分比;0.3%sy表示内核线程处理所占的百分比;0.0%ni表示被nice命令改变优先级的任务所占的百分比;99.3%id表示CPU的空闲时间所占的百分比;0.0%wa表示为在执行过程中等待IO所占的百分比;0.0%hi表示硬件中断所占的百分比,0.0%si表示为软件中断所占的百分比。

对于多核或者对歌CPU,上面的显示或是多个cpu所占用的百分比的综合,因此会出现160%us这样的现象,如需要查看每个核的消耗情况,可在进入top视图后按1,就会按核来显示消耗情况

默认情况下top视图中显示的为进程的CPU消耗状况,在top视图中按shift+h后,可按线程查看CPU的消耗状况,

1313 root      20   0  165m 3848 3024 S  0.0  0.4   0:05.06 vmtoolsd
2767 xubo      20   0 14940 1176  904 R  0.3  0.1   0:02.93 top
1 root      20   0 19228 1428 1148 S  0.0  0.1   0:01.86 init
1949 root      20   0  150m  20m 4976 S  0.0  2.0   0:01.58 Xorg
2076 gdm       20   0  363m  14m  10m S  0.0  1.5   0:01.01 gdm-simple-gree

还可以使用pidstat  vmstat

pidstat是SYSSTAT中的工具,如须使用pidstat,请先安装SYSSTAT

当CPU消耗严重时,主要体现在us、sy、wa或hi的值变高,wa的值是IO等待造成的,hi的值变高主要是硬件中断造成的,例如网卡接收数据频繁的状况。

对于java应用而言,CPU消耗严重主要体现在us、sy两个值上,分别看看java应用在两个值高的情况下应如何寻找对应造成平静的 代码。

1 、us

当us值过高时,表示运行的应用消耗了大部分的CPU。在这宗情况下,对JAVA应用而言,最重要的为找到具体消耗CPU的线程所执行的线程执行代码,可采用如下犯法做到。

首先通过linux提供的命令找到消耗CPU严重的线程及其ID,将线程ID转化为十六进制的值。之后通过 kill -3 [javapid]或jstack的方式dump出应用的java线程信息,通过之前转化出的十六进制的值找到对应的nid值的线程。该线程即为消耗CPU的线程,在采样时候须执行几次上述的过程,确保找到真实消耗CPU的线程

java应用造成us高的原因主要是线程一直处于可运行状态,通常是这些线程在执行无阻塞、循环、正则或纯粹的计算等动作造成;另外一个可能是频繁GC。如每次请求都需要分配较多的内存,当访问量搞的时候就将导致不断地进行GC,系统响应速度下降,进而造成堆积的请求更多,消耗的内存更严重,最严重的时候有肯能会导致系统不断的惊醒Full GC,对于频繁GC的状况要通过分析JVM内存消耗来查找原因

2、sy

当sy值高时,表示Linux花费了更多的时间在进行线程切换,Java应用造成这种现象的主要原因是启动的线程比较多,且这些线程多数处理不断的阻塞(如锁等待、IO等待状态)和执行状态的编号过程中,这就导致了操作系统要不断切换执行的线程,产生大量的上下文切换。在这种状况下,对Java应用,最重要的是找出线程不断切换状态的原因。

上一篇: 什么是SOA (面向服务的架构)
下一篇: Java强软弱虚四种引用,看完不再犯迷糊
推荐文章
  •    目前支持I/O多路复用的系统调用有  select,pselect,poll,epoll,I/O多路复用就是 通过一种机制,一个进程可以监视多个描述符,一旦某个描述符就绪(一般是读就绪或者写就绪),能够通知程序进行相应的读写操作。 但select,pselect,poll,epoll本质上都是
  • 架构师在进行系统设计时,遵循一套复杂且综合的方法论,主要包括以下核心步骤:需求分析:理解并明确业务需求是架构设计的第一步。架构师需要与各利益相关者深入沟通,收集和分析业务需求、性能需求、安全性需求、扩展性需求等。领域建模:基于需求分析,构建抽象的业务模型或数据模型,明确系统的边界、核心实体及其关系。
  • 根据阿里交易型业务的特点,以及在双十一这样业内罕有的需求推动下,我们在官方的MySQL基础上增加了非常多实用的功能、性能补丁。而在使用MySQL的过程中,数据一致性是绕不开的话题之一。本文主要从阿里巴巴“去IOE”的后时代讲起,向大家简单介绍下我们过去几年在MySQL数据一致性上的努力和实践,以及目
  • 随着深度学习在图像、语言、广告点击率预估等各个领域不断发展,很多团队开始探索深度学习技术在业务层面的实践与应用。而在广告CTR预估方面,新模型也是层出不穷:WideandDeep、DeepCrossNetwork、DeepFM、xDeepFM,美团很多篇深度学习博客也做了详细的介绍。但是,当
  • 1.背景搜索优化问题,是个典型的AI应用问题,而AI应用问题首先是个系统问题。经历近10年的技术积累和沉淀,美团搜索系统架构从传统检索引擎升级转变为AI搜索引擎。当前,美团搜索整体架构主要由搜索数据平台、在线检索框架及云搜平台、在线AI服务及实验平台三大体系构成。在AI服务及实验平台中,模型训练平台
  • 行业算法版简介OpenSearch-行业算法版是基于阿里巴巴自主研发的大规模分布式搜索引擎搭建的一站式智能搜索业务开发平台,目前为包括淘宝、天猫在内的阿里集团核心业务提供搜索服务支持。通过内置各行业的查询语义理解、机器学习排序算法等能力,提供充分开放的引擎能力,助力开发者快速搭建智能搜索服务。Ope
学习大纲