[系统资源攻略]CPU使用率和负载

我们在搞性能测试的时候,对后台服务器的CPU利用率监控是一个常用的手段。服务器的CPU利用率高,则表明服务器很繁忙。如果前台响应时间越来越大,而后台CPU利用率始终上不去,说明在某个地方有瓶颈了,系统需要调优。这个是即使不懂技术的人都容易理解的事情。

上面理解对吗?我个人觉得不十分准确。这个要看后台你测试的进程是什么类型的。如果是计算密集型的进程,当前端压力越来越大的时候,很容易把CPU利用率打上去。但是如果是I/O网络密集型的进程,即使客户端的请求越来越多,但是服务器CPU不一定能上去,这个是你要测试的进程的自然属性决定的。比较常见的就是,大文件频繁读写的cpu开销远小于小文件频繁读写的开销。因为在I/O吞吐量一定时,小文件的读写更加频繁,需要更多的cpu来处理I/O的中断。

在Linux/Unix下,CPU利用率分为用户态,系统态和空闲态,分别表示CPU处于用户态执行的时间,系统内核执行的时间,和空闲系统进程执行的时间。平时所说的CPU利用率是指:CPU执行非系统空闲进程的时间 / CPU总的执行时间。

在Linux的内核中,有一个全局变量:Jiffies。 Jiffies代表时间。它的单位随硬件平台的不同而不同。系统里定义了一个常数HZ,代表每秒种最小时间间隔的数目。这样jiffies的单位就是1/HZ。Intel平台jiffies的单位是1/100秒,这就是系统所能分辨的最小时间间隔了。每个CPU时间片,Jiffies都要加1。 CPU的利用率就是用执行用户态+系统态的Jiffies除以总的Jifffies来表示。

cpu的利用率

在Linux系统中,可以用/proc/stat文件来计算cpu的利用率(详细的解释可参考:http://www.linuxhowtos.org/System/procstat.htm)。这个文件包含了所有CPU活动的信息,该文件中的所有值都是从系统启动开始累计到当前时刻。

# cat /proc/stat  
      0           1        2            3          4              5          6         7     
    cpu 432661 13295 86656 422145968 171474 233 5346 
    cpu0 123075 2462 23494 105543694 16586 0 4615 
    cpu1 111917 4124 23858 105503820 69697 123 371 
    cpu2 103164 3554 21530 105521167 64032 106 334 
    cpu3 94504 3153 17772 105577285 21158 4 24 
    intr 1065711094 1057275779 92 0 6 6 0 4 0 3527 0 0 0 70 0 20 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 7376958 0 0 0 0 0 0 0 1054602 0 0 0 0 0 0 0 30 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 
    ctxt 19067887 
    btime 1139187531 
    processes 270014 
    procs_running 1 
    procs_blocked 0   
     

输出解释

1 从系统启动开始累计到当前时刻,用户态的CPU时间(单位:jiffies) ,不包含 nice值为负进程。1jiffies=0.01秒
2 从系统启动开始累计到当前时刻,nice值为负的进程所占用的CPU时间(单位:jiffies)
3 从系统启动开始累计到当前时刻,核心时间(单位:jiffies)
4 从系统启动开始累计到当前时刻,除硬盘IO等待时间以外其它等待时间(单位:jiffies)
5 从系统启动开始累计到当前时刻,硬盘IO等待时间(单位:jiffies) ,
6 从系统启动开始累计到当前时刻,硬中断时间(单位:jiffies)
7 从系统启动开始累计到当前时刻,软中断时间(单位:jiffies) 

CPU时间=user+system+nice+idle+iowait+irq+softirq

“intr”这行给出中断的信息,第一个为自系统启动以来,发生的所有的中断的次数;然后每个数对应一个特定的中断自系统启动以来所发生的次数。

“ctxt”给出了自系统启动以来CPU发生的上下文交换的次数。

“btime”给出了从系统启动到现在为止的时间,单位为秒。

“processes (total_forks) 自系统启动以来所创建的任务的个数目。

“procs_running”:当前运行队列的任务的数目。

“procs_blocked”:当前被阻塞的任务的数目。

CPU利用率计算

那么CPU利用率可以使用以下两个方法。先取两个采样点,然后计算其差值:

    cpu usage=(idle2-idle1)/(cpu2-cpu1)*100 
    cpu usage=[(user_2 +sys_2+nice_2) - (user_1 + sys_1+nice_1)]/(total_2 - total_1)*100 
公式
    total_0USER[0]+NICE[0]+SYSTEM[0]+IDLE[0]+IOWAIT[0]+IRQ[0]+SOFTIRQ[0]  
    total_1=USER[1]+NICE[1]+SYSTEM[1]+IDLE[1]+IOWAIT[1]+IRQ[1]+SOFTIRQ[1]  
    cpu usage=(IDLE[0]-IDLE[1]) / (total_0-total_1) * 100 

总CPU使用率

#!/bin/sh      
    ##echo user nice system idle iowait irq softirq  
    CPULOG_1=$(cat /proc/stat | grep 'cpu ' | awk '{print $2" "$3" "$4" "$5" "$6" "$7" "$8}')  
    SYS_IDLE_1=$(echo $CPULOG_1 | awk '{print $4}')  
    Total_1=$(echo $CPULOG_1 | awk '{print $1+$2+$3+$4+$5+$6+$7}')  
     
    sleep 1  
     
    CPULOG_2=$(cat /proc/stat | grep 'cpu ' | awk '{print $2" "$3" "$4" "$5" "$6" "$7" "$8}')  
    SYS_IDLE_2=$(echo $CPULOG_2 | awk '{print $4}')  
    Total_2=$(echo $CPULOG_2 | awk '{print $1+$2+$3+$4+$5+$6+$7}')  
     
    SYS_IDLE=`expr $SYS_IDLE_2 - $SYS_IDLE_1`  
     
    Total=`expr $Total_2 - $Total_1`  
    SYS_USAGE=`expr $SYS_IDLE/$Total*100 |bc -l`  
     
    SYS_Rate=`expr 100-$SYS_USAGE |bc -l`  
     
    Disp_SYS_Rate=`expr "scale=3; $SYS_Rate/1" |bc`  
    echo $Disp_SYS_Rate%  

获得全部CPU相关的user sys wait hirq sirq util

#cat  cpu.sh
COLLECT_DIR=$(cd $(dirname $0}); pwd);
BASE_DIR=$(cd $COLLECT_DIR;cd ..;pwd);
source $BASE_DIR/libs/function.sh

CALCULATE_CPU(){
    #echo user nice system idle iowait irq softirq
    CPULOG_1=$(cat $READ_FILE | grep 'cpu ' | awk '{print $2" "$3" "$4" "$5" "$6" "$7" "$8}')
    total_1=$(echo $CPULOG_1 | awk '{print $1+$2+$3+$4+$5+$6+$7}')
	old_processes=$(cat /proc/stat |grep -w "processes" | awk '{print $2}')
	read user_1 nice_1 sys_1 idle_1 iowait_1 hard_1 soft_1 <<< `echo "$CPULOG_1" |awk '{print $1,$2,$3,$4,$5,$6,$7}'`

    sleep 1

    CPULOG_2=$(cat /proc/stat | grep 'cpu ' | awk '{print $2" "$3" "$4" "$5" "$6" "$7" "$8}')
    total_2=$(echo $CPULOG_2 | awk '{print $1+$2+$3+$4+$5+$6+$7}')
	new_processes=$(cat /proc/stat |grep -w "processes" | awk '{print $2}')
	read user_2 nice_2 sys_2 idle_2 iowait_2 hard_2 soft_2 <<< `echo "$CPULOG_2" |awk '{print $1,$2,$3,$4,$5,$6,$7}'`

	#OFFSET
	total_offset=`BC_SUBTRACTION $total_2 $total_1`
	user_offset=`BC_SUBTRACTION $user_2 $user_1`
	sys_offset=`BC_SUBTRACTION $sys_2 $sys_1`
    idle_offset=`BC_SUBTRACTION $idle_2 $idle_1`
	iowait_offset=`BC_SUBTRACTION $iowait_2 $iowait_1`
	hard_offset=`BC_SUBTRACTION $hard_2 $hard_1`
	soft_offset=`BC_SUBTRACTION $soft_2 $soft_1`

	#RESULT
	idle_util=`BC_DIVISION_100 $idle_offset $total_offset`
	util=`BC_SUBTRACTION 100 $idle_util`
	sys=`BC_DIVISION_100 $sys_offset $total_offset`
	user=`BC_DIVISION_100 $user_offset $total_offset`
	iowait=`BC_DIVISION_100 $iowait_offset $total_offset`
	hirq=`BC_DIVISION_100 $hard_offset $total_offset`
	sirq=`BC_DIVISION_100 $soft_offset $total_offset`
	processes=`BC_SUBTRACTION $new_processes $old_processes`

	#MESG
	MESG  "cpu使用" "sys" $sys  "%"
	MESG  "cpu使用" "user" $user "%"
	MESG  "cpu使用" "iowait" $iowait "%"
	MESG  "cpu使用" "hirq" $hirq "%"
	MESG  "cpu使用" "sirq" $sirq "%"
	MESG  "cpu使用" "util" $util "%"
}

LOOP_CPU(){
while [[ 1 == 1 ]];do
	sleep $INTERVAL
	CALCULATE_CPU
done
}

MAIN(){
	READ_FILE="/proc/stat"
	#注意,每个子脚本,这里是不同的!
	PID_KEY_NAME="CPU_PID"
	TIMEOUT LOOP_CPU
}
MAIN


单CPU使用率

CPU负载

获取方法:

#cat /proc/loadavg
0.00 0.03 0.05 1/690 1014

sysinfo获得cpu load数据

但是注意,这个方法,不适用于容器

[root@jiangyi01.sqa.zmf /home/ahao.mah/gotby/tool]
#cat sysinfo.c
#include <stdio.h>
#include <sys/sysinfo.h>
int main(int argc, char *agrv[]) {
  struct sysinfo s_info;
  int error;
  error = sysinfo(&s_info);
  printf("load1:  %f
load5: %f
load10: %f
",
    (double)s_info.loads[0]/65536.0,
    (double)s_info.loads[1]/65536.0,
    (double)s_info.loads[2]/65536.0);
  printf("available: %lu
", s_info.freeram/1024);
  printf("total: %lu
", s_info.totalram/1024);
  printf("mem_unit: %u 
", s_info.mem_unit)/1024;
  return 0;
}
[root@jiangyi01.sqa.zmf /home/ahao.mah/gotby/tool]
#./sysinfo
load1:  0.002930
load5: 0.030762
load10: 0.045410
available: 86632160
total: 98795000
mem_unit: 1
原文地址:https://www.cnblogs.com/muahao/p/6135230.html