前置条件

需要安装perf及bcc-tools、sysstat工具。以redhat为例,安装命令如下:

yum install perf bcc-tools sysstat -y

通用分析流程

第一步、使用top工具

  • 观测CPU使用率是否过高;
  • 观察running进程数与状态为R进程数量否一致,如果数量不一致,进行第二步。

第二步、针对R状态的进程进行分析

  • 使用pidstat -p pid确认对应R状态的进程是否存在
  • 使用ps aux | grep pid验证进程是否存在,与pidstat进行交叉验证

    如果进程不存在,进行第三步,查找父进程

第三步、对应进程名的父进程

通过pstree 查找对应进程的父进程(pstree | grep 进程名称),找出出问题进程之后,执行第四步,获取更全面的性能数据进行分析。

第四步、录制当前系统性能指标数据

使用perf record -g对当前系统进程进行录制,录制时长大概15秒左右,按Ctrl+C退出录制。

第五步、分析数据找出异常调用

使用perf report 分析录制数据,找出异常数据指标,使用键盘方向键及回车键,查找到调用函数。

针对短时进程分析流程

第一步、使用top工具

观测CPU指标;观察running进程数与状态为R是否一致,如果书面不一致,进行第二步。

第二步、使用execsnoop工具获取父进程ID

该步骤需要安装bcc-tools工具,执行命令:/usr/share/bcc/tools/execsnoop 可以直接定位到父进程和子进程id。

第三步、录制当前系统性能指标数据

使用perf record -g对当前系统进程进行录制,录制时长大概15秒左右,按Ctrl+C退出录制。

第四步、分析数据找出异常调用

使用perf report 分析录制数据,找出异常数据指标,使用键盘方向键及回车键,查找到调用函数。

发表评论

电子邮件地址不会被公开。