如何灵活运用Linux进程资源监控和进程限制

每个 Linux 系统管理员都应该知道如何验证硬件、资源和主要进程的完整性和可用性。另外，基于每个用户设置资源限制也是其中一项必备技能。

在这篇文章中，我们会介绍一些能够确保系统硬件和软件正常工作的方法，这些方法能够避免潜在的会导致生产环境下线或钱财损失的问题发生。

报告 Linux 进程统计信息

你可以使用 mpstat 单独查看每个处理器或者系统整体的活动，可以是每次一个快照或者动态更新。

为了使用这个工具，你首先需要安装 sysstat：



    

  1. # yum update && yum install sysstat [基于 CentOS 的系统]  
    2. 

  2. # aptitutde update && aptitude install sysstat [基于 Ubuntu 的系统] 
    3. 

  3. # zypper update && zypper install sysstat [基于 openSUSE 的系统] 
    4. 



你可以在 Linux 中学习 Sysstat 和其中的工具 mpstat、pidstat、iostat 和 sar,了解更多和 sysstat 和其中的工具相关的信息。


安装完 mpstat 之后，就可以使用它生成处理器统计信息的报告。


你可以使用下面的命令每隔 2 秒显示所有 CPU(用-P ALL 表示)的 CPU 利用率(-u)，共显示3次。




    

  1. # mpstat -P ALL -u 2 3 
    2. 



示例输出：




    

  1. Linux 3.19.0-32-generic (tecmint.com) Wednesday 30 March 2016 _x86_64_ (4 CPU) 
    2. 

  2.  
    3. 

  3. 11:41:07 IST CPU %usr %nice %sys %iowait %irq %soft %steal %guest %gnice %idle  
    4. 

  4. 11:41:09 IST all 5.85 0.00 1.12 0.12 0.00 0.00 0.00 0.00 0.00 92.91  
    5. 

  5. 11:41:09 IST 0 4.48 0.00 1.00 0.00 0.00 0.00 0.00 0.00 0.00 94.53  
    6. 

  6. 11:41:09 IST 1 2.50 0.00 0.50 0.00 0.00 0.00 0.00 0.00 0.00 97.00  
    7. 

  7. 11:41:09 IST 2 6.44 0.00 0.99 0.00 0.00 0.00 0.00 0.00 0.00 92.57  
    8. 

  8. 11:41:09 IST 3 10.45 0.00 1.99 0.00 0.00 0.00 0.00 0.00 0.00 87.56  
    9. 

  9. 11:41:09 IST CPU %usr %nice %sys %iowait %irq %soft %steal %guest %gnice %idle 
    10. 

  10.  
    11. 

  11. 11:41:11 IST all 11.60 0.12 1.12 0.50 0.00 0.00 0.00 0.00 0.00 86.66  
    12. 

  12. 11:41:11 IST 0 10.50 0.00 1.00 0.00 0.00 0.00 0.00 0.00 0.00 88.50  
    13. 

  13. 11:41:11 IST 1 14.36 0.00 1.49 2.48 0.00 0.00 0.00 0.00 0.00 81.68  
    14. 

  14. 11:41:11 IST 2 2.00 0.50 1.00 0.00 0.00 0.00 0.00 0.00 0.00 96.50  
    15. 

  15. 11:41:11 IST 3 19.40 0.00 1.00 0.00 0.00 0.00 0.00 0.00 0.00 79.60  
    16. 

  16. 11:41:11 IST CPU %usr %nice %sys %iowait %irq %soft %steal %guest %gnice %idle  
    17. 

  17. 11:41:13 IST all 5.69 0.00 1.24 0.00 0.00 0.00 0.00 0.00 0.00 93.07
    18. 

  18.   
    19. 

  19. 11:41:13 IST 0 2.97 0.00 1.49 0.00 0.00 0.00 0.00 0.00 0.00 95.54  
    20. 

  20. 11:41:13 IST 1 10.78 0.00 1.47 0.00 0.00 0.00 0.00 0.00 0.00 87.75  
    21. 

  21. 11:41:13 IST 2 2.00 0.00 1.00 0.00 0.00 0.00 0.00 0.00 0.00 97.00  
    22. 

  22. 11:41:13 IST 3 6.93 0.00 0.50 0.00 0.00 0.00 0.00 0.00 0.00 92.57  
    23. 

  23. Average: CPU %usr %nice %sys %iowait %irq %soft %steal %guest %gnice %idle  
    24. 

  24. Average: all 7.71 0.04 1.16 0.21 0.00 0.00 0.00 0.00 0.00 90.89  
    25. 

  25. Average: 0 5.97 0.00 1.16 0.00 0.00 0.00 0.00 0.00 0.00 92.87 
    26. 

  26.  
    27. 

  27. Average: 1 9.24 0.00 1.16 0.83 0.00 0.00 0.00 0.00 0.00 88.78  
    28. 

  28. Average: 2 3.49 0.17 1.00 0.00 0.00 0.00 0.00 0.00 0.00 95.35  
    29. 

  29. Average: 3 12.25 0.00 1.16 0.00 0.00 0.00 0.00 0.00 0.00 86.59  
    30. 



要查看指定的 CPU（在下面的例子中是 CPU 0），可以使用：




    

  1. # mpstat -P 0 -u 2 3 
    2. 



示例输出：




    

  1. Linux 3.19.0-32-generic (tecmint.com)   Wednesday 30 March 2016     _x86_64_    (4 CPU) 
    2. 

  2. 11:42:08  IST  CPU    %usr   %nice    %sys %iowait    %irq   %soft  %steal  %guest  %gnice   %idle 
    3. 

  3. 11:42:10  IST    0    3.00    0.00    0.50    0.00    0.00    0.00    0.00    0.00    0.00   96.50 
    4. 

  4. 11:42:12  IST    0    4.08    0.00    0.00    2.55    0.00    0.00    0.00    0.00    0.00   93.37 
    5. 

  5. 11:42:14  IST    0    9.74    0.00    0.51    0.00    0.00    0.00    0.00    0.00    0.00   89.74 
    6. 

  6. Average:       0    5.58    0.00    0.34    0.85    0.00    0.00    0.00    0.00    0.00   93.23 
    7. 



上面命令的输出包括这些列：


    

  • CPU： 整数表示的处理器号或者 all 表示所有处理器的平均值。
    • 

  • %usr： 运行在用户级别的应用的 CPU 利用率百分数。
    • 

  • %nice： 和 %usr相同，但有 nice 优先级。
    • 

  • %sys： 执行内核应用的 CPU 利用率百分比。这不包括用于处理中断或者硬件请求的时间。
    • 

  • %iowait： 指定(或所有)CPU 的空闲时间百分比，这表示当前 CPU 处于 I/O 操作密集的状态。
    • 

  • %irq： 用于处理硬件中断的时间所占百分比。
    • 

  • %soft： 和%irq相同，但是是软中断。
    • 

  • %steal： 虚拟机非自主等待(时间片窃取)所占时间的百分比，即当虚拟机在竞争 CPU 时所从虚拟机管理程序那里“赢得”的时间。应该保持这个值尽可能小。如果这个值很大，意味着虚拟机正在或者将要停止运转。
    • 

  • %guest： 运行虚拟处理器所用的时间百分比。
    • 

  • %idle： CPU 没有运行任何任务所占时间的百分比。如果你观察到这个值很小，意味着系统负载很重。在这种情况下，你需要查看详细的进程列表、以及下面将要讨论的内容来确定这是什么原因导致的。
    • 



运行下面的命令使处理器处于极高负载，然后在另一个终端执行 mpstat 命令：




    

  1. # dd if=/dev/zero of=test.iso bs=1G count=1  
    2. 

  2. # mpstat -u -P 0 2 3 
    3. 

  3. # ping -f localhost # Interrupt with Ctrl + C after mpstat below completes 
    4. 

  4. # mpstat -u -P 0 2 3 
    5. 



最后，和 “正常” 情况下 mpstat 的输出作比较：




Linux 处理器相关统计信息报告


正如你在上面图示中看到的，在前面两个例子中，根据%idle的值可以判断 CPU 0 负载很高。


在下一部分，我们会讨论如何识别资源饥饿型进程，如何获取更多和它们相关的信息，以及如何采取恰当的措施。


Linux 进程报告


我们可以使用有名的ps命令，用-eo选项(根据用户定义格式选中所有进程) 和--sort选项(指定自定义排序顺序)按照 CPU 使用率排序列出进程，例如：




    

  1. # ps -eo pid,ppid,cmd,%cpu,%mem --sort=-%cpu 
    2. 



上面的命令只会显示PID、PPID、和进程相关的命令、 CPU 使用率以及 RAM 使用率，并按照 CPU 使用率降序排序。创建 .iso 文件的时候运行上面的命令，下面是输出的前面几行：




 根据 CPU 使用率查找进程


一旦我们找到了感兴趣的进程(例如PID=2822的进程)，我们就可以进入/proc/PID(本例中是/proc/2822) 列出目录内容。


这个目录就是进程运行的时候保存多个关于该进程详细信息的文件和子目录的目录。


例如：


    

  • /proc/2822/io：包括该进程的 IO 统计信息(IO 操作时的读写字符数)。
    • 

  • /proc/2822/attr/current：显示了进程当前的 SELinux 安全属性。
    • 

  • /proc/2822/cgroup：如果启用了 CONFIGCGROUPS 内核设置选项，这会显示该进程所属的控制组(简称cgroups)，你可以使用下面命令验证是否启用了 CONFIGCGROUPS：
    • 





    

  1. # cat /boot/config-$(uname -r) | grep -i cgroups 
    2. 



如果启用了该选项，你应该看到：




    

  1. CONFIG_CGROUPS=y 
    2. 



根据红帽企业版 Linux 7 资源管理指南第一到四章的内容、openSUSE 系统分析和调优指南第九章、Ubuntu 14.04 服务器文档Control Groups 章节，你可以使用cgroups管理每个进程允许使用的资源数目。


/proc/2822/fd这个目录包含每个打开的描述进程的文件的符号链接。下面的截图显示了 tty1(第一个终端) 中创建 .iso 镜像进程的相关信息：




 查找 Linux 进程信息


上面的截图显示 stdin(文件描述符 0)、stdout(文件描述符 1)、stderr(文件描述符 2) 相应地被映射到 /dev/zero、/root/test.iso 和 /dev/tty1。


在 Linux 中为每个用户设置资源限制


如果你不够小心、让任意用户使用不受限制的进程数，最终你可能会遇到意外的系统关机或者由于系统进入不可用的状态而被锁住。为了防止这种情况发生，你应该为用户可以启动的进程数目设置上限。


你可以在 /etc/security/limits.conf 文件末尾添加下面一行来设置限制：




    

  1. * hard nproc 10 
    2. 



第一个字段可以用来表示一个用户、组或者所有人(*)， 第二个字段强制限制可以使用的进程数目(nproc) 为 10。退出并重新登录就可以使设置生效。


然后，让我们来看看非 root 用户(合法用户或非法用户) 试图引起 shell fork 炸弹时会发生什么。如果我们没有设置限制， shell fork 炸弹会无限制地启动函数的两个实例，然后无限循环地复制任意一个实例。最终导致你的系统卡死。


但是，如果使用了上面的限制，fort 炸弹就不会成功，但用户仍然会被锁在外面直到系统管理员杀死相关的进程。




 运行 Shell Fork 炸弹


提示：limits.conf文件中可以查看其它 ulimit 可以更改的限制。


其它 Linux 进程管理工具


除了上面讨论的工具， 一个系统管理员还可能需要：


a) 通过使用 renice 调整执行优先级(系统资源的使用)。这意味着内核会根据分配的优先级(众所周知的 “niceness”，它是一个范围从-20到19的整数)给进程分配更多或更少的系统资源。


这个值越小，执行优先级越高。普通用户(而非 root)只能调高他们所有的进程的 niceness 值(意味着更低的优先级)，而 root 用户可以调高或调低任何进程的 niceness 值。


renice 命令的基本语法如下：




    

  1. # renice [-n] <new priority> <UID, GID, PGID, or empty> identifier 
    2. 



如果 new priority 后面的参数没有(为空)，默认就是 PID。在这种情况下，PID=identifier 的进程的 niceness 值会被设置为<new priority>


b) 需要的时候中断一个进程的正常执行。这也就是通常所说的“杀死”进程。实质上，这意味着给进程发送一个信号使它恰当地结束运行并以有序的方式释放任何占用的资源。


按照下面的方式使用 kill 命令杀死进程：




    

  1. # kill PID 
    2. 



另外，你也可以使用pkill结束指定用户(-u)、指定组(-G), 甚至有共同的父进程 ID (-P)的所有进程。这些选项后面可以使用数字或者名称表示的标识符。




    

  1. # pkill [options] identifier 
    2. 



例如：


杀死组GID=1000的所有进程.




    

  1. # pkill -G 1000 
    2. 



杀死PPID 是 4993的所有进程.




    

  1. # pkill -P 4993 
    2. 



在运行pkill之前，先用pgrep测试结果、或者使用-l选项列出进程名称是一个很好的办法。它需要和pkill相同的参数、但是只会返回进程的 PID(而不会有其它操作)，而pkill会杀死进程。




    

  1. # pgrep -l -u gacanepa 
    2. 



用下面的图片说明：




 在 Linux 中查找用户运行的进程


总结


在这篇文章中我们探讨了一些监控资源使用的方法，以便验证 Linux 系统中重要硬件和软件组件的完整性和可用性。我们也学习了如何在特殊情况下采取恰当的措施(通过调整给定进程的执行优先级或者结束进程)。我们希望本篇中介绍的概念能对你有所帮助。


本文作者：佚名


来源：51CTO
				


				
时间： 2024-11-02 12:21:25

		
		


		


	

	
	

		


		
如何灵活运用Linux进程资源监控和进程限制的相关文章


								

		

			

                Shell脚本实现Linux系统和进程资源监控
			

		

		

									

				 这篇文章主要介绍了Shell脚本实现Linux系统和进程资源监控,本文讲解了检查进程是否存在.检测进程 CPU 利用率.检测进程内存使用量.检测进程句柄使用量.,需要的朋友可以参考下     在服务器运维过程中,经常需要对服务器的各种资源进行监控,例如:CPU的负载监控,磁盘的使用率监控,进程数目监控等等,以在系统出现异常时及时报警,通知系统管理员.本文介绍在Linux系统下几种常见的监控需求及其shell脚本的编写. 文章目录: 1.Linux使用 Shell 检查进程是否存在 2.Linu			

		

	

				

		

			

                Shell脚本实现Linux系统和进程资源监控_基础知识
			

		

		

									

				在服务器运维过程中,经常需要对服务器的各种资源进行监控,例如:CPU的负载监控,磁盘的使用率监控,进程数目监控等等,以在系统出现异常时及时报警,通知系统管理员.本文介绍在Linux系统下几种常见的监控需求及其shell脚本的编写. 文章目录: 1.Linux使用 Shell 检查进程是否存在 2.Linux使用 Shell检测进程 CPU 利用率 3.Linux使用 Shell检测进程内存使用量 4.Linux使用 Shell检测进程句柄使用量 5.Linux使用 Shell查看某个 TCP 或			

		

	

				

		

			

                Linux进程资源用量监控和按用户设置进程限制
			

		

		

									

				由于 2016 年 2 月 2 号开始启用了新的 LFCS 考试要求,我们在已经发表的 LFCS 系列 基础上增加了一些必要的主题.为了准备考试,同时也建议你看看 LFCE 系列 文章. 每个 Linux 系统管理员都应该知道如何验证硬件.资源和主要进程的完整性和可用性.另外,基于每个用户设置资源限制也是其中一项必备技能. 在这篇文章中,我们会介绍一些能够确保系统硬件和软件正常工作的方法,这些方法能够避免潜在的会导致生产环境下线或钱财损失的问题发生. 报告 Linux 进程统计信息 你可以使用			

		

	

				

		

			

                使用shell脚本对Linux系统和进程资源进行监控
			

		

		

									

				Shell 语言对于接触 LINUX 的人来说都比较熟悉,它是系统的用户界面,提供了用户与内核进行交互操作的一种接口.它接收http://www.aliyun.com/zixun/aggregation/18678.html">用户输入的命令并把它送入内核去执行.实际上 Shell 是一个命令解释器,它解释由用户输入的命令并且把它们送到内核.它没有一般编程语言的"编译 - 链接 - 运行"过程.不仅如此,Shell 有自己的编程语言用于对命令的编辑,它允许用户编写由 s			

		

	

				

		

			

                cpustat：在Linux下根据运行的进程监控CPU使用率
			

		

		

									

				cpustat 是 Linux 下一个强大的系统性能测量程序,它用 Go 编程语言 编写.它通过使用 "用于分析任意系统的性能的方法(USE)",以有效的方式显示 CPU 利用率和饱和度. 它高频率对系统中运行的每个进程进行取样,然后以较低的频率汇总这些样本.例如,它能够每 200ms 测量一次每个进程,然后每 5 秒汇总这些样本,包括某些度量的最小/平均/最大值(min/avg/max). 推荐阅读: 监控 Linux 性能的 20 个命令行工具 cpustat 能用两种方式输出数据			

		

	

				

		

			

                linux系统编程之进程（一） 进程概述
			

		

		

									

				一.什么是进程 从用户的角度来看进程是程序的一次执行过程. 从操作系统的核心来看,进程是操作系统分配的内存.CPU时间片等资源的基本单位. 进程是资源分配的最小单位. 每一个进程都有自己独立的地址空间与执行状态. 像UNIX这样的多任务操作系统能够让许多程序同时运行,每一个运行着的程序就构成了一个进程. 二.进程数据结构 进程的静态描述:由三部分组成:PCB.有关程序段和该程序段对其进行操作的数据结构集. 进程控制块:用于描述进程情况及控制进程运行所需的全部信息. 代码段:是进程中能被进程调度程			

		

	

				

		

			

                Linux系统中的ps进程查看命令使用实例集锦
			

		

		

									

				  linux 中ps命令是Process Status的缩写.ps命令可以列出系统中当前运行的进程,所列出的进程是执行ps命令这个时刻正在运行的进程. 如果要动态显示进程信息,需要使用top命令. 通过ps命令,可以确定哪些进程正在运行和运行状态.进程是否结束.进程是否僵死,哪些进程占用过多资源等. 要杀死进程,使用kill命令,例:kill 12345 (12345为进程的pid) linux进程有5种状态 1.运行(正在运行或在运行队列中等待) 2.中断(休眠中,受阻,或等待某个条件的形成			

		

	

				

		

			

                在Linux系统中查看进程及杀死僵尸进程的方法
			

		

		

									

				  ps 命令 ps 命令就是最根本相应情况下也是相当强大地进程查看命令.运用该命令可以确定有哪些进程正在运行和运行地状态. 进程 是否结束.进程有没有僵死.哪些进程占用了过多地资源等等.总之大部分信息均为可以通过执行该命令得到地. ps 命令及其参数 ps 命令最经常使用地还是用于监控后台进程地工作情况,因为后台进程是不和屏幕键盘这些标准输入/输出设 备进行通信地,所以如果需要检测其情况,便可以运用 ps 命令了. 该命令语法格式如下: ps [选项] -e 显示所有进程,环境变量 -f 全格			

		

	

				

		

			

                十天学Linux内核之第二天---进程
			

		

		

									

				原文:十天学Linux内核之第二天---进程 都说这个主题不错,连我自己都觉得有点过大了,不过我想我还是得坚持下去,努力在有限的时间里学习到Linux内核的奥秘,也希望大家多指点,让我更有进步.今天讲的全是进程,这点在大二的时候就困惑了我,结果那个时候我就止步不前了,这里主要讲的是为何引入进程.进程在Linux空间是如何实现的,并且描述了所有与进程执行相关的数据结构,最后还会讲到异常和中断等异步执行流程,它们是如何和Linux内核进行交互的,下面我就来具体介绍一下进程的奥妙. 首先我们要明确一个