Apache Prefork、Worker和Event几种MPM深入分析

Apache 2.X  支持插入式并行处理模块,称为多 路处理模块 (MPM)。在编译apache时必须选择也只能选择一个MPM,对类UNIX系统,有几个不同的MPM可供选择,它们会影响到apache的速度和可伸缩性。

Prefork MPM : 这个多路处理模块 (MPM) 实现了一个非线程型的、预派生的 web 服务器,它的工作方式类似于 Apache 1.3 。它适合于没有线程安全库,需要避免线程兼容性问题的系统。它是要求将每个请求相互独立的情况下最好的 MPM ,这样若一个请求出现问题就不会影响到其他请求。

这个 MPM 具有很强的自我调节能力,只需要很少的配置指令调整。最重要的是将 MaxClients 设置为一个足够大的数值以处理潜在的请求高峰,同时又不能太大,以致需要使用的内存超出物理内存的大小。

Worker MPM: 此多路处理模块 (MPM) 使网络服务器支持混合的多线程多进程。由于使用线程来处理请求,所以可以处理海量请求,而系统资源的开销小于基于进程的 MPM 。但是,它也使用了多进程,每个进程又有多个线程,以获得基于进程的 MPM 的稳定性。

每个进程可以拥有的线程数量是固定的。服务器会根据负载情况增加或减少进程数量。一个单独的控制进程 ( 父进程 ) 负责子进程的建立。每个子进程可以建立 ThreadsPerChild数量的服务线程和一个监听线程,该监听线程监听接入请求并将其传递给服务线程处理和应答。

不管是Worker模式或是Prefork 模式,Apache 总是试图保持一些备用的 (spare) 或者是空闲的子进程 (空闲的服务线程池)用于迎接即将到来的请求。这样客户端就不需要在得到服务前等候子进程的产生。

Event MPM:以上两种稳定的 MPM 方式在非常繁忙的服务器应用下都有些不足。尽管 HTTP 的 Keepalive 方式能减少 TCP 连接数量和网络负载,但是  Keepalive 需要和服务进程或者线程绑定,这就导致一个繁忙的服务器会耗光所有的线程。 Event MPM是解决这个问题的一种新模型,它把服务进程从连接中分离出来。在服务器处理速度很快,同时具有非常高的点击率时,可用的线程数量就是关键的资源限 制,此时 Event MPM 方式是最有效的。一个以 Worker MPM 方式工作的繁忙服务器能够承受每秒好几万次的访问量(例如在大型新闻服务站点的高峰时),而 Event MPM 可以用来处理更高负载。值得注意的是, Event MPM 不能在安全 HTTP ( HTTPS )访问下工作。

对于Event  模式, apache 给出了以下警告:

This MPM is experimental, so it may or may not work as expected .

这种MPM 目前处于试验状态,他可能不能按照预期的那样工作。

如何配置三种MPM                                                      

Prefork  是 UNIX 平台上默认的 MPM ,它所采用的预派生子进程方式也是 apache 1.3 中采用的模式。 prefork  本身并没有使用到线程, 2.0  版本使用它是为了与 1.3 版保持兼容性;另一方面, perfork 用单独的子进程来处理不同的请示,之程之间是彼此独立的,这也使其成为最稳定的 MPM 之一 。

如何查看当前安装的 Apache  的三种 MPM 。

[root@localhost apache]# httpd -l
Compiled in modules:
  core.c  prefork.c
  http_core.c
  mod_so.c
如果你看到 perfork.c  则表示当前为 perfork MPM 模式。 worker.c  则表示为  worker MPM 模式。

那么如何设置 apache 的 MPM 呢?

需要的 apache  配置安装的时候需要指定模式:

  [root@localhost httpd-2.4.1]# ./configure --prefix=/usr/local/apache2worker --enable-so --with-mpm=worker   [root@localhost httpd-2.4.1]# make
[root@localhost httpd-2.4.1]# make install
指定--with-mpm=NAME 选项指定 MPM , NAME就是你想使用的 MPM 的名称。 不指定模式的话,默认为Prefork MPM 。

那么如何配置成Event MPM?

同我上面的方法一样,只需要在安装的时候加上以下参数: --enable-nonportable-atomics=yes

需要注意的是Event MPM对于老的CPU 可能是不支持的。

三种MPM参数分析                                                   

不管你安装的是 apache哪种 MPM

在安装完成之后打开 .../apache/conf/extra/httpd-mpm.conf 文件,找到如下配置:

# perfork MPM

<IfModule mpm_prefork_module>StartServers 5
MinSpareServers 5
MaxSpareServers 10
MaxRequestWorkers 250
MaxConnectionsPerChild 0</IfModule>
# StartServers: 数量的服务器进程开始

# MinSpareServers: 最小数量的服务器进程,保存备用

# MaxSpareServers: 最大数量的服务器进程,保存备用

# MaxRequestWorkers: 最大数量的服务器进程允许开始

# MaxConnectionsPerChild: 最大连接数的一个服务器进程服务

prefork 控制进程在最初建立“StartServers”个子进程后,为了满足MinSpareServers设置的需要创建一个进程,等待一秒钟,继续创建两 个,再等待一秒钟,继续创建四个……如此按指数级增加创建的进程数,最多达到每秒32个,直到满足MinSpareServers设置的值为止。这种模式 可以不必在请求到来时再产生新的进程,从而减小了系统开销以增加性能。MaxSpareServers设置了最大的空闲进程数,如果空闲进程数大于这个 值,Apache会自动kill掉一些多余进程。这个值不要设得过大,但如果设的值比MinSpareServers小,Apache会自动把其调整为 MinSpareServers+1。如果站点负载较大,可考虑同时加大MinSpareServers和MaxSpareServers。 

MaxRequestsPerChild设置的是每个子进程可处理的请求数。每个子进程在处理了“MaxRequestsPerChild”个请求后将自 动销毁。0意味着无限,即子进程永不销毁。虽然缺省设为0可以使每个子进程处理更多的请求,但如果设成非零值也有两点重要的好处:

1、可防止意外的内存泄 漏。 2、在服务器负载下降的时侯会自动减少子进程数。

因此,可根据服务器的负载来调整这个值。

MaxRequestWorkers 指令集同时将服务请求的数量上的限制。任何连接尝试在 MaxRequestWorkerslimit 将通常被排队,最多若干基于上 ListenBacklog指令。

在apache2.3.13 以前的版本 MaxRequestWorkers 被称为 MaxClients 。

(MaxClients是这些指令中最为重要的一个,设定的是 Apache可以同时处理的请求,是对Apache性能影响最大的参数。其缺省值150是远远不够的,如果请求总数已达到这个值(可通过ps -ef|grep http|wc -l来确认),那么后面的请求就要排队,直到某个已处理请求完毕。这就是系统资源还剩下很多而HTTP访问却很慢的主要原因。虽然理论上这个值越大,可以 处理的请求就越多,但Apache默认的限制不能大于256。)

# worker MPM

<IfModule mpm_worker_module>StartServers 3
MinSpareThreads 75
MaxSpareThreads 250
ThreadsPerChild 25
MaxRequestWorkers 400
MaxConnectionsPerChild 0</IfModule>
# StartServers: 初始数量的服务器进程开始

# MinSpareThreads: 最小数量的工作线程,保存备用

# MaxSpareThreads: 最大数量的工作线程,保存备用

# ThreadsPerChild: 固定数量的工作线程在每个服务器进程

# MaxRequestWorkers: 最大数量的工作线程

# MaxConnectionsPerChild: 最大连接数的一个服务器进程服务

Worker 由主控制进程生成“StartServers”个子进程,每个子进程中包含固定的ThreadsPerChild线程数,各个线程独立地处理请求。同样, 为了不在请求到来时再生成线程,MinSpareThreads和MaxSpareThreads设置了最少和最多的空闲线程数;

而MaxRequestWorkers 设置了同时连入的clients最大总数。如果现有子进程中的线程总数不能满足负载,控制进程将派生新的子进程

MinSpareThreads和 MaxSpareThreads的最大缺省值分别是75和250。这两个参数对Apache的性能影响并不大,可以按照实际情况相应调节 。

ThreadsPerChild是worker MPM中与性能相关最密切的指令。ThreadsPerChild的最大缺省值是64,如果负载较大,64也是不够的。这时要显式使用 ThreadLimit指令,它的最大缺省值是20000。

Worker模式下所能同时处理的请求总数是由子进程总数乘以ThreadsPerChild 值决定的,应该大于等于MaxRequestWorkers。如果负载很大,现有的子进程数不能满足时,控制进程会派生新的子进程。默认最大的子进程总数是16,加大时 也需要显式声明ServerLimit(最大值是20000)。需要注意的是,如果显式声明了ServerLimit,那么它乘以 ThreadsPerChild的值必须大于等于MaxRequestWorkers,而且MaxRequestWorkers必须是ThreadsPerChild的整数倍,否则 Apache将会自动调节到一个相应值。

# event MPM

<IfModule mpm_event_module>StartServers 3
MinSpareThreads 75
MaxSpareThreads 250
ThreadsPerChild 25
MaxRequestWorkers 400
MaxConnectionsPerChild 0</IfModule>
# StartServers:初始数量的服务器进程开始

# MinSpareThreads: 最小数量的工作线程,保存备用

# MaxSpareThreads: 最大数量的工作线程,保存备用

# ThreadsPerChild: 固定数量的工作线程在每个服务器进程

# MaxRequestWorkers: 最大数量的工作线程

# MaxConnectionsPerChild: 最大连接数的一个服务器进程服务

时间: 2024-10-26 21:27:02

Apache Prefork、Worker和Event几种MPM深入分析的相关文章

Apache Prefork、Worker和Event三种MPM分析

三种MPM介绍                                                                                   Apache 2.X  支持插入式并行处理模块,称为多路处理模块(MPM).在编译apache时必须选择也只能选择一个MPM,对类UNIX系统,有几个不同的MPM可供选择,它们会影响到apache的速度和可伸缩性.  Prefork MPM : 这个多路处理模块(MPM)实现了一个非线程型的.预派生的web服务器,它的

Apache Prefork、Worker和Event三种MPM详解_Linux

Apache 2.X  支持插入式并行处理模块,称为多路处理模块(MPM).在编译apache时必须选择也只能选择一个MPM,对类UNIX系统,有几个不同的MPM可供选择,它们会影响到apache的速度和可伸缩性. Prefork MPM : 这个多路处理模块(MPM)实现了一个非线程型的.预派生的web服务器,它的工作方式类似于Apache 1.3.它适合于没有线程安全库,需要避免线程兼容性问题的系统.它是要求将每个请求相互独立的情况下最好的MPM,这样若一个请求出现问题就不会影响到其他请求.

Apache下prefork,worker,event模式详解

简单来讲: 1. prefork 中没有线程的概念,是多进程模型,一个进程处理一个连接:稳定:响应快.其缺点是在连接数比较大时就非常消耗内存. 2. worker 是多进程多线程模型,一个进程有多个线程,每个线程处理一个连接.与prefork相比,worker模式更节省系统的内存资源.不过,需要注意worker模式下的Apache与php等程序模块的兼容性. 3. event 是worker模式的变种,它把服务进程从连接中分离出来,在开启KeepAlive场合下相对worker模式能够承受的了更

Apache CarbonData:大数据生态一种新的高性能数据格式

Apache CarbonData是一种新的高性能数据存储格式,针对当前大数据领域分析场景需求各异而导致的存储冗余问题,CarbonData提供了一种新的融合数据存储方案,以一份数据同时支持"任意维度组合的过滤查询.快速扫描.详单查询等"多种应用场景,并通过多级索引.字典编码.列存等特性提升了IO扫描和计算性能,实现百亿数据级秒级响应.CarbonData是由华为开源贡献到Apache基金会的大数据项目,致力于推动大数据开源生态技术的发展. 随着数据与日俱增,业务驱动下的数据分析灵活性

【Spark Summit East 2017】Apache Toree:Spark的一种Jupyter内核

本讲义出自Marius van Niekerk在Spark Summit East 2017上的演讲,主要介绍了Toree的设计思想,Toree如何与Jupyter生态系统交互,以及用户如何借助强大的插件系统来扩展Apache Toree的功能. 目前许多数据科学家已经在利用Jupyter生态系统并进行数据分析,正在孵化中的Apache Toree是设计用于作为Spark网关,Apache Toree能让用户遵守Jupyter标准,这将允许用户非常简单地将Spark集成到已有的Jupyter生态

Linux Apache Web服务器安全的8种安全设置技巧_Linux

Apache服务器是一款开源的WEB服务器,是由非营利组织Apache软件基金会的支持的,我们很多的虚拟主机.VPS等都会使用Apache服务器架构环境,但是任何的架构环境都会遭受各种可能的攻击.安全漏洞的检测.SQL注入.各种拒绝服务攻击等. 作为我们VPS/服务器用户来说,我们一来需要多做备份确保服务器上网站数据的安全,二来还需要随时的观察我们服务器的监控动向,三来需要关注各种最新漏洞安全的更新脚本,作为基础的应用手段,我们需要确保基础的Apache安全设置,从基础上保证服务器的安全. 第一

Apache多路复用模块(MPMs)介绍_Linux

当整个世界都慢慢倾向于nginx的时候,如果你还在使用apache,那么你可能会用尽一切办法来保证速度.你也许会调整要加载的模块,使用Keepalive.摆弄内容协商模块(mod_negotiation,译注:从几个文档中选择一个最匹配客户端要求的文档).FollowSymLinks指令(译注:允许在此目录中使用软链接)以及重写功能:你甚至可能还会投入更多硬件,并假装自己没有.然而,如果你运营的网站非常繁忙而不想因为内存的原因而导致网站崩溃,那么你就应该关注你所使用的MPM. MPM,也叫多道处

高并发Web服务的演变——节约系统内存和CPU

高并发Web服务的演变--节约系统内存和CPU 一.越来越多的并发连接数 现在的Web系统面对的并发连接数在近几年呈现指数增长,高并发成为了一种常态,给Web系统带来不小的挑战.以最简单粗暴的方式解决,就是增加Web系统的机器和升级硬件配置.虽然现在的硬件越来越便宜,但是一味地通过增加机器来解决并发量的增长,成本是非常高昂的.结合技术优化方案,才是更有效的解决方法. 并发连接数为什么呈指数增长?实际上,从这几年的用户基数上看,这个数量并没有出现指数增长,因此它并非主要原因.主要原因,还是web变

apache的MPM模块介绍

一.MPM模块简介 多路处理模块,Multi-Processing Modules,MPM.负责绑定本机网络端口.接受请求,并调度子进程来处理请求. 二.MPM模块的类型 prefork 一个非线程型的.预派生的MPM worker 线程型的MPM,实现了一个混合的多线程多处理MPM,允许一个子进程中包含多个线程. event 一个标准workerMPM的实验性变种 mpm_winnt 用于Windows NT/windows 2000/Windows XP/windows 2003 系列的MP