Nginx高级应用--------性能优化,突破C100K

【引自asd1123509133的博客】1. 背景

介绍:

Nginx是一款高性能的HTTP和反向代理服务器,能够选择高效的epoll(linux2.6内核)、kqueue(freebsd)、eventport(solaris10)作为网络I/O模型,能够支持高达50000个并发连接数的响应,而内存、CPU等系统资源消耗却非常低、运行非常稳定。

选择的理由:

* 支持高并发连接:nginx使用高效的多路复用模型(epoll/linux, kqueue/freebsd, eventport/solaris)

* 内存消耗少:在服务器3W并发连接下,开启10个Nginx进程消耗150MB内存(15MB*10)

* 成本低廉:购买F5 BIG-IP、NetScaler等负载均衡交换机需要几十万RMB,而开源Nginx替代这些商业设备。

* 其他理由:网络配置简单;支持rewrite重写规则,能够根据域名、URL的不同、将HTTP请求分到不同的后端服务器群组;内置的健康检查功能;节省带宽,支持GZIP压缩,可以添加浏览器本地缓存的Header头;支持热部署,能够在不间断服务的情况下、对软件版本进行升级

2. 环境


  1. [root@nginx ~]$ uname -r  
  2. 2.6.32-642.13.1.el6.x86_64 
  3. [root@nginx ~]$ uname -m 
  4. x86_64 
  5. [root@nginx ~]$ cat /etc/redhat-release  
  6. CentOS release 6.8 (Final) 

3. 优化

* nginx配置文件优化

- nginx进程数,建议按照cpu数目来指定,一般为它的倍数:

- worker_processes 4;

- 为每个进程绑定cpu:

- worker_cpu_affinity 00000001 00000010 00000100 00001000;

- nginx进程打开的最多文件描述符数目:

- worker_rlimit_nofile 102400;

- 使用epoll的I/O复用模型:

- use epoll;

- 每个进程允许的最多连接数:

- worker_connections 102400;

- keepalive超时时间:

- keepalive_timeout 60;

- 客户端请求头部的缓冲区大小: (分页大小可以用命令getconf PAGESIZE取得):

- client_header_buffer_size 4k;

- 打开文件指定缓存,默认是没有启用的,max指定缓存数量,建议和打开文件数一致,inactive是指经过多长时间文件没被请求后删除缓存:

- open_file_cache max=102400 inactive=20s;

- 指定多长时间检查一次缓存的有效信息:

- open_file_cache_valid 30s;

- 设置最少使用次数,如果超过这个数字,文件描述符一直是在缓存中打开的:

- open_file_cache_min_uses 1;

* 系统优化

- timewait的数量,默认是180000。(Deven:因此如果想把timewait降下了就要把tcp_max_tw_buckets值减小):

- net.ipv4.tcp_max_tw_buckets = 6000

- 允许系统打开的端口范围:

- net.ipv4.ip_local_port_range = 1024 65000

- 启用timewait快速回收:

- net.ipv4.tcp_tw_recycle = 1

- 开启重用。允许将TIME-WAIT sockets重新用于新的TCP连接:

- net.ipv4.tcp_tw_reuse = 1

- 开启SYN Cookies,当出现SYN等待队列溢出时,启用cookies来处理:

- net.ipv4.tcp_syncookies = 1

- web应用中listen函数的backlog默认会给我们内核参数的net.core.somaxconn限制到128,而nginx定义的NGX_LISTEN_BACKLOG默认为511:

- net.core.somaxconn = 262144

- 允许送到队列的数据包的最大数目:

- net.core.netdev_max_backlog = 262144

- 系统中最多有多少个TCP套接字不被关联到任何一个用户文件句柄上:

- net.ipv4.tcp_max_orphans = 262144

- 记录的那些尚未收到客户端确认信息的连接请求的最大值:

- net.ipv4.tcp_max_syn_backlog = 262144

- 时间戳可以避免序列号的卷绕:

- net.ipv4.tcp_timestamps = 0

- 内核放弃连接之前发送SYN+ACK包:

- net.ipv4.tcp_synack_retries = 1

- 内核放弃建立连接之前发送SYN包的数量:

- net.ipv4.tcp_syn_retries = 1

- 保持在FIN-WAIT-2状态的时间:

- net.ipv4.tcp_fin_timeout = 1

- 当keepalive起用的时候,TCP发送keepalive消息的频度。缺省是2小时:

- net.ipv4.tcp_keepalive_time = 30

4. 总结

以需求驱动技术,技术本身没有优略之分,只有业务之分。

作者:asd1123509133

来源:51CTO

时间: 2024-11-10 00:24:13

Nginx高级应用--------性能优化,突破C100K的相关文章

Nginx服务器配置性能优化方案_nginx

高层的配置nginx.conf文件中,Nginx中有少数的几个高级配置在模块部分之上. user www-data; pid /var/run/nginx.pid; worker_processes auto; worker_rlimit_nofile 100000; user和pid应该按默认设置 - 我们不会更改这些内容,因为更改与否没有什么不同. worker_processes 定义了nginx对外提供web服务时的worker进程数.最优值取决于许多因素,包括(但不限于)CPU核的数量

阿里高级数据库专家何登成:AliSQL性能优化与功能突破的演进之路

首届阿里巴巴在线技术峰会(Alibaba Online Technology Summit),将于7月19日-21日 20:00-21:30 在线举办.本次峰会邀请到阿里集团9位技术大V,分享电商架构.安全.数据处理.数据库.多应用部署.互动技术.Docker持续交付与微服务等一线实战经验,解读最新技术在阿里集团的应用实践. 本次峰会全部开放,免费注册,3天夜间技术交流.每场1.5小时深度分享.长时间互动答疑.素材第一时间公开.用户组同步搭建, 我们希望搭建起业内开发者与阿里技术专家在线交流分享

Android高级开发之性能优化典范_Android

本章介绍android高级开发中,对于性能方面的处理.主要包括电量,视图,内存三个性能方面的知识点. 1.视图性能 (1)Overdraw简介     Overdraw就是过度绘制,是指在一帧的时间内(16.67ms)像素被绘制了多次,理论上一个像素每次只绘制一次是最优的,但是由于重叠的布 局导致一些像素会被多次绘制,而每次绘制都会对应到CPU的一组绘图命令和GPU的一些操作,当这个操作耗时超过16.67ms时,就会出现掉帧现象,表现为应用卡顿,所以对重叠不可见元素的重复绘制会产生额外的开销,需

【阿里在线技术峰会】何登成:AliSQL性能优化与功能突破的演进之路

本文根据阿里高级数据库专家何登成在首届阿里巴巴在线技术峰会上的分享整理而成.他主要介绍了AliSQL相对于MySQL进行的性能优化.通过大连接.高并发下的数据库稳定性保障和库存热点更新两个问题的解决方案介绍了高低水位限流和线程池的使用方法以及库存热点优化的三步改进,最后提出了AliSQL的完整生态体系. 直播视频:点此进入 PDF下载:点此进入 以下为整理内容. 背景:当使用官方的MySQL时,发现在我们的体量下会面临比较大的挑战,所以,2011年我们在MySQL的基础上做了一些功能增强和bug

《高性能Linux服务器构建实战》——1.6节Nginx性能优化技巧

1.6 Nginx性能优化技巧 1.6.1 编译安装过程优化1.减小Nginx编译后的文件大小在编译Nginx时,默认以debug模式进行,而在debug模式下会插入很多跟踪和ASSERT之类的信息,编译完成后,一个Nginx要有好几兆字节.而在编译前取消Nginx的debug模式,编译完成后Nginx只有几百千字节.因此可以在编译之前,修改相关源码,取消debug模式.具体方法如下:在Nginx源码文件被解压后,找到源码目录下的auto/cc/gcc文件,在其中找到如下几行: # debug

轻量级HTTP服务器Nginx:性能优化技巧

风信网(ithov.com)原创文章:以下内容针对Nginxhttp://www.aliyun.com/zixun/aggregation/14109.html">性能优化技巧进行说明,分别从编译安装过程优化.利用TCMalloc优化Nginx的性能和Nginx内核参数优化,希望对大家更深入的了解Nginx能起到一些帮助. 编译安装过程优化 1.减小Nginx编译后的文件大小 在编译Nginx时,默认以debug模式进行,而在debug模式下会插入很多跟踪和ASSERT之类的信息,编译完成

Nginx 服务器性能Bug和性能优化方案(真实经历)

一.遇到的问题 1.问题:本应该是3个ffmpeg ,但是怎么会有5个ffmpeg出现? 2.Lua脚本问题,一直写入日志,导致有大量的日志,这里的错误日志是直接写进nginx的error.log 日志文件的 (1)日志文件 total 1.8G -rw-r--r-- 1 root root 11M May 9 21:47 access.log -rw-r--r-- 1 root root 3.1K May 9 21:46 error.log -rw-r--r-- 1 root root 705

Android高级开发之性能优化典范

本章介绍android高级开发中,对于性能方面的处理.主要包括电量,视图,内存三个性能方面的知识点. 1.视图性能 (1)Overdraw简介 Overdraw就是过度绘制,是指在一帧的时间内(16.67ms)像素被绘制了多次,理论上一个像素每次只绘制一次是最优的,但是由于重叠的布 局导致一些像素会被多次绘制,而每次绘制都会对应到CPU的一组绘图命令和GPU的一些操作,当这个操作耗时超过16.67ms时,就会出现掉帧现象,表现为应用卡顿,所以对重叠不可见元素的重复绘制会产生额外的开销,需要尽量减

突破瓶颈 数据库性能优化“路线图”

数据交互复杂度与频度的提升,导致了数据库在运维.迁移和规模扩展进程中的性能问题.作为一项确保企业IT基础部件健康运营的关键技术,数据库性能优化的实现路径和IT系统管理架构越来越密不可分. 南方某省级电信运营商的计费业务营账系统在上线运行后不久即出现性能问题.主要问题表现在最终用户的交互响应达不到预期,特别是在业务繁忙时段无法做出及时响应.从主机系统的角度观察,问题主要集中在系统的I/O(输入/输出)等待较大.而该营账系统由业务应用程序.甲骨文数据库.IBM AIX主机.IBM企业级存储服务器等部