两步优化nginx,性能达到10万+并发
off999 2025-01-07 14:56 16 浏览 0 评论
Nginx介绍
nginx是一款来自俄罗斯开发人员开源的高性能的HTTP服务器和方向代理服务器,因为它的性能非常优秀,而且是免费,所以,在国内被广泛运用于web服务器、负载均衡服务器、邮件代理服务器。
它的性能非常优秀,是建立在非常强大的服务配置上,同时,性能优秀也不代表就不会有性能问题,作为性能测试人员,这款软件是必须要掌握的。
Nginx安装
nginx的安装方法很多,也可以支持不同的操作系统,但是,作为性能测试人员学习nginx,我还是建议选择一台centos7系统,然后,采用源码编译方式安装,因为,用这种方式,可以方便安装拓展插件。在性能测试中,经常需要使用性能监控,源码编译方式安装的nginx,可以用第三方监控插件来监控它。
- 首先,安装依赖
yum install make zlib zlib-devel gcc-c++ libtool openssl openssl-devel -y
- 然后,安装pcre软件
访问pcre软件下载页面,选择一个版本下载
cd /opt
wget https://sourceforge.net/projects/pcre/files/pcre/8.45/pcre-8.45.tar.gz && tar -xzvf pcre-8.45.tar.gz
cd pcre-8.45
./configure
make && make install
- 再,安装nginx
访问nginx的下载页面,选择一个版本下载
cd /opt
wget http://nginx.org/download/nginx-1.24.0.tar.gz && tar -xzvf nginx-1.24.0.tar.gz
cd nginx-1.24.0
./configure --prefix=/usr/local/nginx --with-http_stub_status_module --with-http_ssl_module --with-pcre=/opt/pcre-8.45
make && make install
启动nginx:/usr/local/nginx/sbin/nginx
配置文件:/usr/local/nginx/conf/nginx.conf
检查nginx配置文件:/usr/local/nginx/sbin/nginx -t
重新加载配置文件:/usr/local/nginx/sbin/nginx -s reload
停止nginx:/usr/local/nginx/sbin/nginx -s stop
Nginx配置
用源码编译安装,要看你把nginx安装在哪个路径,配置文件nginx.conf会在安装路径中,如上面的安装时指定了prefix参数,就是nginx的安装路径,所以,它的配置文件路径在/usr/local/nginx/config/nginx.conf。
#定义nginx运行的用户和用户组
#user nobody;
# 启动的进程数,一般依据CPU核数来定
worker_processes 2;
#nginx 默认没有开启利用多核 CPU, 通过增加 worker_cpu_affinity 配置参数来充分利用多核 CPU
#worker_cpu_affinity 00000001 00000010;
#全局错误日志配置
#error_log logs/error.log;
#错误日志级别[debug | info | notice | warn | errot | crit]
#error_log logs/error.log notice;
#error_log logs/error.log info;
#PID文件路径,记录nginx的进程ID
#pid logs/nginx.pid;
#工作模式
events {
#参考事件模型,use [ kqueue | rtsig | epoll | /dev/poll | select | poll ];
#epoll 模型是 Linux 2.6 以上版本内核中的高性能网络 I/O 模型,如果跑在 FreeBSD 上面,就用 kqueue 模型。
#epoll 是多路复用 IO(I/O Multiplexing) 中的一种方式,
#但是仅用于 linux2.6 以上内核,可以大大提高 nginx 的性能
use epoll;
#单个worker的最大并发链接数
#最大客户连接数由 worker_processes 和 worker_connections 决定
#即 max_client=worker_processes*worker_connections,
#在作为反向代理时:max_client=worker_processes*worker_connections / 4
worker_connections 1024;
#一个 nginx 进程打开的最多文件描述符数目,理论值应该是最多打开文件数
#(系统的值 ulimit -n)与 nginx 进程数相除,但是 nginx 分配请求并不均匀,
#所以建议与 ulimit -n 的值保持一致。
#worker_rlimit_nofile 1024;
}
#设置http服务器
http {
#文件扩展名与文件类型映射表
include mime.types;
#默认文件类型
default_type application/octet-stream;
#设置日志
#log_format main '$remote_addr - $remote_user [$time_local] "$request" '
# '$status $body_bytes_sent "$http_referer" '
# '"$http_user_agent" "$http_x_forwarded_for"';
#access_log logs/access.log main;
#服务器名字的 hash 表大小
server_names_hash_bucket_size 128;
#上传文件大小限制
client_header_buffer_size 32k;
#设定请求缓存
large_client_header_buffers 4 64k;
client_max_body_size 8m;
#sendfile 指令指定 nginx 是否调用 sendfile 函数(zero copy 方式)来输出文件,
#对于普通应用,必须设为 on,如果用来进行下载等应用磁盘IO重负载应用,可设置为 off,
#以平衡磁盘与网络I/O处理速度,降低系统的uptime.
sendfile on;
#开启目录列表访问,合适下载服务器,默认关闭。
#autoindex off;
#防止网络阻塞
#tcp_nopush on;
#tcp_nodelay on;
#客户端连接超时时长
#keepalive_timeout 0;
keepalive_timeout 65;
#客户端请求头超时时长
#client_header_timeout 10;
#客户端请求体超时时长
#client_body_timeout 10;
#告诉 nginx 关闭不响应的客户端连接,释放客户端所占有的内存空间
#reset_timedout_connection on;
#客户端响应超时时长,如果在这段时间内,客户端没有读取任何数据,nginx 就会关闭连接
#send_timeout 10;
########################################################
#FastCGI 相关参数是为了改善网站的性能:减少资源占用,提高访问速度。
#fastcgi_connect_timeout 300;
#fastcgi_send_timeout 300;
#fastcgi_read_timeout 300;
#fastcgi_buffer_size 64k;
#fastcgi_buffers 4 64k;
#fastcgi_busy_buffers_size 128k;
#fastcgi_temp_file_write_size 128k;
########################################################
#gzip压缩开关
#gzip on;
#最小压缩文件大小
#gzip_min_length 1k;
#压缩缓冲区
#gzip_buffers 4 16k;
#压缩版本(默认 1.1,前端如果是 squid2.5 请使用 1.0)
#gzip_http_version 1.0;
#压缩等级,gzip 压缩比,1 为最小,处理最快;9 为压缩比最大,处理最慢,传输速度最快,也最消耗 CPU;
#gzip_comp_level 2;
#压缩类型,默认就已经包含 text/html,所以下面就不用再写了,写上去也不会有问题,但是会有一个 warn。
#gzip_types text/plain application/x-javascript text/css application/xml;
#gzip_vary on;
########################################################
#开启IP连接数限制的时候使用
#limit_zone crawler $binary_remote_addr 10m;
#负载均衡
#upstream up_app {
# server 192.168.x.x:port;
# server 192.168.x.x:port;
#}
#server服务
server {
#监听端口,http协议默认80端口
listen 80;
#定义使用的域名,多个用空格隔开
server_name localhost;
#编码格式
#charset utf-8;
#access_log logs/host.access.log main;
location / {
root html;
index index.html index.htm;
}
#error_page 404 /404.html;
# redirect server error pages to the static page /50x.html
#
error_page 500 502 503 504 /50x.html;
location = /50x.html {
root html;
}
#图片缓存时间设置
#location ~ .*.(gif|jpg|jpeg|png|bmp|swf)$ {
# expires 10d;
#}
#JS 和 CSS 缓存时间设置
#location ~ .*.(js|css)?$ {
# expires 1h;
#}
# proxy the PHP scripts to Apache listening on 127.0.0.1:80
#
#location ~ \.php$ {
# proxy_pass http://127.0.0.1;
#}
# pass the PHP scripts to FastCGI server listening on 127.0.0.1:9000
#
#location ~ \.php$ {
# root html;
# fastcgi_pass 127.0.0.1:9000;
# fastcgi_index index.php;
# fastcgi_param SCRIPT_FILENAME /scripts$fastcgi_script_name;
# include fastcgi_params;
#}
# deny access to .htaccess files, if Apache's document root
# concurs with nginx's one
#
#location ~ /\.ht {
# deny all;
#}
}
# another virtual host using mix of IP-, name-, and port-based configuration
#
#server {
# listen 8000;
# listen somename:8080;
# server_name somename alias another.alias;
# location / {
# root html;
# index index.html index.htm;
# }
#}
# HTTPS server
#
#server {
# listen 443 ssl;
# server_name localhost;
#ssl证书文件位置
# ssl_certificate cert.pem;
#ssl证书key位置
# ssl_certificate_key cert.key;
#ssl配置参数
# ssl_session_cache shared:SSL:1m;
# ssl_session_timeout 5m;
#数字签名,此处使用MD5
# ssl_ciphers HIGH:!aNULL:!MD5;
# ssl_prefer_server_ciphers on;
# location / {
# root html;
# index index.html index.htm;
# }
#}
}
Nginx优化
从上面可以看到nginx的配置参数非常多,看得人头皮发麻,那要怎么才能做好nginx的性能优化呢?nginx是一个软件,这个软件安装在操作系统中,所以,nginx的性能受nginx的配置参数和操作系统参数限制,我们只需要做好这两方面的优化,nginx的性能就能得到提升。
nginx配置参数优化
- 工作进程与最大连接数
nginx支持的并发连接数越大,理论上能支持的并发用户数就越多,所以,从性能角度来说,期望这个越大越好。而这个值等于worker_processes与work_connections的乘积。worker_processes要看cpu的核数,如果设置固定数值,就要小于等于CPU核数,如果设置为auto,启动nginx时,会根据CPU的繁忙情况,自动参数worker数量。
work_connections是单个worker的最大连接数,这个值受系统ulimit的限制,ulimit -n可以看到系统一个进程允许打开的最大文件数量,同时系统还有/proc/sys/fs/file-max限制整个系统允许打开的最大文件数,即worker_processes与work_connections的乘积最大不能超过file-max的限制,所以,还要适当调整系统参数限制。
- 使用HTTP/2
HTTP/2使应用程序更快,更简单且更可靠。 HTTP/2的主要目标是通过启用完整的请求和响应多路复用来减少延迟,通过有效压缩 HTTP 标头字段来最小化协议开销,并增加对请求优先级和服务器推送的支持。
- 维护SSL会话
客户端每次发出请求时都进行新的 SSL 握手,默认情况下,内置会话缓存并不是最佳选择,因为它只能由一个工作进程使用,并且可能导致内存碎片,最好使用共享缓存。使用 ssl_session_cache 时,通过 SSL 保持连接的性能可以大大提高。
- 尽可能在server_name指令中使用确切的名称
确切名称,以星号开头的通配符名称和以星号结尾的通配符名称存储在绑定到侦听端口的三个哈希表中。首先搜索确切名称哈希表。 如果未找到名称,则搜索具有以星号开头的通配符名称的哈希表。 如果未在此处找到名称,则搜索带有通配符名称以星号结尾的哈希表。 搜索通配符名称哈希表比搜索精确名称哈希表要慢,因为名称是按域部分搜索的。
- 使用$request_uri来避免使用正则表达式
使用内置变量$request_uri,我们可以完全避免进行任何捕获或匹配。默认情况下,正则表达式的代价较高,并且会降低性能。
- 使用return代替rewrite做重定向
return 语句比通过位置块评估 RegEx 更简单,更快捷
nginx机器系统参数优化
- 系统最大线程数
修改/etc/security/limits.conf,在这个文件中,添加如下配置:
* soft nofile 1000000
* hard nofile 1000000
* soft nproc 655360
* hard nproc 655360
- 内存参数配置
我们可以使用sysctl -w 修改如下参数:
# 系统最大可以打开的句柄数
fs.file-max=2024000
#TIME_WAIT状态的socket,重新用于TCP连接
net.ipv4.tcp_tw_reuse=1
#调整keepalive的频率
net.ipv4.tcp_keepalive_time=60
#FIN_WAIT状态的socket,最大时长
net.ipv4.tcp_fin_timeout=30
#运行TIME_WAIT套接字的最大数量
net.ipv4.tcp_max_tw_buckets=5000
#端口范围
net.ipv4.ip_local_port_range=1024 65535
###########下面四个根据业务逻辑与硬件情况灵活调整
#内核套接字接受缓存区默认大小
net.core.rmem_default=6291456
#内核套接字发送缓存区默认大小
net.core.wmem_default=6291456
#内核套接字接受缓存区最大大小
net.core.rmem_max=12582912
#内核套接字发送缓存区最大大小
net.core.wmem_max=12582912
#定义了TCP接受缓存的最小值、默认值、最大值
net.ipv4.tcp_rmem = 10240 87380 12582912
#定义TCP发送缓存的最小值、默认值、最大值
net.ipv4.tcp_wmem = 10240 87380 12582912
#设置启用timewait快速回收
net.ipv4.tcp_tw_recycle = 1
#调节系统同时发起的TCP连接数
net.core.somaxconn=262114
然后再使用sysctl -p生效
做好这些优化配置,nginx性能,就能得到极大的提升。
- 上一篇:Nginx 性能优化(吐血总结)
- 下一篇:如何轻松监控Nginx?
相关推荐
- 全网第一个讲清楚CPK如何计算的Step by stepExcel和Python同时实现
-
在网上搜索CPK的计算方法,几乎全是照搬教材的公式,在实际工作做作用不大,甚至误导人。比如这个又比如这个:CPK=min((X-LSL/3s),(USL-X/3s))还有这个,很规范的公式,也很清晰很...
- [R语言] R语言快速入门教程(r语言基础操作)
-
本文主要是为了从零开始学习和理解R语言,简要介绍了该语言的最重要部分,以快速入门。主要参考文章:R-TutorialR语言程序的编写需要安装R或RStudio,通常是在RStudio中键入代码。但是R...
- Python第123题:计算直角三角形底边斜边【PythonTip题库300题】
-
1、编程试题:编写一个程序,找出已知面积和高的直角三角形的另外两边(底边及斜边)。定义函数find_missing_sides(),有两个参数:area(面积)和height(高)。在函数内,计算另外...
- Tensor:Pytorch神经网络界的Numpy
-
TensorTensor,它可以是0维、一维以及多维的数组,你可以将它看作为神经网络界的Numpy,它与Numpy相似,二者可以共享内存,且之间的转换非常方便。但它们也不相同,最大的区别就是Numpy...
- python多进程编程(python多进程进程池)
-
forkwindows中是没有fork函数的,一开始直接在Windows中测试,直接报错importosimporttimeret=os.fork()ifret==0:...
- 原来Python的协程有2种实现方式(python协程模型)
-
什么是协程在Python中,协程(Coroutine)是一种轻量级的并发编程方式,可以通过协作式多任务来实现高效的并发执行。协程是一种特殊的生成器函数,通过使用yield关键字来挂起函数的执行...
- ob混淆加密解密,新版大众点评加密解密
-
1目标:新版大众点评接口参数_token加密解密数据获取:所有教育培训机构联系方式获取难点:objs混淆2打开大众点评网站,点击教育全部,打开页面,切换到mobile模式,才能找到接口。打开开发者工具...
- python并发编程-同步锁(python并发和并行)
-
需要注意的点:1.线程抢的是GIL锁,GIL锁相当于执行权限,拿到执行权限后才能拿到互斥锁Lock,其他线程也可以抢到GIL,但如果发现Lock仍然没有被释放则阻塞,即便是拿到执行权限GIL也要立刻...
- 10分钟学会Python基础知识(python基础讲解)
-
看完本文大概需要8分钟,看完后,仔细看下代码,认真回一下,函数基本知识就OK了。最好还是把代码敲一下。一、函数基础简单地说,一个函数就是一组Python语句的组合,它们可以在程序中运行一次或多次运行。...
- Python最常见的170道面试题全解析答案(二)
-
60.请写一个Python逻辑,计算一个文件中的大写字母数量答:withopen(‘A.txt’)asfs:count=0foriinfs.read():ifi.isupper...
- Python 如何通过 threading 模块实现多线程。
-
先熟悉下相关概念多线程是并发编程的一种方式,多线程在CPU密集型任务中无法充分利用多核性能,但在I/O操作(如文件读写、网络请求)等待期间,线程会释放GIL,此时其他线程可以运行。GIL是P...
- Python的设计模式单例模式(python 单例)
-
单例模式,简单的说就是确保只有一个实例,我们知道,通常情况下类其实可以有很多实例,我们这么来保证唯一呢,全局访问。如配置管理、数据库连接池、日志处理器等。classSingleton: ...
- 更安全的加密工具:bcrypt(bcrypt加密在线)
-
作为程序员在开发工作中经常会使用加密算法,比如,密码、敏感数据等。初学者经常使用md5等方式对数据进行加密,但是作为严谨开发的程序员,需要掌握一些相对安全的加密方式,今天给大家介绍下我我在工作中使用到...
- 一篇文章搞懂Python协程(python协程用法)
-
前引之前我们学习了线程、进程的概念,了解了在操作系统中进程是资源分配的最小单位,线程是CPU调度的最小单位。按道理来说我们已经算是把cpu的利用率提高很多了。但是我们知道无论是创建多进程还是创建多线...
- Python开发必会的5个线程安全技巧
-
点赞、收藏、加关注,下次找我不迷路一、啥是线程安全?假设你开了一家包子铺,店里有个公共的蒸笼,里面放着刚蒸好的包子。现在有三个顾客同时来拿包子,要是每个人都随便伸手去拿,会不会出现混乱?比如第一个顾...
你 发表评论:
欢迎- 一周热门
- 最近发表
- 标签列表
-
- python计时 (73)
- python安装路径 (56)
- python类型转换 (93)
- python进度条 (67)
- python吧 (67)
- python字典遍历 (54)
- python的for循环 (65)
- python格式化字符串 (61)
- python静态方法 (57)
- python列表切片 (59)
- python面向对象编程 (60)
- python 代码加密 (65)
- python串口编程 (60)
- python读取文件夹下所有文件 (59)
- java调用python脚本 (56)
- python操作mysql数据库 (66)
- python获取列表的长度 (64)
- python接口 (63)
- python调用函数 (57)
- python多态 (60)
- python匿名函数 (59)
- python打印九九乘法表 (65)
- python赋值 (62)
- python异常 (69)
- python元祖 (57)