Nginx代理服务器、HTTP调度、TCP/UDP调度、Nginx优化、HTTP错误代码、状态页面、压力测试

这篇具有很好参考价值的文章主要介绍了Nginx代理服务器、HTTP调度、TCP/UDP调度、Nginx优化、HTTP错误代码、状态页面、压力测试。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

Top

NSD Operation DAY03

  1. 案例1:Nginx反向代理
  2. 案例2:Nginx的TCP/UDP调度器
  3. 案例3:Nginx常见问题处理

1 案例1:Nginx反向代理

1.1 问题

使用Nginx实现Web反向代理功能,实现如下功能:

  • 后端Web服务器两台,可以使用httpd实现
  • Nginx采用轮询的方式调用后端Web服务器
  • 两台Web服务器的权重要求设置为不同的值
  • 最大失败次数为2,失败超时时间为30秒

1.2 方案

使用4台虚拟机,其中一台作为Nginx代理服务器,该服务器需要配置两块网卡,IP地址分别为192.168.88.5和192.168.99.5,两台Web服务器IP地址分别为192.168.99.100和192.168.99.200。客户端测试主机IP地址为192.168.88.10。如图-1所示。

nginx tcp udp,nginx,http,tcp/ip

1.3 步骤

实现此案例需要按照如下步骤进行。

步骤一:部署实施后端Web服务器

环境准备,同网段要互通,检查yum

1)部署后端Web1服务器

后端Web服务器可以简单使用yum方式安装httpd实现Web服务,为了可以看出后端服务器的不同,可以将两台后端服务器的首页文档内容设置为不同的内容。

  1. [root@web1 ~]#yum -y install vim net-tools bash-completion psmisc httpd
  2. [root@web1 ~]# echo "web1" > /var/www/html/index.html
  3. [root@web1 ~]# systemctl restart httpd
  4. systemctl stop firewalld #关闭防火墙

2)部署后端Web2服务器

  1. [root@web2 ~]#yum -y install vim net-tools bash-completion psmisc httpd
  2. [root@web2 ~]# echo "web2" > /var/www/html/index.html
  3. [root@web2 ~]# systemctl restart httpd
  4. systemctl stop firewalld #关闭防火墙

3)到proxy主机测试

  1. [root@proxy nginx]# curl 192.168.99.100
  2. web1~~
  3. [root@proxy nginx]# curl 192.168.99.200
  4. web2~~

步骤二:配置Nginx服务器,添加服务器池,实现反向代理功能

如果需要可以先还原proxy主机的nginx

  1. [root@proxy nginx]# cd ~/lnmp_soft/
  2. [root@proxy lnmp_soft]# killall nginx
  3. [root@proxy lnmp_soft]# rm -rf /usr/local/nginx/
  4. [root@proxy lnmp_soft]# rm -rf nginx-1.17.6
  5. [root@proxy lnmp_soft]# tar -xf nginx-1.17.6.tar.gz
  6. [root@proxy lnmp_soft]# cd nginx-1.17.6/
  7. [root@proxy lnmp_soft]#yum -y install gcc make pcre-devel openssl-devel
  8. [root@proxy nginx-1.17.6]# ./configure
  9. [root@proxy nginx-1.17.6]#make
  10. [root@proxy nginx-1.17.6]#make install         

1)修改/usr/local/nginx/conf/nginx.conf配置文件

  1. [root@proxy ~]# vim /usr/local/nginx/conf/nginx.conf
  2. .. ..
  3. http {
  4. .. ..
  5. #使用upstream定义后端服务器集群,集群名称任意(如webserver)                                                                                                                                                                                                                     
  6. #使用server定义集群中的具体服务器和端口
  7. upstream webserver {
  8. server 192.168.99.100:80;
  9. server 192.168.99.200:80;
  10. }
  11. .. ..
  12. server {
  13. listen        80;
  14. server_name localhost;
  15. location / {
  16. #通过proxy_pass将用户的请求转发给webserver集群
  17. proxy_pass http://webserver;
  18. }
  19. }
  20. .. ..
  21. }

2)重新加载配置

  1. [root@proxy ~]# /usr/local/nginx/sbin/nginx -s reload
  2. #请先确保nginx是启动状态,否则运行该命令会报错,报错信息如下:
  3. #[error] open() "/usr/local/nginx/logs/nginx.pid" failed (2: No such file or directory)

3)客户端使用火狐浏览器或curl多次访问proxy主机可以看到网站的轮询效果

步骤二:配置upstream服务器集群池属性

1)设置权重

weight可以设置后台服务器的权重,权重越大任务的分配量就越大

  1. [root@proxy ~]# vim /usr/local/nginx/conf/nginx.conf
  2. upstream webserver {
  3. server 192.168.99.100 weight=2;
  4. server 192.168.99.200;
  5. }

重新加载配置并访问,可以看到web1的任务量增加

设置健康检查,max_fails可以设置后台服务器的失败次数,fail_timeout可以设置后台服务器的失败超时时间。

  1. [root@proxy ~]# vim /usr/local/nginx/conf/nginx.conf
  2. upstream webserver {
  3. server 192.168.99.100;
  4. server 192.168.99.200 max_fails=2 fail_timeout=30;
  5. }

重新加载配置并访问,

sbin/nginx -s reload

测试时,先将web2的httpd服务关闭,回到proxy访问集群页面curl 192.168.99.5

只会显示web1的页面,此时即使将web2的httpd服务开启也无效,因为要等

待30秒

步骤三:配置upstream服务器集群的调度算法

1)设置相同客户端访问相同Web服务器

  1. [root@proxy ~]# vim /usr/local/nginx/conf/nginx.conf
  2. upstream webserver {
  3.                  ip_hash;
  4. server 192.168.99.100 ;
  5. server 192.168.99.200 ;
  6. }

2)重新加载配置

  1. [root@proxy ~]# /usr/local/nginx/sbin/nginx -s reload

客户端使用浏览器访问代理服务器测试只会见到一个页面

步骤四:添加down标记

down标记可以让集群主机暂时不参与集群活动

  1. [root@proxy ~]# vim /usr/local/nginx/conf/nginx.conf
  2. upstream webserver {
  3. server 192.168.99.100 ;
  4. server 192.168.99.200 down;
  5. }

重新加载配置

  1. [root@proxy ~]# /usr/local/nginx/sbin/nginx -s reload

客户端使用浏览器访问代理服务器测试只会见到99.100

2 案例2:Nginx的TCP/UDP调度器

2.1 问题

使用Nginx实现TCP/UDP调度器功能,实现如下功能:

  • 后端SSH服务器两台
  • Nginx编译安装时需要使用--with-stream,开启ngx_stream_core_module模块
  • Nginx采用轮询的方式调用后端SSH服务器

2.2 方案

使用4台虚拟机,其中一台作为Nginx代理服务器,该服务器需要配置两块网卡,IP地址分别为192.168.88.5和192.168.99.5,两台SSH服务器IP地址分别为192.168.99.100和192.168.99.200。客户端测试主机IP地址为192.168.88.10。如图-2所示。

nginx tcp udp,nginx,http,tcp/ip

2.3 步骤

实现此案例需要按照如下步骤进行。

步骤一:部署支持4层TCP/UDP代理的Nginx服务器

1)部署nginx服务器

编译安装必须要使用--with-stream参数开启4层代理模块。

  1. [root@proxy nginx]# cd ~/lnmp_soft/nginx-1.17.6/
  2. [root@proxy nginx-1.17.6]# killall nginx
  3. [root@proxy nginx-1.17.6]# rm -rf /usr/local/nginx/
  4. [root@proxy nginx-1.17.6]# ./configure \
  5. > --with-stream                                 #开启4层代理功能
  6. [root@proxy nginx-1.17.6]# make && make install     #编译并安装
  7. [root@proxy nginx-1.17.6]# /usr/local/nginx/sbin/nginx -V #查看安装模块情况

步骤二:配置Nginx服务器,添加服务器池,实现TCP/UDP代理功能

1)修改/usr/local/nginx/conf/nginx.conf配置文件

  1. [root@proxy ~]# vim /usr/local/nginx/conf/nginx.conf
  2. stream {
  3.         upstream backend {
  4.     server 192.168.99.100:22;            #后端SSH服务器的IP和端口
  5.     server 192.168.99.200:22;
  6. }
  7.          server {
  8.          listen 12345;                    #Nginx监听的端口
  9.          proxy_pass backend;
  10.              }
  11. }
  12. http {
  13. .. ..
  14. }

2)重新加载配置

  1. [root@proxy ~]# /usr/local/nginx/sbin/nginx -s reload
  2. #请先确保nginx是启动状态,否则运行该命令会报错,报错信息如下:
  3. #[error] open() "/usr/local/nginx/logs/nginx.pid" failed (2: No such file or directory)

3)客户端使用访问代理服务器测试轮询效果

  1. [root@client ~]# ssh 192.168.88.5 -p 12345            #使用该命令多次访问查看效果

注意:如果配置没有错误,但无法反复登陆web1与web2,可以按下列方式解决

  1. rm -rf ~/.ssh/known_hosts        #在proxy中删除记录文件
  2. ssh 192.168.99.5 -p 12345        #再次尝试登录,会连接到另外一台集群主机

3 案例3:Nginx常见问题处理

3.1 问题

本案例要求对Nginx服务器进行适当优化,解决如下问题,以提升服务器的处理性能:

  • 如何自定义返回给客户端的404错误页面
  • 如何查看服务器状态信息
  • 如果客户端访问服务器提示“Too many open files”如何解决
  • 如何解决客户端访问头部信息过长的问题
  • 如何让客户端浏览器缓存数据

客户机访问此Web服务器验证效果:

  • 使用ab压力测试软件测试并发量
  • 编写测试脚本生成长头部信息的访问请求
  • 客户端访问不存在的页面,测试404错误页面是否重定向

3.2 步骤

实现此案例需要按照如下步骤进行。

步骤一:自定义报错页面

HTTP常见状态码列表:

200 正常

301 & 302 重定向

400 请求语法错误

401 访问被拒绝

403 禁止访问

404 资源找不到

414 请求URI头部太长

500 服务器内部错误

502 代理服务器无法正常获取下一个服务器正常的应答

1)优化前,客户端使用浏览器访问不存在的页面,会提示404文件未找到

2)修改Nginx配置文件,自定义报错页面

  1. [root@proxy ~]# vim /usr/local/nginx/conf/nginx.conf
  2. .. ..
  3. charset utf-8; #仅在需要中文时修改该选项
  4. error_page 404 /test.jpg;    #自定义错误页面为一张图片,图片可以从真机拷入
  5. .. ..
  6. [root@proxy ~]# nginx -s reload

3)优化后,客户端再次使用浏览器访问不存在的页面,会看到图片

步骤二:如何查看服务器状态信息(非常重要的功能)

编译安装时使用--with-http_stub_status_module开启状态页面模块

如果要添加模块,但不想删除之前nginx数据,可以将nginx源码目录下的objs目录中的nginx文件拷贝到nginx的sbin目录下替代现有主程序,然后killall nginx 再重启即可

  1. [root@proxy nginx]# cd ~/lnmp_soft/nginx-1.17.6/
  2. [root@proxy nginx-1.17.6]# ./configure \
  3. > --with-stream                                #开启4层代理模块
  4. > --with-http_stub_status_module                #开启status状态页面
  5. [root@proxy nginx-1.17.6]# make     #编译
  6. [root@proxy nginx-1.17.6]# killall nginx
  7. [root@proxy nginx-1.17.6]# cp objs/nginx /usr/local/nginx/sbin/ #覆盖原文件
  8. [root@proxy nginx-1.17.6]# /usr/local/nginx/sbin/nginx #开启nginx

2)修改Nginx配置文件,定义状态页面

  1. [root@proxy ~]# cat /usr/local/nginx/conf/nginx.conf
  2. … …
  3. location /status {
  4. stub_status on;
  5.                  #allow IP地址;
  6.                  #deny all;
  7. }
  8. … …
  9. [root@proxy ~]# /usr/local/nginx/sbin/nginx -s reload

4)优化后,查看状态页面信息

  1. [root@proxy ~]# curl http://192.168.99.5/status
  2. Active connections: 1
  3. server accepts handled requests
  4. 10 10 3
  5. Reading: 0 Writing: 1 Waiting: 0

Active connections:当前活动的连接数量。

Accepts:已经接受客户端的连接总数量。

Handled:已经处理客户端的连接总数量。

Requests:客户端发送的请求数量。

Reading:当前服务器正在读取客户端请求头的数量。

Writing:当前服务器正在写响应信息的数量。

Waiting:当前多少客户端在等待服务器的响应。

步骤三:优化Nginx并发量

1)优化前使用ab高并发测试,使用web1或proxy自己作为海量客户(防火墙与selinux都关闭

  1. [root@proxy ~]# ab -n 100 -c 100 http://192.168.99.5/ #-n任务量,-c是连接数
  2. ...
  3. ...
  4. 100%                    #成功
  5. [root@proxy ~]# ab -n 2000 -c 2000 http://192.168.99.5/
  6. Benchmarking 192.168.99.5 (be patient)
  7. socket: Too many open files (24)                #失败

2)修改Nginx配置文件,增加并发量

  1. [root@proxy ~]# vim /usr/local/nginx/conf/nginx.conf
  2. .. ..
  3. worker_processes 2;                    #与CPU核心数量一致
  4. events {
  5. worker_connections 50000;        #每个worker最大并发连接数
  6. }
  7. .. ..
  8. [root@proxy ~]# /usr/local/nginx/sbin/nginx -s reload

3)优化Linux内核参数(最大文件数量)

  1. [root@proxy ~]# ulimit -n                        #查看最大文件数量
  2. [root@proxy ~]# ulimit -n 100000                #临时设置最大文件数量
  3. [root@proxy ~]# vim /etc/security/limits.conf
  4.     .. ..
  5. * soft nofile 100000
  6. * hard nofile 100000
  7. #该配置文件分4列,分别如下:
  8. #用户或组 硬限制或软限制 需要限制的项目 限制的值

4)优化后测试服务器并发量

  1. [root@proxy ~]# ab -n 2000 -c 2000 http://192.168.99.5/

步骤四:优化Nginx数据包头缓存,支持超长地址

优化前,使用脚本测试超长头部请求是否能获得响应

默认情况下nginx无法支持长地址栏,会报414错误

  1. [root@proxy ~]# cat lnmp_soft/buffer.sh
  2. #!/bin/bash
  3. URL=http://192.168.99.5/index.html?
  4. for i in {1..5000}
  5. do
  6.     URL=${URL}v$i=$i
  7. done
  8. curl $URL                         #经过5000次循环后,生成一个超长的URL地址
  9. [root@proxy ~]# ./buffer.sh
  10. .. ..
  11. <center><h1>414 Request-URI Too Large</h1></center>        #访问失败

2)修改Nginx配置文件,增加数据包头部缓存大小

  1. [root@proxy ~]# vim /usr/local/nginx/conf/nginx.conf
  2. .. ..
  3. http {
  4. client_header_buffer_size 200k;        #请求包头信息的缓存大小    35
  5. large_client_header_buffers 4 200k;        #大请求包头部信息的缓存个数与容量 36                                                                                                                                                                                                     -44444444444                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                   
  6. .. ..
  7. }
  8. [root@proxy ~]# /usr/local/nginx/sbin/nginx -s reload

nginx tcp udp,nginx,http,tcp/ip

 

3)优化后,使用脚本测试超长头部请求是否能获得响应

  1. [root@proxy ~]# ./buffer.sh

步骤五:浏览器本地缓存静态数据

1)使用Firefox浏览器查看缓存

以Firefox浏览器为例,在Firefox地址栏内输入about:cache将显示Firefox浏览器的缓存信息,如图-3所示,点击List Cache Entries可以查看详细信息。

nginx tcp udp,nginx,http,tcp/ip

2)清空firefox本地缓存数据,如图-4所示。nginx tcp udp,nginx,http,tcp/ip

3)修改Nginx配置文件,定义对静态页面的缓存时间

  1. [root@proxy ~]# vim /usr/local/nginx/conf/nginx.conf
  2. server {
  3. listen 80;
  4. server_name localhost;
  5. location / {
  6. root html;
  7. index index.html index.htm;
  8. }
  9. location ~* \.(jpg|jpeg|gif|png|css|js|ico|xml)$ {
  10. expires        30d;            #定义客户端缓存时间为30天
  11. }
  12. }
  13. [root@proxy ~]# /usr/local/nginx/sbin/nginx -s reload

4)优化后,使用Firefox浏览器访问图片,再次查看缓存信息

http://192.168.99.5/day.jpg

在firefox地址栏内输入about:cache,查看本地缓存数据,查看是否有图片以及过期时间是否正确。文章来源地址https://www.toymoban.com/news/detail-810726.html

到了这里,关于Nginx代理服务器、HTTP调度、TCP/UDP调度、Nginx优化、HTTP错误代码、状态页面、压力测试的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • haproxy服务器对nginx服务器web服务调度负载均衡、用nfs做共享目录(脚本部署)

    目录 一、准备 二、在作为haproxy的服务器上导入以下shell执行haproxy安装 三、由于nginx服务需要用的nfs共享目录,先部署nfs 四、nginx服务器1部署 五、nginx服务器2部署同上 六、测试 一、准备 四台服务器 系统 IP 搭建服务器 centos7 192.168.1.12 haproxy centos7 192.168.1.132 nfs(rpcbind) ce

    2024年02月09日
    浏览(48)
  • 基于TCP/UDP的socket服务器搭建流程

    TCP面向连接(如打电话要先拨号建立连接);UDP是无连接的,即发送数据之前不需 要建立连接 TCP提供可靠的服务。也就是说,通过TCP连接传送的数据,无差错,不丢失,不重复,且按序到达;UDP尽最大努力交付,即不保证可靠交付 TCP面向字节流,实际上是TCP把数据看成一连串

    2023年04月08日
    浏览(50)
  • Nginx缓存代理服务器

    1.nginx反向缓存代理服务配置 2. 安装nginx服务 3. 修改/etc/nginx/nginx.conf配置文件,关闭长连接保持功能 4. 修改/etc/nginx/nginx.conf配置文件,添加反向代理缓存配置项 5. 修改/etc/nginx/conf.d/default.conf配置文件,添加proxy转发模块 6.启动nginx服务

    2024年02月12日
    浏览(60)
  • 具有公网IP的服务器作为代理服务器,并使用Nginx将内网服务器反向代理

    在代理服务器上安装Nginx。如果您正在使用Linux操作系统,则可以使用包管理器来安装Nginx。例如,如果您使用的是Ubuntu,可以使用以下命令安装: 配置Nginx以将HTTP和HTTPS请求转发到内部服务器。打开Nginx的主配置文件/etc/nginx/nginx.conf,并在http块中添加以下代码: 注意: 将

    2024年01月25日
    浏览(51)
  • 【socket编程】TCP服务器、UDP服务器、本地套接字【C语言代码实现】

    目录 0. 准备知识 0.1 大小端概念 0.2 网络字节序和主机字节序的转换 0.3 点分十进制串转换(IP地址转换函数) 0.4 IPV4结构体:(man 7 ip) 0.5 IPV6套接字结构体:(man 7 ipv6) 0.6 通用套接字结构体 1. 网络套接字函数 1.1 socket 1.2 connect 1.3 bind 1.4 listen 1.5 accept 1.6 端口复用 2. 包裹函

    2024年02月07日
    浏览(53)
  • 【代理服务器】Squid 反向代理与Nginx缓存代理

    如果 Squid 反向代理服务器中缓存了该请求的资源,则将该请求的资源直接返回给客户端;否则反向代理服务器将向后台的 Web 服务器请求资源,然后将请求的应答返回给客户端,同时也将该应答缓存在本地,供下一个请求者使用。 缓存网页对象,减少重复请求 将互联网请求

    2024年02月12日
    浏览(56)
  • nginx 代理sftp,达到访问nginx服务器就间接访问sftp服务器

    测试环境部署规划: 192.168.0.101 nginx 服务器    192.168.0.102 sftp 服务器  192.168.0.103  作为客户端去访问,这里三台机器选用centos 7.9系统,客户端可以使用window,软件访问sftp服务! 首先 1.在192.168.0.101机器上部署nginx  步骤: #安装依赖 yum install gcc pcre-devel openssl-devel  wget -y 

    2024年02月16日
    浏览(67)
  • 【网络编程】实现UDP/TCP客户端、服务器

    需要云服务器等云产品来学习Linux的同学可以移步/--腾讯云--/--阿里云--/--华为云--/官网,轻量型云服务器低至112元/年,新用户首次下单享超低折扣。   目录 一、UDP 1、Linux客户端、服务器 1.1udpServer.hpp 1.2udpServer.cc 1.3udpClient.hpp 1.4udpClient.cc 1.5onlineUser.hpp 2、Windows客户端 二、T

    2024年02月06日
    浏览(60)
  • 学习笔记:代理服务器——Nginx

    本文会对Nginx的介绍、使用、原理等知识作由浅入深的剖析。如果你只想对Nginx作为反向代理的使用作初步的了解,那么可以只看第一、二章节;如果想对Nginx工作原理、扩展使用等进行深入研究,可以看第三章节。相信本文会对你有所帮助 Nginx(“engine x”)是一个高性能的

    2024年02月07日
    浏览(47)
  • iperf3测试服务器tcp带宽udp丢包率

    要使用 iperf 测试网络的性能,您需要两台计算机,一台作为服务器,一台作为客户端,这将帮助您测试两台主机之间的网段。特别注意的是两台计算机的网口一定是同样的网口,测试的数据才是准确的,我之前测试的时候服务器端网口是万兆的,客户端用的是千兆的,所以测

    2024年02月12日
    浏览(46)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包