手记系列之三 —– 关于使用Nginx的一些使用方法和经验

前言

本篇文章主要介绍的关于本人在使用Nginx的一些使用方法和经验~

Nginx介绍

介绍

Nginx("engine x")是一款是由俄罗斯的程序设计师Igor Sysoev所开发高性能的 Web和 反向代理 服务器,也是一个IMAP/POP3/SMTP 代理服务器。 在高连接并发的情况下,Nginx是Apache服务器不错的替代品。

正向代理和反向代理

更详细的理论知识可以看这篇文章: https://www.nginx.org.cn/article/detail/177

网上这块的资料很多,个人理解核心,就是用户去访问互联网的服务就是正向代理,互联网服务访问我们部署的服务就是反向代理。

负载均衡介绍

相关的使用教程可以看这篇文章:https://www.cnblogs.com/xuwujing/p/11953697.html

在介绍Nginx的负载均衡实现之前,先简单的说下负载均衡的分类,主要分为硬件负载均衡和软件负载均衡,硬件负载均衡是使用专门的软件和硬件相结合的设备,设备商会提供完整成熟的解决方案,比如F5,在数据的稳定性以及安全性来说非常可靠,但是相比软件而言造价会更加昂贵;软件的负载均衡以Nginx这类软件为主,实现的一种消息队列分发机制。

简单来说所谓的负载均衡就是把很多请求进行分流,将他们分配到不同的服务器去处理。比如我有3个服务器,分别为A、B、C,然后使用Nginx进行负载均衡,使用轮询策略,此时如果收到了9个请求,那么会均匀的将这9个请求分发给A、B、Cf服务器,每一个服务器处理3个请求,这样的话我们可以利用多台机器集群的特性减少单个服务器的压力。

Nginx实现负载均衡的示例图:

手记系列之三 ----- 关于使用Nginx的一些使用方法和经验

Nginx相关使用

可以看这篇文章: https://www.cnblogs.com/xuwujing/p/11899890.html

使用Nginx+tomcat+redis做集群

  多个tomcat加上Nginx实现负载均衡,通过redis实现session共享。 

可以使用github上面的第三方的jar包来实现,少量的配置即可。
下载地址: https://github.com/ran-jit/tomcat-cluster-redis-session-manager

手记系列之三 ----- 关于使用Nginx的一些使用方法和经验
手记系列之三 ----- 关于使用Nginx的一些使用方法和经验

手记系列之三 ----- 关于使用Nginx的一些使用方法和经验

将下载lib包放到tomcat/lib 目录下,配置文件修改的redis地址然后上传到tomcat/conf目录下即可。

Nginx配置:

#user  nobody; worker_processes  10;  #error_log  logs/error.log; #error_log  logs/error.log  notice; #error_log  logs/error.log  info;  #pid        logs/nginx.pid;   events {     worker_connections  1024; }   error_log /var/log/nginx-error.log info;  http {     include       mime.types;     default_type  application/octet-stream;      #log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '     #                  '$status $body_bytes_sent "$http_referer" '     #                  '"$http_user_agent" "$http_x_forwarded_for"';      #access_log  logs/access.log  main;      sendfile        on;     #tcp_nopush     on;      #keepalive_timeout  0;     keepalive_timeout  65;      #gzip  on;       upstream pancm{        server 192.169.0.24:8085;        server 192.169.0.24:8084;     }      server {         listen      8083;         server_name  192.169.0.24;          #charset koi8-r;          #access_log  logs/host.access.log  main;          location / {             root   html;             proxy_pass http://pancm; 	     proxy_set_header Host  $host:8083;               proxy_set_header X-Forwarded-Host $host:8083;              proxy_set_header X-Forwarded-Server $host:8083;              proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;             proxy_connect_timeout 3s;             proxy_read_timeout 5s;             proxy_send_timeout 3s;		 	    index  index.html index.htm;         }   	   #============对不同请求的处理=============         location ~ .(jsp|html|jspx|do|action)?$          {                #=============tomcat的资源位置============       	   root   html; 	            index index.jsp index.jspx index.do;             #==========Nginx提供的代理============             proxy_set_header Host  $host:8083;             proxy_set_header X-Forwarded-Host $host:8083;             proxy_set_header X-Forwarded-Server $host:8083;             proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;             #=== 如果遇到.jsp .jspx .do .action 的请求就进入该服务器(tomcat)===             proxy_pass http://pancm;         }	          #error_page  404              /404.html;          # redirect server error pages to the static page /50x.html         #         error_page   500 502 503 504  /50x.html;         location = /50x.html {             root   html;         }          # proxy the PHP scripts to Apache listening on 127.0.0.1:80         #         #location ~ .php$ {         #    proxy_pass   http://127.0.0.1;         #}          # pass the PHP scripts to FastCGI server listening on 127.0.0.1:9000         #         #location ~ .php$ {         #    root           html;         #    fastcgi_pass   127.0.0.1:9000;         #    fastcgi_index  index.php;         #    fastcgi_param  SCRIPT_FILENAME  /scripts$fastcgi_script_name;         #    include        fastcgi_params;         #}          # deny access to .htaccess files, if Apache's document root         # concurs with nginx's one         #         #location ~ /.ht {         #    deny  all;         #}     }       # another virtual host using mix of IP-, name-, and port-based configuration     #     #server {     #    listen       8000;     #    listen       somename:8080;     #    server_name  somename  alias  another.alias;      #    location / {     #        root   html;     #        index  index.html index.htm;     #    }     #}       # HTTPS server     #     #server {     #    listen       443 ssl;     #    server_name  localhost;      #    ssl_certificate      cert.pem;     #    ssl_certificate_key  cert.key;      #    ssl_session_cache    shared:SSL:1m;     #    ssl_session_timeout  5m;      #    ssl_ciphers  HIGH:!aNULL:!MD5;     #    ssl_prefer_server_ciphers  on;      #    location / {     #        root   html;     #        index  index.html index.htm;     #    }     #}  } 

启动nginx的命令为:
/usr/local/nginx/sbin/nginx -t //测试nginx.conf的配置是否正确

/usr/local/nginx/sbin/nginx -c /usr/local/nginx/conf/nginx.conf //根据nginx.conf里的配置,启动nginx服务

热加载
/usr/local/nginx/sbin/nginx -s reload

手记系列之三 ----- 关于使用Nginx的一些使用方法和经验

Nginx作为文件服务器

可以参考这篇文章:
https://www.cnblogs.com/xuwujing/p/12811365.html

Nginx获取真实用户IP配置

核心配置:

	set_real_ip_from 0.0.0.0/0;     real_ip_header  X-Forwarded-For;     real_ip_recursive on; 

完整配置(仅做参考):

http {     log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '                       '$status $body_bytes_sent "$http_referer" '                       '"$http_user_agent" "$http_x_forwarded_for"';     log_format weblog '$msec | $time_local | $host | $status | $bytes_sent | $remote_addr | $upstream_addr | $request | $request_time | $upstream_response_time | $request_length | $http_referer | $http_user_agent';      # 注意,这里我使用的日志格式为我自定义的weblog日志格式,其中会输出$remote_addr 远程客户端地址。     access_log  /var/log/nginx/access.log  weblog;      # 下面三行为重点,添加后就可以获取到客户端真实IP     set_real_ip_from 0.0.0.0/0;     real_ip_header  X-Forwarded-For;     real_ip_recursive on;      # 下面三行为常见反向代理传递真实客户端IP的配置,配置在http{}中,则全局应用在下面的所有server中     proxy_set_header Host      $host;     proxy_set_header X-Real-IP $remote_addr;     proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;      include             /etc/nginx/mime.types;     default_type        application/octet-stream;      # Load modular configuration files from the /etc/nginx/conf.d directory.     # See http://nginx.org/en/docs/ngx_core_module.html#include     # for more information.     include /etc/nginx/conf.d/*.conf;  } 

Nginx限速控制

限制连接数:
语法: limit_conn_zone key zone=name:size;

详细说明:https://nginx.org/en/docs/http/ngx_http_limit_conn_module.html#limit_conn_zone

例如:

http  {     limit_conn_zone $binary_remote_addr zone=perip:10m;     limit_conn_zone $server_name zone=perserver:10m;     ...     server  {         ...         # 限制每个IP能够最多建立10个连接         limit_conn perip 10;         # 限制每个网站最多接受100个连接         limit_conn perserver 100;     }  } 

限制请求速度:
语法:limit_req_zone key zone=name:size rate=rate [sync];

详细说明: https://nginx.org/en/docs/http/ngx_http_limit_req_module.html#limit_req_zone

限制请求速度可用于防止DDoS攻击,或防止上游服务器同时被太多请求淹没。

例如:

http  {     limit_req_zone $binary_remote_addr zone=perip:10m rate=2r/s;     limit_req_zone $binary_remote_addr zone=one:10m rate=1r/s;     limit_req_zone $server_name zone=perserver:10m rate=10r/s;     ...     server {         ...         # 限制每个IP每秒不超过2个请求,突发不超过5个请求。         limit_req zone=perip burst=5 nodelay;         # 限制每个网站每秒不超过10个请求,突发不超过10个请求。         limit_req zone=perserver burst=10;         location /search/ {             # 限制每个IP每秒不超过1个请求。             limit_req zone=one;         }     } } 

限制带宽:
语法:limit_rate rate;

单位为:byte/s

详细说明: https://nginx.org/en/docs/http/ngx_http_core_module.html#limit_rate

该设置主要用于限制单个请求的下载速度,以为一个客户端可以建立多个请求,所以一般需要结合限制连接数使用,防止因为个别客户端而耗尽服务器带宽。

http {     limit_conn_zone $binary_remote_address zone=perip:10m     ...     server {         ...         location /download/ {             # 限制每个IP只能建立一个连接             limit_conn perip 1;             # 当请求的流量超500KB后进行限速             limit_rate_after 500k;             # 限速 50KB/s             limit_rate 50k;         }     } } 

完整配置:

http  {     # 限速IP白名单     geo $limit {         default 1;         10.0.0.0/8 0;         192.168.0.0/24 0;         172.20.0.35 0;     }          # 白名单不限速,非白名单按照客户端IP限速     map $limit $limit_key {         0 "";         1 $binary_remote_addr;     }          limit_conn_zone $server_name zone=perserver:10m;     limit_req_zone $server_name zone=perserverreq:10m rate=10r/s;     limit_conn_zone $limit_key zone=perip:10m;     limit_req_zone $limit_key zone=two:10m rate=2r/s;     limit_req_zone $limit_key zone=one:10m rate=1r/s;     ...     server  {         ...         # 限制每个网站每秒不超过10个请求,突发不超过10个请求。         limit_req zone=perserverreq burst=10;         # 限制每个网站最多接受100个请求         limit_conn perserver 100;         # 限制每个IP能够最多建立10个请求         limit_conn perip 10;         # 限制每个IP每秒不超过1个请求,突发不超过3个请求。         limit_req zone=one burst=3 nodelay;                  location /search/ {             # 限制每个IP每秒不超过1个请求。             limit_req zone=one;         }                  location /download/ {             # 限制每个IP只能建立一个连接             limit_conn perip 1;             # 当请求的流量超500KB后进行限速             limit_rate_after 500k;             # 限速 50KB/s             limit_rate 50k;         }     }  } 

备注:
需要注意的是客户端IP使用 $binary_remote_addr 变量,而不是 (remote_addr。 )remote_addr 是一个文本型变量,长度为7至15个字节之间。
$binary_remote_addr 是二进制的IP表达形式,对于IPv4地址,变量的大小始终为4个字节,对于IPv6地址,变量的大小始终为16个字节。
存储状态在32位平台上总是占用32或64字节,在64位平台上占用64字节。 1M的内存空间可以保留大约32000个32字节状态或16000个64位字节。例子中的10M的话换算下来可以保留16万个IP地址信息。当超出请求是服务器将返回错误。

Nginx监听多端口以及Https

多端口,就是两端server

https则需要配置证书

  server {    #     listen       8181;       #  server_name  192.168.0.1          #charset koi8-r;          #access_log  logs/host.access.log  main;       #   rewrite ^(.*)$ https://$host$1 permanent;      }       # HTTPS server     #     server {         listen       8080 ssl;         server_name   192.168.0.1 ; 		 	          ssl_certificate      /usr/local/nginx/cert/xxx.crt;         ssl_certificate_key  /usr/local/nginx/cert/xxx.key;          ssl_session_cache    shared:SSL:1m;         ssl_session_timeout  30m;          #ssl_ciphers  HIGH:!aNULL:!MD5;         ssl_ciphers ECDHE-RSA-AES128-GCM-SHA256:ECDHE:ECDH:AES:HIGH:!NULL:!aNULL:!MD5:!ADH:!RC4;         ssl_protocols TLSv1 TLSv1.1 TLSv1.2;         ssl_prefer_server_ciphers  on;          location / {             root   /home/release/dist;             index  index.html index.htm;         }          location ^~ /api/ {             proxy_pass http://127.0.0.1:9999;             proxy_cookie_path / /;             proxy_pass_header Set-Cookie;             proxy_set_header Host zans;         }  		 		 proxy_set_header Host $host; 		proxy_set_header X-Real-IP $remote_addr; 		proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; 		     } 	 	 	 # HTTPS server     #     server { 		listen       443 ssl; 		server_name  xxx.com ;         ssl_certificate      /usr/local/nginx/cert/xxx.crt;         ssl_certificate_key  /usr/local/nginx/cert/xxx.key;          ssl_session_cache    shared:SSL:1m;         ssl_session_timeout  30m;          #ssl_ciphers  HIGH:!aNULL:!MD5;         ssl_ciphers ECDHE-RSA-AES128-GCM-SHA256:ECDHE:ECDH:AES:HIGH:!NULL:!aNULL:!MD5:!ADH:!RC4;         ssl_protocols TLSv1 TLSv1.1 TLSv1.2;         ssl_prefer_server_ciphers  on;  		location / {             root   /home/release/app;             index  index.html index.htm;         } 	 		 location ^~ /api {             proxy_pass http://127.0.0.1:6666;             proxy_cookie_path / /;             proxy_pass_header Set-Cookie;             proxy_set_header Host zans;         } 		 		 proxy_set_header Host $host; 		proxy_set_header X-Real-IP $remote_addr; 		proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; 		     } 

错误处理

1,Nginx: error while loading shared libraries: libpcre.so.1

则说明未安装pcre或安装了未设置软链,安装或者设置器软链即可

ln -s /usr/local/lib/libpcre.so.1 /lib64/ 

2,实现负载均衡之后,页面无法跳转

原因: nginx 默认的端口是80,更改监听的端口之后,也需要更改一下。

也会出现这种错误:net::ERR_NAME_NOT_RESOLVED

解决办法:
在location 下添加proxy_set_header Host $host:port 这个配置,port 和listen 的端口保持一致, 不然是无法跳转的。

3,使用文件服务器的一些问题

  1. nginx需要设置传输的大小;

  2. 访问若出现了403权限问题,一般情况下是上传的图片用root创建的,但nginx访问使用nginx用户访问的,所以在linux系统出现了问题。
    解决办法一:nginx使用root用户启动,在nginx的配置改成 use root;
    解决办法二:全局设置文件夹的权限,并且使nginx拥有读取的权限;

  3. nginx限速问题,如果宽带不高,可以对大图片文件进行限速。

其他

之前写的nginx相关文章:
https://www.cnblogs.com/xuwujing/tag/nginx/

一首很带感的动漫钢琴曲~

原创不易,如果感觉不错,希望给个推荐!您的支持是我写作的最大动力!
版权声明:
作者:虚无境
博客园出处:http://www.cnblogs.com/xuwujing
CSDN出处:http://blog.csdn.net/qazwsxpcm    
个人博客出处:https://xuwujing.github.io/

发表评论

相关文章