中间件

nginx的安装和配置

admin · 7月5日 · 2020年

1.yum安装

#vim /etc/yum.repos.d/nginx.repo 

cat > /etc/yum.repos.d/nginx.repo <<EOF
[nginx]
name=nginx repo
baseurl=http://nginx.org/packages/mainline/centos/7/\$basearch/
gpgcheck=0
enabled=1
EOF

yum install nginx -y

2.配置文件

which nginx                           #or whereis nginx:查看主程序文件
/etc/init.d/                          #创建启动脚本nginx(需手动配置),支持service nginx start命令
/var/log/nginx                        #日志文件夹,/var/log/nginx/error.log:错误日志文件,/var/log/nginx/access.log:访问日志文件
/etc/nginx/nginx.conf                 #Nginx全局站点配置文件,日志文件可以在/etc/nginx/nginx.conf中配置,默认读取的配置文件
/etc/nginx/conf.d                     #自定义Nginx站点配置文件存放目录
/etc/nginx/conf.d/default.conf        #网站默认站点配置
/usr/share/nginx/html                 #网站文件默认存放目录
sites-available                       #则是管理大量站点时服务器的一种通用配置。
sites-enabled                         #则是一种单独配置,需要使用enabled时,需要使用ln命令软连接到相应网站。

3.nginx.conf

#定义Nginx运行的用户和用户组
user www www;

#nginx进程数,建议设置为当前主机的CPU总核心数。
worker_processes 8;

#全局错误日志定义类型,[ debug | info | notice | warn | error | crit ]
error_log ar/loginx/error.log info;

#进程文件的位置
pid  /usr/local/nginx/logs/nginx.pid;

#一个nginx进程打开的最多文件描述符数目,理论值应该是最多打开文件数(系统的值ulimit -n)与nginx进程数相除,
#但是nginx分配请求并不均匀,所以建议与ulimit -n的值保持一致。
worker_rlimit_nofile 65535;

#工作模式与连接数上限
events
{
  #参考事件模型,use [ kqueue | rtsig | epoll | /dev/poll | select | poll ]; 
  #epoll模型是Linux 2.6以上版本内核中的高性能网络I/O模型,如果跑在FreeBSD上面,就用kqueue模型。
  use epoll;
 
  #单个进程最大连接数(最大连接数=连接数*进程数)
  worker_connections 65535;
}

#设定http服务器
http
{
  include mime.types; #文件扩展名与文件类型映射表
  default_type application/octet-stream; #默认文件类型

  charset utf-8; #默认编码
  server_names_hash_bucket_size 128; #服务器名字的hash表大小

  client_header_buffer_size 32k; #客户请求头缓冲大小 nginx默认会用client_header_buffer_size这个buffer来读取header值
                                 #如果 header过大,它会使用large_client_header_buffers来读取
  large_client_header_buffers 4 64k; 
  client_max_body_size 8m; #设定请求大小;

  sendfile on; #开启高效文件传输模式,sendfile指令指定nginx是否调用sendfile函数来输出文件,对于普通应用设为 on,
               #如果用来进行下载等应用磁盘IO重负载应用,可设置为off,以平衡磁盘与网络I/O处理速度,降低系统的负载。
               #注意:如果图片显示不正常把这个改成off。

  autoindex on; #开启目录列表访问,合适下载服务器,默认关闭。
  tcp_nopush on; #防止网络阻塞
  tcp_nodelay on; #防止网络阻塞
  keepalive_timeout 120; #长连接超时时间,单位是秒

  #FastCGI相关参数是为了改善网站的性能:减少资源占用,提高访问速度。下面参数看字面意思都能理解。
  fastcgi_connect_timeout 300;
  fastcgi_send_timeout 300;
  fastcgi_read_timeout 300;
  fastcgi_buffer_size 64k;
  fastcgi_buffers 4 64k;
  fastcgi_busy_buffers_size 128k;
  fastcgi_temp_file_write_size 128k;

  #gzip模块设置
  gzip on; #开启gzip压缩输出
  gzip_min_length 1k; #最小压缩文件大小(防止小文件越压越大)
  gzip_buffers 4 16k; #压缩缓冲区
  gzip_http_version 1.0; #压缩版本(默认1.1,前端如果是squid2.5请使用1.0)
  gzip_comp_level 2; #压缩等级(1-9)
  gzip_types text/plain application/x-javascript text/css application/xml;
  #压缩类型,默认就已经包含textml,所以下面就不用再写了,写上去也不会有问题,但是会有一个warn。
  gzip_vary on;#启用压缩标识
  gunzip_static on;#检查预压缩文件
  #limit_zone crawler $binary_remote_addr 10m; #开启限制IP连接数的时候需要使用

  upstream nginx.com {
    #upstream的负载均衡,weight是权重,可以根据机器配置定义权重。weigth参数表示权值,权值越高被分配到的几率越大。
    server 192.168.80.121:80 weight=3;
    server 192.168.80.122:80 weight=2;
    server 192.168.80.123:80 weight=3;
  }

 #虚拟主机的配置,一个server就代表一个虚拟主机,这里可重复设置的配置很多,建议使用include,设置多个主机的时候可以减少配置文件的代码量;
  server
  {
    #监听端口
    listen 80;
    #域名可以有多个,用空格隔开
    server_name www.domain.com domain.com;
    index index.html index.htm index.php;
    root /data/www/domain;

    ##### include enable-php.conf #####
    #资源定位
    location ~ .*.(php|php5)?$
    {
      fastcgi_pass 127.0.0.1:9000;
      fastcgi_index index.php;
      include fastcgi.conf;
    }

    #图片缓存时间设置
    location ~ .*.(gif|jpg|jpeg|png|bmp|swf)$
    {
      expires 10d;
    }

    #JS和CSS缓存时间设置
    location ~ .*.(js|css)?$
    {
      expires 1h;
    }

    #日志格式设定
    log_format access '$remote_addr - $remote_user [$time_local] "$request" '
    '$status $body_bytes_sent "$http_referer" '
    '"$http_user_agent" $http_x_forwarded_for';

    #定义本虚拟主机的访问日志
    access_log /home/wwwlogs/access.log access;
     
    #对 "nginx.com" 启用反向代理
    location nginx.com {
      proxy_pass http://nginx.com;
      proxy_redirect off;
      proxy_set_header X-Real-IP $remote_addr;
      #后端的Web服务器可以通过X-Forwarded-For获取用户真实IP
      proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
      #以下是一些反向代理的配置,可选。
      proxy_set_header Host $host;
      client_max_body_size 10m; #允许客户端请求的最大单文件字节数
      client_body_buffer_size 128k; #缓冲区代理缓冲用户端请求的最大字节数,
      proxy_connect_timeout 90; #nginx跟后端服务器连接超时时间(代理连接超时)
      proxy_send_timeout 90; #后端服务器数据回传时间(代理发送超时)
      proxy_read_timeout 90; #连接成功后,后端服务器响应时间(代理接收超时)
      proxy_buffer_size 4k; #设置代理服务器(nginx)保存用户头信息的缓冲区大小
      proxy_buffers 4 32k; #proxy_buffers缓冲区,网页平均在32k以下的设置
      proxy_busy_buffers_size 64k; #高负荷下缓冲大小(proxy_buffers*2)
      proxy_temp_file_write_size 64k;#设定缓存文件夹大小,大于这个值,将从upstream服务器传
    }
     
    #设定查看Nginx状态的地址
    location /NginxStatus {
      stub_status on;
      access_log on;
      auth_basic "NginxStatus";
      auth_basic_user_file confpasswd;
      #htpasswd文件的内容可以用apache提供的htpasswd工具来产生。
    }
     
    #本地动静分离反向代理配置
    #所有jsp的页面均交由tomcat或resin处理
    location ~ .(jsp|jspx|do)?$ {
      proxy_set_header Host $host;
      proxy_set_header X-Real-IP $remote_addr;
      proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
      proxy_pass http://127.0.0.1:8080;
    }

    #所有静态文件由nginx直接读取不经过tomcat或resin
    location ~ .*.(htm|html|gif|jpg|jpeg|png|bmp|swf|ioc|rar|zip|txt|flv|mid|doc|ppt|pdf|xls|mp3|wma)$
    { expires 15d; }

    #nginx使用php-fpm
    #$document_root代表当前请求在root指令中指定的值
    location ~ \.php$ {
    root           /download;
    fastcgi_pass   127.0.0.1:9000;
    fastcgi_param  SCRIPT_FILENAME  $document_root$fastcgi_script_name;
    include        fastcgi_params;
    }

4.nginx的tcp均衡负载

#以SSH为例
#增加stream模块,与http平级
————————————————————————————————————————————————————————————————————————————————

stream {
        upstream ssh_proxy {
                hash $remote_addr consistent;
                server 192.168.100.251:22 max_fails=2 fail_timeout=2s;
                server 192.168.100.252:22 max_fails=2 fail_timeout=2s;
                }
        server {
                listen 2222;
                proxy_connect_timeout 1s;#连接超时
                proxy_timeout 20s;#连接超时时间,如果不配置,永远不超时
                proxy_pass ssh_proxy;		
                }
}

4.1 轮询(默认)

upstream test_proxy {
    server IP;
    server IP;
}

4.2 weight

upstream test_proxy {
    server IP weight=3;
    server IP weight=3;
}

4.3 ip_hash

upstream test_proxy {
    ip_hash;
    server IP;
    server IP;

}

4.4 最少连接

upstream  test_proxy {
       least_conn;
       server    localhost:10001 weight=1;
       server    localhost:10002 weight=2;
}

4.5 fair

upstream test_proxy {
    server IP;
    server IP;
    fair;
}

4.6 url_hash

upstream test_proxy {
    server IP;
    server IP;
    hash $request_uri;
    hash_method crc32;
}

5.nginx的http均衡负载

        添加以下到http模块下
------------------------------------------------------------------------

        upstream tomcat {
        server 192.168.100.86:8081 weight=1 max_fails=2 fail_timeout=2;
        server 192.168.100.86:8082 weight=1 max_fails=2 fail_timeout=2;
        server 192.168.100.86:8083 weight=1 max_fails=2 fail_timeout=2;
        }

     server {
        listen       80 default_server;
        listen       [::]:80 default_server;
        server_name  _;
        root         /usr/share/nginx/html;

        # Load configuration files for the default server block.
        include /etc/nginx/default.d/*.conf;

        location / {
        proxy_pass http://tomcat;
        proxy_set_header Host $host;
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header REMOTE-HOST $remote_addr;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
        }

        error_page 404 /404.html;
            location = /40x.html {
        }

        error_page 500 502 503 504 /50x.html;
            location = /50x.html {
        }
    }

6.rewrite的使用

字符描述
\转义
^匹配输入字符串的起始位置
$匹配输入字符串的结束位置
*匹配前面的字符零次或者多次
+匹配前面字符串一次或者多次
?匹配前面字符串的零次或者一次
.匹配除“\n”之外的所有单个字符
(pattern)匹配括号内的pattern
标记符号描述
last本条规则匹配完成后,将重写后的URI重新在server块中执行,并重新匹配各location块
break本条规则匹配完成后,在本块继续处理,不会将重写后后的URI转向其他的location块
redirect返回302临时重定向
permanent返回301永久重定向

7.keepalived实现nginx的高可用

yum install -y keepalived

#修改配置文件keepalived.conf
#带#的需要修改,其他的默认
vim /etc/keepalived/keepalived.conf

global_defs {
     notification_email {
     acassen@firewall.loc
     failover@firewall.loc
     sysadmin@firewall.loc
   }
   notification_email_from Alexandre.Cassen@firewall.loc
   smtp_server 192.168.200.1
   smtp_connect_timeout 30
   router_id lb02                 #集群中唯一的ID
   vrrp_skip_check_adv_addr
#  vrrp_strict                    #必须注释掉
   vrrp_garp_interval 0
   vrrp_gna_interval 0
}

vrrp_instance VI_1 {
    state BACKUP                  #主:MASTER    备:BACKUP
    interface eth0                #网卡名
    virtual_router_id 51    
    priority 90                   #优先级,要低于MASTER
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        192.168.100.230           #VIP的地址
    }
}

---------------------------------------------------------

#监测心跳脚本
#增加模块
vrrp_script check_nginx {
        script "/etc/keepalived/nginx_check.sh"
        interval 2
        weight -20
}

vrrp_instance VI_1 {
  ........
    track_script {
        check_nginx
    }
  ........
}
---------------------------------------------------------
vim /etc/keepalived/nginx_check.sh

cat > /etc/keepalived/nginx_check.sh<<"EOF"
#!/bin/bash
counter=$(ps -C nginx --no-heading|wc -l)
if [ "${counter}" = "0" ]; then
        systemctl restart nginx.service
    sleep 1
    counter=$(ps -C nginx --no-heading|wc -l)
    if [ "${counter}" = "0" ]; then
        systemctl stop keepalived.service
    fi
fi
EOF
chmod a+x /etc/keepalived/nginx_check.sh

8.nginx开启缓存服务

#在http下增加
proxy_cache_path /opt/nginx/cache levels=1:2 keys_zone=test_cache:10m max_size=1g inactive=60m use_temp_path=off;

定义:
/opt/nginx/cache 生成文件的根路径
levels:默认所有缓存文件都放在上面指定的根路径中,从而可能影响缓存的性能。推荐指定为 2 级目录来存储缓存文件
key_zone:这个的值是字符串,可以随意写。用于在共享内存中定义一块存储区域来存放缓存的 key 和 metadata(类似于使用次数)
这样 nginx 可以快速判断一个 request 是否命中缓存。1m 可以存储 8000 个key,10m可以存在80000个key
max_size:最大 cache 空间。如果不指定,会使用掉所有 disk space。当达到 disk 上限后,会删除最少使用的 cache
inactive:内存中缓存的过期检查周期。示例配置中如果 1h 内都没有被访问,则不论状态是否为 expired,都会清除缓存
需要注意的是,inactive 和 expired 配置项的含义是不同的,expired 只是判断过期时间,不会删除缓存;而 inactive 是直接删除过期缓存
use_temp_path:如果为 off,则 nginx 会将缓存文件直接写入指定的 cache 文件中,而不使用 temp_path 指定的临时存储路径

#在server下增加
upstream test{
   server 127.0.0.1:6000;
   server 127.0.0.1:6001;
   server 127.0.0.1:6002;
}

    location / {
        proxy_cache test_cache;
        proxy_pass http://test;
        proxy_cache_valid 200 12h;
        proxy_cache_valid 304 12h;
        proxy_cache_valid 301 302 1d;
        proxy_cache_valid any 10m;
        proxy_cache_key $host$uri$is_args$args;
        add_header Nginx-Cache "$upstream_cache_status";
        proxy_next_upstream error timeout invalid_header http_500 http_502 http_503 http_504;
        proxy_cache_use_stale error timeout http_500 http_502 http_503 http_504; 
    }
proxy_cache:对应 http 段的 key_zone,是你定义的 proxy_cache 所使用的共享空间的名称,我在1.1中定义的是zzm_cache,所以在这里也写的是zzm_cache
proxy_cache_valid:对指定的 HTTP 状态进行缓存,并指定缓存时间。可以自定义写入多个配置项。
这里我们对200和304的返回码缓存12小时,301 302缓存1天,其余的缓存10分钟
proxy_cache_key:定义缓存唯一key,通过唯一key来进行hash存取
add_header Nginx-Cache:定义缓存标志,以方便对Nginx Cache 进行检测
proxy_next_upstream 当请求服务器发生错误或超时时,会尝试到下一台服务器
proxy_cache_use_stale:如果 Nginx 从原始服务器收到一个 error,timeout 或任何指定的 5xx 错误,并且在其缓存中具有所请求文件的过时版本,则它会传递过时文件,而不是将错误转发到客户端。