集群代理池

在开始使用Nginx或Nginx Plus负载均衡HTTP流量到一组服务器之前，首先，我们需要使用上游(upstream)指令定义该组。该指令位于http上下文(context)中。

使用server指令配置组中的服务器。让我们来看一个示例，以下配置定义了一个名为backend的组，它由三台服务器配置组成，这些服务器配置可以解析三个以上的实际服务器。

http {    upstream backend {        server backend1.example.com weight=5;        server backend2.example.com;        server 192.0.0.1 backup;
    }
}

要将请求传递到服务器组，请在 proxy_pass 指令中指定组名。在下面的示例中，运行在Nginx上的虚拟服务器将所有请求传递到上游后端组(upstream backend group)。

server {
    location/{
        proxy_pass http://backend;
    }}

以下示例结合了上面的两个代码片段，并说明了如何将HTTP请求代理到后端(backend)服务器组。该组由三台服务器组成，同一应用程序的两个实例，而第三个是备份服务器。由于在上游块中未指定负载均衡算法，因此Nginx使用默认算法Round Robin。

http {
    upstream backend {
        server backend1.example.com;
        server backend2.example.com;
        server 192.0.0.1 backup;
    }
    
    server {
        location/{
            proxy_pass http://backend;
        }
    }}

负载均衡方法

Nginx开源支持四种负载均衡方法，而Nginx Plus又增加了两种方法:

1. Round Robin  -  在这种方法中，考虑到服务器的权重，请求在服务器之间平均分配。没有启用它的指令。默认情况下使用此方法。

upstream backend {   # no load balancing method is defined for Round Robin
   server backend1.example.com;
   server backend2.example.com;}

2.Least Connections(最少连接数) - 将考虑到服务器权重的活动连接数最少的请求发送到服务器。

upstream backend {
    least_conn;
    server backend1.example.com;
    server backend2.example.com;}

3. IP Hash - 此方法用于确定应为下一个请求选择哪个服务器。在这种情况下，将使用IPv4地址的前三个八位位组或整个IPv6地址来计算哈希值。

upstream backend {
    ip_hash;
    server backend1.example.com;
    server backend2.example.com;}

如果其中一台服务器需要暂时从负载平衡循环中删除，则可以将其与down参数一起添加，以保留客户端IP地址的当前哈希值。

upstream backend {
    server backend1.example.com;
    server backend2.example.com;
    server backend3.example.com down;}

4. 通用哈希值(Generic Hash)  - 将请求发送到的服务器是根据用户定义的键确定的，该键可以是字符串，文本，变量或组合。

upstream backend {    hash $request_uri consistent;    server backend1.example.com;    server backend2.example.com;
}

Nginx Plus支持另外两种方法:

5. 最短时间(Least Time)  -  对于每个请求，Nginx都会选择具有最低平均延迟和最少活动连接数的服务器，其中，最低延迟是根据在minimum_time指令中包含的以下参数计算出来的。

• header             - 是从服务器接收1 st 字节的时间。

• last_byte         -  是时候接受来自服务器的完整响应了。

• last_byte inflight  - 考虑到请求不完整，该时间从服务器接收完整响应的时间。

upstream backend {
    least_time header;
    server backend1.example.com;
    server backend2.example.com;}

6. Random   -  在这种方法中，每个请求都将传递到随机选择的服务器。如果指定了2个参数，则第一个nginx会考虑服务器权重来随机选择两个服务器，然后使用指定的方法选择这些服务器之一:

• Least_conn                       - 活动连接数最少。

• least_time = header      - 从服务器接收响应标头的最短平均时间。

• Least_time = last_byte - 从服务器接收完整响应的最短平均时间。

upstream backend {
    random two least_time=last_byte;
    server backend1.example.com;
    server backend2.example.com;
    server backend3.example.com;
    server backend4.example.com;}

服务器权重

默认情况下，Nginx使用权重通过Round Robin方法在组中的服务器之间分配请求。 server指令的weight参数用于设置服务器的 weight 。默认情况下的权重是1。

upstream backend {    server backend1.example.com weight=5;    server backend2.example.com;    server 192.0.0.1 backup;
}

在上面的示例中，backend1.example.com的权重为5，其他两台服务器的权重为默认权重1，但IP地址为192.0.0.1的那一台被标记为备份服务器，并且不接收请求，除非其他两个服务器都不可用。在这种权重配置中，每6个请求中，有5个发送到 backend1.example.com ，有1个发送到 backend2.example.com 。

服务器慢启动

服务器缓慢启动用于防止最近恢复的服务器被连接淹没，连接可能会超时并导致服务器再次标记为故障。

在Nginx Plus中，慢速启动允许上游服务器在恢复或可用后将其权重从0逐渐恢复到其标称值。为此，请对server指令使用slow_start参数。

upstream backend {    server backend1.example.com slow_start=30s;    server backend2.example.com;    server 192.0.0.1 backup;
}

启用会话持久性

Nginx Plus识别用户会话，并将给定会话中的所有请求路由到同一上游服务器。这称为会话持久性。

Nginx Plus使用三会话持久性方法。这些方法是通过 sticky 指令设置的。

Sticky Cookie

Nginx Plus包含来自上游组的第一个响应的会话cookie，并标识发送响应的服务器。客户端的下一个请求包含cookie值，并且Nginx Plus将请求路由到响应第一个请求的上游服务器。

upstream backend {
    server backend1.example.com;
    server backend2.example.com;
    sticky cookie srv_id expires=1h domain=.example.com path=/;}

在上面的示例中， srv_id 参数用于设置Cookie的名称。

expires - 参数是可选参数，用于设置浏览器保留Cookie的时间。

domain - 定义为其设置Cookie的域。

path       -  也是可选参数。它定义了设置cookie的路径。

sticky cookie是最简单的会话持久性方法。

Sticky Route

当Nginx Plus收到第一个请求时，它将为客户端分配一条路由。将所有后续请求与server指令的route参数进行比较，以标识将请求代理到的服务器。路由信息来自cookie或请求URI。

upstream backend {    server backend1.example.com route=a;    server backend2.example.com route=b;    sticky route $route_cookie $route_uri;
}

Cookie 学习

首先，Nginx Plus通过检查请求和响应来查找会话标识符。然后Nginx Plus 学习哪个上游服务器对应于哪个会话标识符。通常，这些标识符在HTTP cookie中传递。如果一个请求的会话标识符已经学习，Nginx Plus会将请求转发到相应的服务器。

upstream backend {
   server backend1.example.com;
   server backend2.example.com;
   sticky learn
       create=$upstream_cookie_examplecookie
       lookup=$cookie_examplecookie
       zone=client_sessions:1m
       timeout=1h;}

在上面，上游服务器之一通过在响应中设置cookie EXAMPLECOOKIE 来创建会话。