在连接到上游客户端时负载平衡没有实时上游

Posted

技术标签:

【中文标题】在连接到上游客户端时负载平衡没有实时上游【英文标题】:loadbalancing no live upstreams while connecting to upstream client 【发布时间】:2019-05-31 10:22:57 【问题描述】:

我在本地网络上设置了一个带有两个 docker apache 实例的负载均衡器。我确认的两个节点都已启动,并且可以在单个端口 8081 和 8082 上查看,但是当尝试在 apache 中使用上游时,我得到 502 bad gateway 错误。

我尝试将 /etc/nginx 目录的权限更改为 nginx 用户。我尝试重新启动 apache 实例和 nginx 服务。当我将 server_name 更改为 localhost 而不是服务器主机的 ip 地址时,我可以在我的本地网络上的另一台机器上的 Web 浏览器上看到默认的 nginx 服务器页面。如果我将它改回 IP 地址,我会收到错误的网关错误。

我的 default.conf 符号链接到可用站点

    [root@www nginx]# vi sites-enabled/default.conf
    upstream containerapp 
        server 192.168.0.42:8081;
        server 192.168.0.42:8082;
      

      server 
        listen *:80;

        server_name localhost;
        index index.html index.htm index.php;

        access_log /var/log/nginx/localweb.log;
        error_log /var/log/nginx/localerr.log;

        location /
                proxy_pass http://containerapp;
        
     

这是我得到的日志文件错误

    [root@www nginx]# cat /var/log/nginx/localerr.log
    referrer: "http://192.168.0.42/"
    2019/01/04 20:15:54 [error] 16310#0: *1 no live upstreams while 
    connecting 
    to upstream, client: 192.168.0.18, server: 192.168.0.42, request: 
    "GET / HTTP/1.1", upstream: "http://containerapp/", 
    host:"192.168.0.42"
    2019/01/04 20:15:54 [error] 16310#0: *1 no live upstreams while 
    connecting 
    to upstream, client: 192.168.0.18, server: 192.168.0.42, request: 
    "GET 
    /favicon.ico HTTP/1.1", upstream: "http://containerapp/favicon.ico", 
    host: 
    "192.168.0.42", referrer: "http://192.168.0.42/"

这就是我的 nginx.conf 的样子

 nginx.conf
        user nginx;
        worker_processes auto;
        error_log /var/log/nginx/error.log;
        pid /run/nginx.pid;

    # Load dynamic modules. See /usr/share/nginx/README.dynamic.
    include /usr/share/nginx/modules/*.conf;

    events 
        worker_connections 1024;
    

    http 
        log_format  main  '$remote_addr - $remote_user [$time_local] 
   "$request" '    
                          '$status $body_bytes_sent "$http_referer" '
                          '"$http_user_agent" "$http_x_forwarded_for"';

        access_log  /var/log/nginx/access.log  main;

        sendfile            on;
        tcp_nopush          on;
        tcp_nodelay         on;
        keepalive_timeout   65;
        types_hash_max_size 2048;
        include             /etc/nginx/mime.types;
        default_type        application/octet-stream;

    # Load modular configuration files from the /etc/nginx/conf.d 
    directory.
    # See http://nginx.org/en/docs/ngx_core_module.html#include
    # for more information.
    #include /etc/nginx/conf.d/*.conf;
    server 
       listen       80 default_server;
       listen       [::]:80 default_server;
       server_name  _;
       root         /usr/share/nginx/html;

        # Load configuration files for the default server block.
        #include /etc/nginx/default.d/*.conf;

       location / 
       

       error_page 404 /404.html;
          location = /40x.html 
       

       error_page 500 502 503 504 /50x.html;
           location = /50x.html 
       
    

    include /etc/nginx/sites-enabled/*;
    

我可以点击http://192.168.0.42,它会将循环引导到http://192.168.0.42:8081 或http://192.168.0.42:8082 节点

【问题讨论】:

【参考方案1】:

我发现这个问题的解决方案与 selinux 相关。我用这个命令找到了另一个帖子

setsebool -P httpd_can_network_connect 1

链接到原始问题,以防将来有人遇到此问题(13: Permission denied) while connecting to upstream:[nginx]

【讨论】:

【参考方案2】:

在我看来,这是 apache 实例响应缓慢的问题。

这会有所帮助:

location /
  proxy_pass http://containerapp;
  proxy_read_timeout 5m;

【讨论】:

感谢您的回复。刚试过,没有任何区别。这只是一个实验室服务器,因此没有性能问题,当我点击192.168.0.42:8081 上的各个端口节点时,站点立即返回,并且我可以在实际的 docker apache 上 curl 172.17.0.2,它们都很快 好的,但是 nginx 无法连接到 apache。您的防火墙是如何配置的? 我在主机服务器上启用了 http 和 https,并在具有两个 apache docker 实例的服务器上打开了端口 80

以上是关于在连接到上游客户端时负载平衡没有实时上游的主要内容,如果未能解决你的问题,请参考以下文章

Django Nginx 和 Gunicorn .sock 在连接到上游时失败(2:没有这样的文件或目录)

多个 XMPP 服务器处理上游 GCM 消息

cookie-cutter django nginx connect() 在连接到上游时失败(111:连接被拒绝),

KONG API 网关中的负载均衡

使用envoy在k8s中作grpc的负载均衡

使用 302 时 Nginx 负载均衡器错误