开启左侧

[Nginx] 解决Nginx 504 Gateway Time-out的一些方法

[复制链接]
发表于 2014-4-3 11:00:48 | 显示全部楼层 |阅读模式
    最近用dedecms建的一个网站新增了大批内容,有三个栏目的内容量都超过了两千篇,超过两千三百篇的两个栏目在生成栏目列表的时候就出现了504 Gateway time-out 服务器用的是nginx,我不是很懂,服务器维护人员在网上随便找了一篇文章,修改了nginx的缓存设置,不管用,他就不管了,可是我不能不管啊,不能生成列表页面,那后面的内容不是都不能用了麽?

    把数据库下载到本地,在本地配置了nginx,试了很多遍,都不行,又改到Apache下面,更夸张,生成了83个页面就不能继续了,看来还是nginx更厉害一点,虽然出现504 Gateway time-out,但好歹能够全部生成。

    只好又继续在网上找更多的解决办法,尝试了N多次以后,终于让我找到了一个有用的方法,想想以后可能还有碰到这样的问题,就把那篇文章複製过来放在这里,供以后参考吧,对有同样问题的朋友也是一个帮助。

  下面部分是引用部分,我自己不懂技术的,在我的dedecms5.6里面有用,别人的自己尝试吧。

    Nginx 502 Bad Gateway的含义是请求的PHP-CGI已经执行,但是由于某种原因(一般是读取资源的问题)没有执行完毕而导致PHP-CGI进程终止。

    Nginx 504 Gateway Time-out的含义是所请求的网关没有请求到,简单来说就是没有请求到可以执行的PHP-CGI。

    解决这两个问题其实是需要综合思考的,一般来说Nginx 502 Bad Gateway和php-fpm.conf的设置有关,而Nginx 504 Gateway Time-out则是与nginx.conf的设置有关。

    而正确的设置需要考虑服务器自身的性能和访客的数量等多重因素。

    以我目前的服务器爲例子CPU是奔四1.5G的,内存1GB,CENTOS的系统,访客大概是50人左右同时在綫。

    但是在綫的人大都需要请求PHP-CGI进行大量的信息处理,因此我将nginx.conf设置爲:

    fastcgi_connect_timeout 300s;

    fastcgi_send_timeout 300s;

    fastcgi_read_timeout 300s;

    fastcgi_buffer_size 128k;

    fastcgi_buffers 8 128k;#8 128

    fastcgi_busy_buffers_size 256k;

    fastcgi_temp_file_write_size 256k;

    fastcgi_intercept_errors on;

    这里最主要的设置是前三条,即

    fastcgi_connect_timeout 300s;

    fastcgi_send_timeout 300s;

    fastcgi_read_timeout 300s;

    这里规定了PHP-CGI的连接、发送和读取的时间,300秒足够用了,因此我的服务器很少出现504 Gateway Time-out这个错误。最关键的是php-fpm.conf的设置,这个会直接导致502 Bad Gateway和504 Gateway Time-out。

    下面我们来仔细分析一下php-fpm.conf几个重要的参数:

    php-fpm.conf有两个至关重要的参数,一个是”max_children”,另一个是”request_terminate_timeout”

    我的两个设置的值一个是”40″,一个是”900″,但是这个值不是通用的,而是需要自己计算的。

    计算的方式如下:

    如果你的服务器性能足够好,且宽带资源足够充足,PHP脚本没有系循环或BUG的话你可以直接将”request_terminate_timeout”设置成0s。0s的含义是让PHP-CGI一直执行下去而没有时间限制。而如果你做不到这一点,也就是说你的PHP-CGI可能出现某个BUG,或者你的宽带不够充足或者其他的原因导致你的PHP-CGI能够假死那麽就建议你给”request_terminate_timeout”赋一个值,这个值可以根据你服务器的性能进行设定。一般来说性能越好你可以设置越高,20分钟 -30分钟都可以。由于我的服务器PHP脚本需要长时间运行,有的可能会超过10分钟因此我设置了900秒,这样不会导致PHP-CGI死掉而出现502 Bad gateway这个错误。

    而”max_children”这个值又是怎麽计算出来的呢?这个值原则上是越大越好,php-cgi的进程多了就会处理的很快,排队的请求就会很少。设置”max_children”也需要根据服务器的性能进行设定,一般来说一台服务器正常情况下每一个php-cgi所耗费的内存在20M左右,因此我的”max_children”我设置成40个,20M*40=800M也就是说在峰值的时候所有PHP-CGI所耗内存在800M以内,低于我的有效内存1Gb。而如果我的”max_children”设置的较小,比如5-10个,那麽php-cgi就会“很累”,处理速度也很慢,等待的时间也较长。如果长时间没有得到处理的请求就会出现504 Gateway Time-out这个错误,而正在处理的很累的那几个php-cgi如果遇到了问题就会出现502 Bad gateway这个错误。


平度网:www.pingdu.co 平度论坛:bbs.pingdu.co
 楼主| 发表于 2014-4-3 11:02:12 | 显示全部楼层
原来的:
  1. #charset  gb2312,utf-8;
  2.     server_names_hash_bucket_size 128;
  3.     client_header_buffer_size 32k;
  4.     large_client_header_buffers 4 32k;
  5.     client_max_body_size 8m;
  6.     sendfile on;
  7.     keepalive_timeout 60;
  8.     tcp_nopush     on;
  9.     tcp_nodelay on;

  10.     fastcgi_send_timeout 300;
  11.     fastcgi_connect_timeout 300;
  12.     fastcgi_read_timeout 300;
  13.     fastcgi_buffer_size 64k;
  14.     fastcgi_buffers 4 64k;
  15.     fastcgi_busy_buffers_size 128k;
  16.     fastcgi_temp_file_write_size 256k;
  17.         fastcgi_intercept_errors on;
复制代码



改成:
  1. #charset  gb2312,utf-8;
  2.     server_names_hash_bucket_size 128;
  3.     client_header_buffer_size 32k;
  4.     large_client_header_buffers 4 32k;
  5.     client_max_body_size 8m;
  6.     sendfile on;
  7.     keepalive_timeout 60;
  8.     tcp_nopush     on;
  9.     tcp_nodelay on;

  10.     fastcgi_send_timeout 300;
  11.     fastcgi_connect_timeout 300;
  12.     fastcgi_read_timeout 300;
  13.     fastcgi_buffer_size 64k;
  14.     fastcgi_buffers 8 128k;
  15.     fastcgi_busy_buffers_size 256k;
  16.     fastcgi_temp_file_write_size 512k;
  17.         fastcgi_intercept_errors on;

复制代码



平度网:www.pingdu.co 平度论坛:bbs.pingdu.co
 楼主| 发表于 2014-4-3 11:02:58 | 显示全部楼层
在CentOS下配置lnmp组合基本上用的都是同样的配置文件,一直都没出现过问题,可最近在一个vps上安装同样的环境之后,网站在线10多人就出 现了打开速度非常缓慢的情况,有好几次都是直接达到了nginx中设置的脚本最大超时时间300秒,结果导致nginx往客户端浏览器发送了一个504 Gateway Time-out的错误代码,分析了之后改动了几处配置文件,终于避免了该情况的出现。

  从错误代码基本可以确定跟nginx本身无关,主要是提交给php-fpm的请求未能正确反馈而导致,一般情况下,提交动态请求的时候,nginx会直接把 请求转交给php-fpm,而php-fpm再分配php-cgi进程来处理相关的请求,之后再依次返回,最后由nginx把结果反馈给客户端浏览器,但 我这个vps目前跑的是个纯php应用内容,实际上用户所有的请求都是php请求,有的耗费时间比较久,php-cgi进程就一直都被用满,而php- fpm本身的配置文件只打开了10组php-cgi进程,这样的话在线用户稍微多的话就会导致请求无法被正常处理而出错。

  大概分析出了原 因,下面做就比较容易了,首先是更改php-fpm的几处配置:

  把max_children由之前的10改为现在的30,这样就可以保证 有充足的php-cgi进程可以被使用;
  把request_terminate_timeout由之前的0s改为60s,这样php-cgi进程 处理脚本的超时时间就是60秒,可以防止进程都被挂起,提高利用效率。

  接着再更改nginx的几个配置项,减少FastCGI的请求次 数,尽量维持buffers不变:

  fastcgi_buffers由 4 64k 改为 2 256k;
  fastcgi_buffer_size 由 64k 改为 128K;
  fastcgi_busy_buffers_size 由 128K 改为 256K;
  fastcgi_temp_file_write_size 由 128K 改为 256K。

  好了,重新加载php-fpm和nginx的配置,再次测试,至今两周时间内没有再出现504 Gateway Time-out的情况,算是达到效果了。  

  另外,php-fpm的默认静态处理方式会使得php-cgi的进程长期占用内存而无法释放,这也是导致nginx出错的原因之一,因此可以将php-fpm的处理方式改成apache模式。
  <value name=”style”>apache-like</value>

  从更改完毕到现在的测试表明上述方式的效果还是很明显的,并没有发现一次Nginx502 bad gateway或504 Gateway Time-out错误。当然,如果你的VPS或者服务器的性能足够好可以根据具体情况不必做无谓的改动。
平度网:www.pingdu.co 平度论坛:bbs.pingdu.co
 楼主| 发表于 2014-4-3 11:20:24 | 显示全部楼层
        "504 Gateway Time-out"是什么意思?
        意思为:网关超时!
         
        网关(Gateway)又称网间连接器、协议转换器。网关在传输层上以实现网络互连,是最复杂的网络互连设备,仅用于两个高层协议不同的网络互连。网关的结构也和路由器类似,不同的是互连层。网关既可以用于广域网互连,也可以用于局域网互连。 网关是一种充当转换重任的计算机系统或设备。在使用不同的通信协议、数据格式或语言,甚至体系结构完全不同的两种系统之间,网关是一个翻译器。与网桥只是简单地传达信息不同,网关对收到的信息要重新打包,以适应目的系统的需求。同时,网关也可以提供过滤和安全功能。大多数网关运行在OSI 7层协议的顶层--应用层。
       
                        引起这样的问题大多数情况下可以确定跟nginx本身无关,主要是提交给php-fpm 的请求未能
                        正确反馈而导致,一般情况下,提交动态请求的时候,nginx会直接把 请求转交给 php-fpm,
                        而php-fpm再分配php-cgi进程来处理相关的请求,之后再依次返回,
                        最后由 nginx 把结果反馈给客户端浏览器。
       
                        1)大概分析出了原因,
       
下面做就比较容易了,首先是更改php-fpm的几处配置:
                        把max_children由之前的32改为现在的64,这样就可以保证有充足的php-cgi进程可以被使用;
       
                        2)把request_terminate_timeout由之前的0s改为60s,这样php-cgi进程处理脚本的超时时间就是60秒,
                        可以防止进程都被挂起,提高利用效率.


       
                        3)接着再更改nginx的几个配置项,减少FastCGI的请求次数,尽量维持buffers不变:
                        fastcgi_buffers由4 64k改为2 256k;
                        fastcgi_buffer_size由64k改为128K;
       
                        fastcgi_busy_buffers_size由128K改为256K;
                        fastcgi_temp_file_write_size由128K改为256K.
       
                        4)另外,php-fpm的默认静态处理方式会使得php-cgi的进程长期占用内存而无法释放,
                        这也是导致nginx出错的原因之一,因此可以将php-fpm的处理方式改成apache模式.
                        <value name=”style”>apache-like</value>
       

好了,重新加载php-fpm和nginx的配置,再次测试,至今两周时间内没有再出现504 Gateway Time-out的情况,算是达到效果了。
平度网:www.pingdu.co 平度论坛:bbs.pingdu.co
您需要登录后才可以回帖 登录 | 会员注册

本版积分规则

 
QQ在线咨询
售前咨询热线
0532-88371356
售后服务微信
pingduwangzhan
快速回复 返回顶部 返回列表