ChatGPT解决这个技术问题 Extra ChatGPT

NGINX:从上游读取响应头时上游超时(110:连接超时)

我让 Puma 作为上游应用服务器运行,Riak 作为我的后台数据库集群。当我发送一个请求,该请求为大约 25K 用户减少一大块数据并将其从 Riak 返回到应用程序时,我在 Nginx 日志中收到错误消息:

从上游读取响应标头时上游超时(110:连接超时)

如果我在没有 nginx 代理的情况下直接查询我的上游,使用相同的请求,我会得到所需的数据。

一旦放入代理,Nginx 超时就会发生。

**nginx.conf**

http {
    keepalive_timeout 10m;
    proxy_connect_timeout  600s;
    proxy_send_timeout  600s;
    proxy_read_timeout  600s;
    fastcgi_send_timeout 600s;
    fastcgi_read_timeout 600s;
    include /etc/nginx/sites-enabled/*.conf;
}

**virtual host conf**

upstream ss_api {
  server 127.0.0.1:3000 max_fails=0  fail_timeout=600;
}

server {
  listen 81;
  server_name xxxxx.com; # change to match your URL

  location / {
    # match the name of upstream directive which is defined above
    proxy_pass http://ss_api; 
    proxy_set_header  Host $http_host;
    proxy_set_header  X-Real-IP  $remote_addr;
    proxy_set_header  X-Forwarded-For $proxy_add_x_forwarded_for;
    proxy_cache cloud;
    proxy_cache_valid  200 302  60m;
    proxy_cache_valid  404      1m;
    proxy_cache_bypass $http_authorization;
    proxy_cache_bypass http://ss_api/account/;
    add_header X-Cache-Status $upstream_cache_status;
  }
}

Nginx 有一堆超时指令。我不知道我是否遗漏了一些重要的东西。任何帮助将不胜感激....

它应该只在 600 秒后超时吗?您可以通过在 127.0.0.1:3000 上设置一个 tcp 服务器来伪造它来计时,该服务器只接受连接并且不对其进行任何操作,以查看需要多长时间。应该是600...

a
amn

发生这种情况是因为您的上游响应请求的时间太长,并且 NGINX 认为上游已经无法处理请求,因此它响应错误。只需在 location 配置块中包含并增加 proxy_read_timeout。同样的事情发生在我身上,我在工作中为内部应用程序使用了 1 小时超时:

proxy_read_timeout 3600;

有了这个,NGINX 将等待一个小时(3600 秒)让它的上游返回一些东西。


请注意,在 http 部分中包含 proxy_read_timeout 可能无济于事。我在 location 部分中有 proxy_pass 指令,只有 proxy_read_timeout 设置有所不同。 (nginx 1.16.0)
对我来说似乎在 http/server/location 中工作......也许事情已经改变了:)
您可以检查指令文档 here 只是意识到您可以在 http serverlocation 块中定义它
C
Community

您应该始终避免增加超时,我怀疑您的后端服务器响应时间无论如何都是这里的问题。

我通过清除连接保持活动标志并根据此处的答案指定 http 版本来解决此问题:https://stackoverflow.com/a/36589120/479632

server {
    location / {
        proxy_set_header   X-Real-IP $remote_addr;
        proxy_set_header   Host      $http_host;

        # these two lines here
        proxy_http_version 1.1;
        proxy_set_header Connection "";

        proxy_pass http://localhost:5000;
    }
}

不幸的是,我无法解释为什么这是有效的,也无法从链接的答案中提到的文档中破译它,所以如果有人有解释,我很想听听。


如果您知道代理(即使对于特定 URL)需要更多处理时间,为什么不调整 proxy_read_timeout
你好!我不记得确切的问题了,但我认为它与 url 的实际时间无关,而是在没有这些设置的情况下无法正确处理超时。
+1 ...这看起来像一个尴尬的黑客,但实际上这是来自官方文档 :) nginx.org/en/docs/http/ngx_http_upstream_module.html#keepalive 当我使用带有 keepalive 的上游指令时,我有一个稍微不同的问题“上游过早关闭连接,同时从上游读取响应标头”并使用这两行似乎可以解决它。
我喜欢人们说“你应该总是这样做”..“或者永远不要那样做”..每个人的情况都不同..就像我的情况一样,我有人从世界各地上传大(300MB)文件..不同互联网连接.. 互联网速度快的人可以高速发送.. 发展中国家的人互联网速度慢,可能需要 2 小时才能完成.. 服务器必须等待,服务器不能说“你的互联网太慢了,所以我终止了连接”.. 所以在这种情况下,我会增加超时时间。
@TimDavis 我明白了,也许这样更好。我想这可能取决于流量,就像在这篇文章中说它是 WebSockets 所必需的:serverlab.ca/tutorials/linux/web-servers-linux/…
F
Finwe

首先通过查阅 nginx 错误日志文件找出哪个上游正在变慢,并在我的情况下相应地调整读取时间,它是 fastCGI

2017/09/27 13:34:03 [error] 16559#16559: *14381 upstream timed out (110: Connection timed out) while reading response header from upstream, client:xxxxxxxxxxxxxxxxxxxxxxxxx", upstream: "fastcgi://unix:/var/run/php/php5.6-fpm.sock", host: "xxxxxxxxxxxxxxx", referrer: "xxxxxxxxxxxxxxxxxxxx"

所以我必须在我的服务器配置中调整 fastcgi_read_timeout

 location ~ \.php$ {
     fastcgi_read_timeout 240;
     ...
 }

请参阅:original post


这是一种添加计时信息的方法,以查看您“需要”将其增加到多少:stackoverflow.com/questions/18627469/… FWIW
D
Dimitrios

在您的情况下,它有助于对代理进行一些优化,或者您可以使用“#time out settings”

location / 
{        

  # time out settings
  proxy_connect_timeout 159s;
  proxy_send_timeout   600;
  proxy_read_timeout   600;
  proxy_buffer_size    64k;
  proxy_buffers     16 32k;
  proxy_busy_buffers_size 64k;
  proxy_temp_file_write_size 64k;
  proxy_pass_header Set-Cookie;
  proxy_redirect     off;
  proxy_hide_header  Vary;
  proxy_set_header   Accept-Encoding '';
  proxy_ignore_headers Cache-Control Expires;
  proxy_set_header   Referer $http_referer;
  proxy_set_header   Host   $host;
  proxy_set_header   Cookie $http_cookie;
  proxy_set_header   X-Real-IP  $remote_addr;
  proxy_set_header X-Forwarded-Host $host;
  proxy_set_header X-Forwarded-Server $host;
  proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
}

对我来说,在 location 部分中有这些设置确实会有所不同。将它们放在 http 部分没有帮助(可能是因为我在 location 部分也有 proxy_pass
你到底在用这些声明优化什么?
需要时间加载的页面不会超时。还传递可能正在使用的标头并将缓冲区设置为限制。
很高兴在一个地方看到所有超时设置的列表。对我来说,我需要知道要缩短哪一个,以使我的错误响应迅速将行为不端的上游丢弃。
E
Eje

我建议查看 error_logs,特别是 upstream 部分,它显示正在超时的特定上游。

然后在此基础上调整 proxy_read_timeoutfastcgi_read_timeoutuwsgi_read_timeout

还要确保您的配置已加载。

在此处了解更多详情Nginx upstream timed out (why and how to fix)


请注意,该链接会在您滚动时弹出一个非常侵入性的全屏广告……然后实际上并没有提供太多实际信息。
R
Richard

我认为这个错误可能由于各种原因而发生,但它可能特定于您正在使用的模块。例如,我使用 uwsgi 模块看到了这一点,因此必须设置“uwsgi_read_timeout”。


我认为 uwsgi_read_timeout 3600; proxy_send_timeout 3600; proxy_read_timeout 3600;为我工作。
A
Andreas Forslöw

正如许多其他人在这里指出的那样,增加 NGINX 的超时设置可以解决您的问题。

但是,增加超时设置可能不像许多这些答案所暗示的那样简单。正如这些线程中的几乎每个人所建议的那样,我自己也遇到了这个问题,并试图在 /etc/nginx/nginx.conf 文件中更改我的超时设置。这对我一点帮助都没有。 NGINX 的超时设置没有明显变化。现在,几个小时后,我终于设法解决了这个问题。

解决方案在于 this forum thread,它的意思是您应该将超时设置放在 /etc/nginx/conf.d/timeout.conf 中(如果此文件不存在,您应该创建它)。我使用了与线程中建议的相同的设置:

proxy_connect_timeout 600;
proxy_send_timeout 600;
proxy_read_timeout 600;
send_timeout 600;

E
Eino Gourdin

另请检查上游服务器的 keepalive_timeout

我遇到了类似的问题:随机 502,nginx 日志中有 Connection reset by peer 错误,发生在服务器负载过重时。最终发现它是由 nginx' 和上游(在我的例子中是 gunicorn)keepalive_timeout 值之间的不匹配引起的。 Nginx 在 75s 和上游只有几秒钟。这导致上游有时会超时并断开连接,而 nginx 不明白为什么。

提高上游服务器值以匹配 nginx 的值解决了这个问题。


a
aarkerio

我遇到了同样的问题,结果是 Rails 控制器中的“每天”错误。我不知道为什么,但是在生产中,puma 一次又一次地运行错误,导致消息:

从上游读取响应标头时上游超时(110:连接超时)

可能是因为 Nginx 一次又一次地尝试从 puma 获取数据。有趣的是,即使我在控制器中调用不同的操作,错误也会导致超时消息,因此,一个拼写错误会阻止所有应用程序。

检查您的 log/puma.stderr.log 文件,看看是否是这种情况。


t
timhaak

从我们这边来看,它使用的是带有代理缓存的 spdy。当缓存过期时,我们会收到此错误,直到缓存已更新。


M
Maurício Otta

希望它可以帮助某人:我遇到了这个错误,原因是对 phpfpm 日志文件夹的权限错误,在更改它以便 phpfpm 可以写入它之后,一切都很好。


E
Eje

对于 proxy_upstream 超时,我尝试了上述设置,但这些都不起作用。

设置 resolver_timeout 对我有用,因为知道生成上游超时消息需要 30 秒。例如,me.atwibble.com 无法解析(110:操作超时)

http://nginx.org/en/docs/http/ngx_http_core_module.html#resolver_timeout


J
Jagdish Bhadra

我们在保存内容(自定义内容类型)时遇到问题,给出超时错误。通过添加上述所有超时、http 客户端配置为 600 秒并将 php 进程的内存增加到 3gb 来解决此问题。


超时,在 nginx.conf、php.ini 和 settings.php 中添加了其他更新。 Drupal 现在非常臃肿而且根本不健壮。与它困扰您的严重麻烦相比,使用 DRupal 可能带来的任何好处都是不值得的。 Wordpress Sitecore 要好得多
D
Dijkgraaf

如果您在 Windows 10 上使用 wsl2,请通过以下命令检查您的版本:

wsl -l -v

您应该在版本下看到 2。如果没有,则需要安装 wsl_update_x64


A
Amon

如果您像我一样使用运行 Linux 的 AWS EC2 实例,您可能还需要重新启动 Nginx 以在将 proxy_read_timeout 3600; 添加到 etc/nginx/nginx.conf 后使更改生效,我这样做了:sudo systemctl restart nginx


l
leiting.liu

new 向 location 或 nginx.conf 添加一行配置,例如:proxy_read_timeout 900s;


一点帮助都没有

关注公众号,不定期副业成功案例分享
关注公众号

不定期副业成功案例分享

领先一步获取最新的外包任务吗?

立即订阅