Welcome! Log In Create A New Profile

Advanced

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел
September 12, 2009 03:38PM
Добрый день!

Большое спасибо за развернутый ответ, отвечаю ниже.

2009/9/12 Gena Makhomed <gmm@csdoc.com>:
> On Monday, September 7, 2009 at 23:18:21, Одинцов Павел wrote:
>
> ОП> Имеется очень противная проблема, nginx 0.6.38 (epel репозиторий)
> ОП> стоит проксей перед хостинговой Апачей и попутно раздает статику;
> ОП> изредка на паре машин из полутора десятков nginx (master процесс)
> ОП> начинает жутко поедать память и в итоге через пару минут сваливает
> ОП> машину. Подозрения о причинах такого поведения есть в сторону буферов
> ОП> и проксирования больших файлов от Апача, но тут ничего толком не
> ОП> получилось понять.  Помогайте :(
>
> насколько часто ему посылается SIGHUP, SIGUSR1 и другие сигналы?

SIGHUP посылается весьма часто (до десятков раз в час и больше), т.к.
клиенты реконфигурируют сайты и для этого необходим мягкий релоад
nginx; другие сигналы не используются.

>
> ОП> Конфиг:
>
> ОП> worker_processes  1;
>
> на 4-ядерном Xeon`е наверное более эффективно
> было бы использовать как минимум 4 worker`а:
>
> worker_processes  4;

Ядер машине отдано сейчас три и настройка до worker_process 3; уже
применена, просто старый конфиг привел.

> worker_priority -10;

Да, согласен, спасибо, а-то временами nginx подлагивает, т.к. другие
процессы забивают проц.

> worker_cpu_affinity 0001 0010 0100 1000;

Вот за это спасибо, не знал, что воркеры можно явно повесить на отдельные ядра.

>
> ОП> events {
> ОП>     worker_connections  10024;
>
> ОП> http {
> ОП>     keepalive_timeout  65;
>
> это разве не мало для 4-ядерного сервера с 10 GB памяти,
> который находится при этом "под очень большой нагрузкой" ?
>
> ===============================================================
>
> http://wiki.nginx.org/NginxHttpEventsModule#worker_connections
>
> The worker_connections and worker_proceses from the main section allows you to calculate maxclients value:
>
> max_clients = worker_processes * worker_connections
>
> In a reverse proxy situation, max_clients becomes
>
> max_clients = worker_processes * worker_connections/4
>
> Since a browser opens 2 connections by default to a server and nginx uses the fds (file descriptors) from the same pool to connect to the upstream backend
>
> ===============================================================
>
> в современных браузерах не 2 connections by default,
> вот например, как это выглядит для нового Firefox`а:
>
> network.http.max-connections-per-server
> (Minimo default: 2. All others default: 8. Firefox 3: 15)
>
> network.http.max-persistent-connections-per-server
> (Default: 2. Firefox 3: 6)
>
> PS возможно лучше было бы оценивать не число max_clients,
> а более точное число max_client_connections (keepalive+active):
>
> max_client_connections = worker_processes * worker_connections / 2
> для запросов требующих обращения к {proxy,fastcgi,memcached}_pass
>
> max_client_connections = worker_processes * worker_connections
> для запросов, которые nginx обслуживает без обращения к backend`ам.
>
> --
> Best regards,
>  Gena
>
>
>

А вот последнее требует обстоятельного обдумывания, сейчас постараюсь
снять статистику по нагрузке, чтобы посчитать.

--
С уважением, Одинцов Павел
Subject Author Posted

Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 07, 2009 06:18PM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 08, 2009 01:18AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 08, 2009 07:06AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 09, 2009 05:00PM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 10, 2009 01:18AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 11, 2009 02:44AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 11, 2009 03:04AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 11, 2009 03:32AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 11, 2009 03:54AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 11, 2009 04:16AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 11, 2009 05:04AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Alex Vorona September 11, 2009 05:06AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Gena Makhomed September 12, 2009 03:10PM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 12, 2009 03:38PM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 12, 2009 03:54PM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 12, 2009 04:24PM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Noon es Shadow September 12, 2009 04:46PM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 12, 2009 05:06PM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Noon es Shadow September 13, 2009 04:28AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 13, 2009 05:30AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 13, 2009 09:06AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 13, 2009 09:18AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 14, 2009 04:40AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Alex Vorona September 14, 2009 05:10AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 14, 2009 05:12AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 14, 2009 06:08AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 14, 2009 06:34AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 14, 2009 09:22AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 14, 2009 10:18AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 14, 2009 10:32AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 14, 2009 02:04PM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 14, 2009 02:16PM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 14, 2009 02:34PM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 14, 2009 02:40PM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 14, 2009 02:54PM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 16, 2009 12:34PM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 16, 2009 01:46PM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 17, 2009 12:16AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Maxim Dounin September 17, 2009 07:04AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 17, 2009 07:28AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Andrew Sitnikov September 17, 2009 07:52AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Alex Vorona September 17, 2009 07:58AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 17, 2009 08:16AM

Повторный вызов backend в случае ошибки POST-запроса. ..

Eugene September 17, 2009 08:28AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Gena Makhomed September 17, 2009 08:26AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Maxim Dounin September 17, 2009 09:20AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 17, 2009 08:14AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 17, 2009 09:34AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 17, 2009 09:52AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 17, 2009 10:14AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 17, 2009 10:22AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 18, 2009 06:00AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Maxim Dounin September 18, 2009 07:00AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 18, 2009 07:14AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 18, 2009 03:22PM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 18, 2009 11:24AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Maxim Dounin September 18, 2009 11:24AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 18, 2009 11:24AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 17, 2009 06:52AM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 12, 2009 04:48PM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 12, 2009 05:06PM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Gena Makhomed September 12, 2009 05:16PM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 12, 2009 08:44PM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Одинцов Павел September 12, 2009 08:44PM

Re: Master процесс nginx 0.6.38 съедает всю доступную память

Igor Sysoev September 13, 2009 05:30AM



Sorry, only registered users may post in this forum.

Click here to login

Online Users

Guests: 165
Record Number of Users: 8 on April 13, 2023
Record Number of Guests: 421 on December 02, 2018
Powered by nginx      Powered by FreeBSD      PHP Powered      Powered by MariaDB      ipv6 ready