В конфиг сислога добавлено вот это ?
$SystemLogRateLimitInterval 0
$SystemLogRateLimitBurst 0
Всё точно идёт сразу в syslog/rsyslog напрямую, а не через
systemd-journal ?
18.01.2024 19:13, Anatoliy Melnik via nginx-ru пишет:
> Фиксировал разными средствами.
> Этот "порог" наблюдается и на rsyslog, и на syslog-ng
> Сливал с 2-х nginx в один syslog -- получилось, расхождения в статистике
> пошли с 100тыс/сек, т.е. вероятнее всего nginx теряет на этапе генерации
> сообщения, а не на этапе транспортировки или приема rsyslog-ом.
>
> Результат не зависит от того, идет ли передача по udp или в unixSocket.
> Если сделать 2 записи аccess_log
> access_log
> syslog:server=unix:/tmp/syslog01,nohostname,facility=local5,severity=debug,tag=nginx_sts02 st01 if=$var0;
> access_log
> syslog:server=unix:/tmp/syslog02,nohostname,facility=local5,severity=debug,tag=nginx_sts02 st01 if=$var1;
>
> С условием "if" так, что бы половина уходила в один syslog, а половина в
> другой (2 независимых rsyslog-а на одном сервере, слив хоть по UDP, хоть
> по unix:socket в любой комбинации)
> Все равно примерно на уровне 50тыс/сек начинается расхождение в количестве.
>
> ------------------------------------------------------------------------
> *От: *"Илья Шипицин" <chipitsine@gmail.com>
> *Кому: *"nginx-ru" <nginx-ru@nginx.org>
> *Отправленные: *Среда, 17 Январь 2024 г 15:31:49
> *Тема: *Re: Тест nginx -- сколько сообщений в log syslog без потерь?
>
>
>
> ср, 17 янв. 2024 г. в 12:49, Anatoliy Melnik via nginx-ru
> <nginx-ru@nginx.org <mailto:nginx-ru@nginx.org>>:
>
> Здравствуйте.
> Есть nginx-ы, несколько разных версий. Проксируют запросы к бекэндам.
> Логи льются в syslog (слив в файлы напрямую из nginx не желателен).
> По косвенным методам контроля вылезла проблема:
> До примерно 50 тыс/сек сообщений статистика прокси и бекэндов
> сходится, а вот начиная примерно с 50тыс/сек начинаются расхождения.
> nginx->syslog фиксирует меньше событий, чем сумма по бекэндам.
> Чем выше интенсивность запросов, тем больше расходятся данные.
> Сначала грешил на syslog, но детальные разборы полетов говорят, что
> скорее всего проблема в nginx.
>
>
> а можно раскрыть, что имеется в виду под "детальные разборы полетов
> говорят" ?
> по идее, проведя детальное расследование, которое что-то скажет, вы уже
> получили ответ
>
> У кого-то что-то такое наблюдалось или нет?
> При сливе логов с 2-х nginx-ов в один syslog все хорошо до примерно
> 100тыс/сек, т.е. скорее всего syslog не виноват.
> Кто-то с таким сталкивался?
> _______________________________________________
> nginx-ru mailing list
> nginx-ru@nginx.org <mailto:nginx-ru@nginx.org>
> https://mailman.nginx.org/mailman/listinfo/nginx-ru
> https://mailman.nginx.org/mailman/listinfo/nginx-ru
>
>
>
> _______________________________________________
> nginx-ru mailing list
> nginx-ru@nginx.org
> https://mailman.nginx.org/mailman/listinfo/nginx-ru
--
Павел
_______________________________________________
nginx-ru mailing list
nginx-ru@nginx.org
https://mailman.nginx.org/mailman/listinfo/nginx-ru