За этим наблюдаю уже 2 дня. Использую atop,htop и top. Показатели все вроде отличные, озу используется не более чем на 70%, сетевой канал не нагружен из доступного 1Гбит используется не более 400мбит, и у всех соеденение в среднем 2,5 мбит (смотрел через iftop), это как раз та скорость скачивания через https, процессор при этом на гружен максимум на 40%, сетевые прерывания правда на одном ядре висят, сетевая встроенная там на материнке от Asus, очередей не поддерживает но коннектов нет в таком количестве чтобы в сеть упереться. Кстати соеденений в час пик не более 900 смотрю через Nginx stats,

Active connections: 815
server accepts handled requests
384971 384971 287029
Reading: 0 Writing: 800 Waiting: 14

И явно количество тут не причем так как ночью когда Active Connections 10-15 проблема не проходит она стабильна вне зависимости от количества открытых соединений.

По дискам тоже не упираюсь так как там так как сами видео на HDD,а популярные видео на SSD но при этом я специально при скачке брал файлы с каждого из них то есть в скорость дисков не упираемся, сами же диски нагружены максимум на 40-45% а SSD в среднем на 30%.


Через Top посмотрел что по процессору там вот такие показатели в час пик

top - 22:30:13 up 20 days, 9:47, 1 user, load average: 1,03, 1,21, 1,18
Tasks: 142 total, 1 running, 85 sleeping, 0 stopped, 0 zombie
%Cpu(s): 5,9 us, 7,1 sy, 0,0 ni, 67,4 id, 12,5 wa, 0,0 hi, 7,0 si, 0,0 st
KiB Mem : 16285420 total, 196972 free, 3751700 used, 12336748 buff/cache
KiB Swap: 2097148 total, 2069844 free, 27304 used. 12189936 avail Mem

Тут тоже проблем вроде не наблюдается


Уже и не знаю куда копать дальше