Хорошо попробую, но тут возникла драгая проблема
Вроде бы выставлено

fastcgi_cache_valid 8h;
fastcgi_cache balance;
fastcgi_cache_key "$remote_addr";

При двух минутном опросе все прекрасно отдается из кеша, увеличил время опроса до 15минут и опа, перестает браться из кеша.