Глобально кеш не используется, кеш был активирован для одного из доменов, не домена X и не тестового, для чистоты эксперимента убрал, и вычистил из конфига все что касается proxy_cache*
И на сколько я понимаю это все же кеширование динамического контента от апача, который в данном случае вообще не задействован.
Прибиваю апач вообще проблема таже самая, это статика отдаваемая NGINX.