Добавил отдельный location для статики, все работает

location /static/ {
alias /srv/www/frontend/build/static/;
if env "CI_BUILD_TAG"
expires 14d;
add_header Cache-Control s-maxage=3600;
end
}