Да, вы правы.
Попробовал сделать так.
Часть location оставил с использованием rewrite, а 6 location с использованием proxy_pass.
Результат впечатлил. :-)
Видеопотоки отобразились в 6 соединениях. Видеопотоки, которые должны были идти через rewrite (в обход nginx) не отобразились. Браузер, отбразив 6 видеопотоков продолжал оставаться в режиме ожидания данных от сервера.
Вы правы это ограничение браузера.

> Обычно это обходят, используя на html-странице
>несколько доменных имён, указывающих на один и тот же сервер

Спасибо, попробую.