Клиент всегда один, источник трафика заранее известен. Вывод - зачем городить огород из gstreamer, rtmp... Подавай из консоли через ffmpeg в транспорте rtsp. В браузере принять можно тем же flow-плеером. Но все это все равно будет с хоть какой-то, но буферизацией. Для идеальной передачи, задержка которой будет чуть больше сетевой, нужно использовать телефонические протоколы, с отдельной сигнализацией. Можно поковыряться с
SIPом.
Вы говорите, что нужно минимизировать задержки. Обычно это требуется для видеоконференций. И вы, я полагаю, понимаете, что всякие циски, эриксоны и прочие поликомы тратят деньги на разработку своих проприетарных протоколов для этой цели. Если бы все было так доступно, наверно они этим не занимались.