RabbitMQ - это сервер сообщений между "вашими кусками кода". С помощью какого-то кода вы туда шлете данные в какой-то структуре. "Каким-то куском кода" вы слушаете RabbitMQ, получаете эти данные. Вот там где получаете - там и смотрите, что там за софт, который отправляет сообщения в телеграм. Там и смотрите как настроить прокси, и нужно ли его каждый раз отправлять в данных для очереди RabbitMQ.
