На установленном уже соединении долго обрабатываются запросы?
Или же до установки соединения.
С пингом в 100мс до отправки запроса на сервер уйдет 200-300мс.
Посмотрите в логи перегрузки данных через ReplicaSet по нодам, и вы увидите реальное запаздываение, которые будет больше чем 100мс.