сталкивался с похожим. виновником оказался - один из интернет-провайдеров хостинг-компании. Причина - маршруты на данный пул адресов не прописаны или каким-то образом изменены и трафик идет через китай.
Они включили на данный VPS второго и все стало нормально.
Сделайте трассировку маршрута в обе стороны. В обратную можно просто до вашего провайдера в спидтесте.