С большой вероятностью проблема в линии adsl - либо плохие параметры линии (затухание/наводки/протяженность) либо перегруженность линии абонентами. Посмотреть параметры можно через веб-интерфейс adsl-модема. Посмотрите, если затухание показывает ниже 6-7dBm, то кабель просто не вытягивает, тогда откройте заявку у провайдера не на плохие пинги, а на плохие параметры линии. В любом случае нужно будет решать вопрос через техподдержку провайдера.
Попробуйте перезагрузить модем по питанию, если после этого потери и задержки уйдут, возможно проблема в модеме.