Если провайдеры отдают настройки по DHCP и это простое (не L2TP и проч.) соединение, то достаточно переткнуть кабель, который идёт в роутер и больше ничего не делать.
Если провайдеры отдают интернет с настройками логина и пароля, то проще взять второй роутер, настроить под второго провайдера и перетыкать уже кабель, который идёт к компьютеру.
Ещё можно настроить роутер на автоматическое переключение (оба провода от провайдеров будут воткнуты в роутер постоянно), но не все роутеры это могут.