Использовать
mosh
он использует для связи UDP-посылки и не завязан на поддержание tcp-канала.
точнее tcp-канал нужен только в начале чтобы простучаться на сервер через ssh и запустить прогу слушать порт.
обещают что mosh выдерживает даже переключение "интернет-канала" c wifi на сотовый канал и т.д.