ВЕСЬ трафик - только с помощью VPN
Но если ваши приложения умеют socks прокси, то все очень просто - запускаете ssh подключение к вашему удаленному ubuntu серверу, с ключом -D1080 (1080 это локальный на вашей windows порт, н котором у вас будет прокси), или настроив в putty SSH -> Tunnels -> Dynamic и прописать source port 1080.
Все, теперь достаточно в ваших приложениях указать прокси localhost:1080 и все будет работать (осторожно, некоторые приложения не умеют резолвить DNS через прокси, а в браузерах надо отдельно крыжик ставить)
p.s. udp так не проксировать