Вам нужно поставить себе цель зачем вам вебпак)
webpack это лишь оболочка над кучей плагинов и лоадеров. Дефолтный (к примеру) vue cli проект уже настраивает вебпак плагины и множество лоадеров. Посмотреть это вы можете к примеру через yarn vue-cli-service inspect
К примеру поставьте себе цель добиться максимально-возможной оптимизации сайта, Начните с css/html/js. (тоесть CssMinimizerWebpackPlugin/HtmlWebpackPlugin/TerserPlugin). Попробуйте настроить оптимизаторы так чтоб код после них не нуждался в обфускаторах.
Поиграйтесь с лоадерами заставляя их работать только как препроцессоры. Возможно в процессе вы столкнетесь с тонкостями асинхронного js. Поиграйтесь с SEO-оптимизацией. В процессе вы вероятно столкнетейсь с нехваткой документации и научитесь разбирать код чужих лоадеров. Пока я где-то на этом этапе))
PS: без WEBPACK-а никак. Вообще никак. Нет и даже так без него никак