Попробуйте установить html-loader. Помимо того что он может работать c импортами, он еще так же парсит нашу html страницу на img и сам после сборки копирует файлы из тега в dist и автоматом вставляет новые пути с [hash]. Не забудь в output указать куда ложить assset module
output: {
assetModuleFilename: 'assets/[name].[hash].[ext]',
}
{
test: /\.html$/,
use: 'html-loader',
}