Masthead

Как ни странно, оказалось все куда проще чем я думал.

if (process.server) {
      useHead({
        link: {
          rel: 'preload',
          href: '/fonts/junegull-regular.woff2',
          crossorigin: '',
          as: 'font',
          type: 'font/woff2',
        },
      })
    }

Я просто подгрузил шрифт через head и все заработало, мерцать перестало.