В исходном HTML оставить только те блоки, которые должны прогрузиться так или иначе. Всё остальное подгружать из JSON файла после нажатия на кнопку (можешь взять пустой подгружаемый блок (используй как шаблон) и в него запихивать данные из файла).
Берёшь шаблон, в него записываешь значения из JSON и добавляешь его в родительский блок (у тебя в данном случае блок с классом flex)
В этом случае браузер не должен тратить ресурсы на отрисовку тех элементов, которых нет.
