Если так делать, то слишком много лишних вкладок будет. Попробуйте воспользоваться всей полнотой навигации от JB, используя "Undo last navigation operation" (Ctrl+Alt+Left or Button4 Click) и "Redo last undone navigation operation" (Ctrl+Alt+Right or Button5 Click) и "Last Edit Location" (Ctrl+Shift+Backspace)
Подробнее о навигации
Еще посмотрите плагины в разделе Navigation, например Open in splitted tab