Как убрать - не искал, но зато могу объяснить из-за чего это происходит и как контролировать...
Если курсор поднести прям вниз экрана и удерживать его там, то панель перепрыгнет на тот экран где удерживаешь курсор. Если Dock размещается сбоку, то курсор следовательно нужно удержать на краю того места где размещается панель.
Собственно на второй монитор у меня панель иногда перепрыгивает когда случайно курсор могу очень долго держать внизу второго экрана. Изначально это максимально не очевидно из-за чего такое происходит, но со временем уже быстро научился как возвращать панель назад.