Вордпрессом не пользуюсь, но похоже на классическое поведение любых браузеров. Вы отправляете POST запрос. Чего вы ожидаете от обновления страницы? Очевидно браузер снова шлёт POST. Чтобы избежать такого поведения можете, например, послать в ответ редирект. Типа
header('Location: www.example.com');. Это чистый PHP, возможно Wordpress имеет встроенные методы для такого поведения.