Надо искать в файле 404.php темы или попробовать переустановить файлы WordPress (не трогая БД). Хотя не исключение, что проблема может быть и в браузере (можно попробовать запустить сайт на другом браузере, если редирект остался — проблема в сайте, если редирект исчез — проблема в данных браузера).