Присваиваем переменной url текущей страницы с якорем.
var url = window.location.href;
Дальше надо спарсить из строки url субстроку с якорем(параметром). Т.к. кроме якоря еще могут быть всякие utm-метки и т.д. Что-то типа:
var anchor = url.search("#block320"); // если не найдет - вернется -1
Если пользователь действительно перешел по ссылке с якорем, скролим чуть вверх(тут 10px, но лучше ориентироваться на разрешение):
if (anchor != -1) {
window.scrollBy(0,-10);
}