Нашел сам ответ, ну может кому поможет.
Делаем так, при наведении на родителя, все элементы делаем выделенные
.parent:hover .element{
background: red;
}
Далее при наведении на элемент, со всех соседей, что справа убираем выделение
.element:hover ~ .element{
background: black;
}