Вам нужен хоть какой-то слой абстракции для удобной реализации подобного функционала
Когда я писал нечто подобное, то у меня для каждого select`a был отдельный экземпляр класса, в котором хранилась ссылка на контейнер самого селекта.
Это позволило мне отслеживать клики вне текущего селекта вот таким образом:
// *При инициализации экземпляра класса*
// this.contain - ссылка на контейнер самого селекта.
// this.close() - метод, который закрывает селект
// this.condition - Объект, с текущим состоянием селекта
document.addEventListener( 'click', e => {
if( !e.path.includes( this.contain ) && this.condition.opened ){
this.close();
}
});
Вот код последней версии:
jsfiddle 
Средний
