Способ временно "отключить" неиспользуемые языки я не нашёл, но есть вариант быстрого переключения на нужный вам язык.
Зайдите в Параметры -> Ввод -> Дополнительные параметры клавиатуры -> Сочетания клавиш для языков ввода или Параметры языковой панели.
Там вы можете настроить комбинацию клавиш для каждого отдельного языка. Например у меня это комбинации SHIFT + LEFT ALT + цифра, в зависимости от положения языка в списке имеющихся раскладок.