Докопался до истины, вся проблема была не в железе, так как я говорил что просадки появились, а их не было. Если бы они были всегда, то и вопроса бы не возникло, это однозначно была бы вина настроек и железа.
ОТВЕТ: Запускать OBS, Streamlabs OBS от имени администратора. Они (разработчики) выпустили фикс (он работает только от имени администратора) распределения нагрузки между кодированием потока видео в реальном времени и кодированием кадров игры. Откопал это в
данном видео(ссылка с таймкодом, но если не сработает то - 5:51). Спасибо всем кто принимал участие.
Добавлю несколько ключевых слов в вопрос, чтоб поисковики их смогли проиндексировать для людей у кого в будущем возникнет такой вопрос.