Я обновил com.android.support:recyclerview-v7:26.0.0-alpha1 до com.android.support:recyclerview-v7:27.0.0 в проекте и все заработало отлично.
Скорее всего это был баг в библиотеке, поэтому если вы столкнулись с подобной проблемой, просто обновитсь до последней версии и перепроверьте как себя ведет RecyclerView.
