Чтобы так не было - берете Ansible или Chef и делаете под это конфигурацию. Конфигурацию вы кладете в репозиторий, например, GitHub, а сборки только через Building Tool, например, Jenkins. И все, никаких конфликтов. И отобрать у всех доступ от сервера, конечно