RDS делает бэкапы кластера, даже если он однонодовый.
Насколько я знаю ( у меня нет такой необходимости в работе и я это не делаю) можно настроить дополнительный бэкап именно базы с помощью решений AWS Backup в S3 и выгружать оттуда.
Или дампить базу когда вам надо (как правило девелоперы так и делают в препродакшене с небольшими базами)