Однозначно, при связке django + drf + react не стоит использовать рендеринг шаблонов от джанги, django + drf тут нужны только для организации REST API.
По структуре проекта я придерживаюсь примерно такого:
backend
apps
requirements
django_app_name
settings.py
urls.py
wsgi.py
manage.py
frontend
node_modules
public
src
package-lock.json
package.json
а по запуску проекта - это разные контейнеры для фронтенда и бекенда, которые находятся в одной сети