Дмитрий

https://docs.celeryproject.org/en/stable/userguide...

Если запросы по двум полям сразу, то лучше сделать Multicolumn Index: https://www.postgresql.org/docs/10/indexes-multico...

Написать кастомную команду, к-я будет парсить файлы и писать данные в БД. https://docs.djangoproject.com/en/3.2/howto/custom...

https://docs.djangoproject.com/en/3.2/topics/db/ex...

python manage.py collectstatic
https://docs.djangoproject.com/en/3.2/howto/static...

Для начала нужно разобраться с основами веб-разработки и понять как взаимодействуют front и back.
8080 localhost - это dev server, он нужен только для удобства разработки, с django он никак не взаимодействует.
Вот неплохой гайд https://www.saaspegasus.com/guides/modern-javascri...

BASE_DIR / "static" - научись строки объединять

> redis.exceptions.ConnectionError:
Это ни чем не говорит?
Не удалось подключится к redis.

1) Error loading MySQLdb module - видимо, не установлена библиотека для работы с МуSQL
2) unsupported pickle protocol: 3 - смотрите, что задали в конфиге celery
3) посмотрите версию установленного в системе питона, скорее всего это 2.7 и именно он и запускается

1) смотрите логи nginx и django, чтобы понять где тратится время
2) профилируйте код, скорее всего добавился новый "тяжелый" запрос к БД.

Протокол htpp работает одинаково для всех клиентов. Какая разница кто делает GET: браузер или приложение?

Django не при чем, ssl/tls termination должен делать веб-сервер, например nginx.

PYTHONPATH

На сервере один root пользователь. Подключаюсь по ssh.

Используется пароль или ключ? Если пароль, то его тупо могли подобрать, скриптов к-е этим занимаются полно.

PYTHONPATH

Это плохая идея передавать параметры подключения к БД в url. Для таких целей используется конфиг.