Нашел ошибку. Она заключалась в большом колличетсве коннектов средствами джанги к разным БД в старте проекта, что-то вроде:
for key, value in dict_databases.items():
DATABASES[key] = {
"ENGINE": "django.db.backends.oracle",
"NAME": key_key_key_...,
...
Удалив данные строки и делая коннект через пулл
cx_Oracle все работает как надо.