Создай дополнительную таблицу, в ней храни местоположение своих моделей а именно на какой строке заканчивается последнее поле. Когда через форму придет запрос на изменение то изменяй фаил моделс и админ затем сдвинь все другие модели на количество добавленых или убавленных строк, в конце через ос.систем выполняй миграции и перезагружай джанго.
Это такое костыльное решение получится но рабочее.
Самый лучший вариант это JsonField использовать, но при удаления и изменения поля, нужно будет брать выборку всех записей и в каждом удалить или добавить поле. Либо сделать отдельное подключение к psycopg и прямым SQL запросом удалить/обновить все.
