В общем, попробовал создать модель на основе QAbstractTableModel. Не знаю как точно по скорости, но данные зрительно загружаются в tableView быстрее, чем при использовании QStandardItemModel. А работать с данным и с самой таблицей теперь стало легче.