Symfony serialize при добавлении определенной связи перестает работать, почему?

Question

[Максим Лагойский]

Всем привет, есть 3 таблицы, user, ticket, ticket_assigned_user, у ticket есть связь с ticket_assigned_user эта связь OneToMany. Но если добавляю связь OneToMany между user и ticket_assigned_user то сериализатор уходит так что страница падает с ошибкой по таймауту. В чем именно тут проблема?

Как я сериализую

$encoders = [new XmlEncoder(), new JsonEncoder()];
        $classMetadataFactory = new ClassMetadataFactory(new XmlFileLoader('/var/www/new-sys.local/config/packages/serialization/definition.xml'));
        $defaultContext = [
            AbstractObjectNormalizer::MAX_DEPTH_HANDLER => function ($innerObject, $outerObject, string $attributeName, string $format = null, array $context = []) {
                return $innerObject->id;
            },
            AbstractNormalizer::CIRCULAR_REFERENCE_HANDLER => function ($object, $format, $context) {
                return $object->getId();
            },
        ];
        $normalizers = [
            new DateTimeNormalizer(),
            new ObjectNormalizer(
                $classMetadataFactory,
                null,
                null,
                null,
                null,
                null,
                $defaultContext
            ),
        ];
        $serializer = new Serializer($normalizers, $encoders);
        $tickets = $this->em->getRepository(Ticket::class)->findBy([], null, 10);
        $jsonContent = $serializer->serialize($tickets, 'json', [
            AbstractObjectNormalizer::ENABLE_MAX_DEPTH => true,
        ]);

И может знает кто хороший пример работы api проекта на симфони с использованием symfony/serializator?

Comments

[BoShurik]

Попробуйте убрать таймаут и посмотрите с какой ошибкой упадет. Есть вероятность что можно будет зацепиться за стектрейс

[Максим Лагойский]

BoShurik, извиняюсь, поспешил я с таймаутом. Другая ошибка немного.

2019/12/16 15:38:41 [error] 1259#1259: *134 FastCGI sent in stderr: "PHP message: PHP Fatal error: Allowed memory size of 134217728 bytes exhausted (tried to allocate 20480 bytes) in /var/www/new-sys.local/vendor/symfony/serializer/Normalizer/AbstractNormalizer.php on line 184

[BoShurik]

Что находится в AbstractNormalizer.php on line 184 ?

[Максим Лагойский]

Unset там сидит

[Максим Лагойский]

BoShurik, вроде понятно как оно ломается. Если выбирать из бд, к примеру user то у него есть связь один ко многим на сущность/таблицу assignedTicket(тикеты назначеные ему), у этой сущности есть связь на ticket, а ticket в свою очередь имеет связь на assignedUsers ну и дальше там по кругу походу начинает ходить. Как с этим справляться с помощью symfony/serializer?

[Александр Гетманский]

Максим Лагойский, вы уже это сделали:

AbstractNormalizer::CIRCULAR_REFERENCE_HANDLER => function ($object, $format, $context) {
        return $object->getId();
    },

Вы пробывали увеличить размер максимально доступной памяти? Можно попробывать вообще убрать ограничение по памяти и посмотреть получится продвинуться дальше.

[Максим Лагойский]

Александр Гетманский, попробовал 10гб памяти выделить и 10мин тоже самое, когда дебажил какие объекты в колбэк функцию попадают AbstractNormalizer::CIRCULAR_REFERENCE_HANDLER то после фиг знает какой уже итерации 300+ точно было, но с какого то момента он кажется стал ходить по кругу((

[Александр Гетманский]

Максим Лагойский,

уже итерации 300+ точно было

У вас там лимит стоит на 10 объектов, так что я могу предположить, что либо очень много билетов на одного пользователя приходится, либо он гораздо раньше вошел в рекурсию. Какое общее кол-во билетов на этих 10 пользователей приходится? Смущает также то, что когда он находит рекурсию и не задано функции для ее обработки, то сериалайзер выбрасывает CircularReferenceException. Попробуйте убрать AbstractNormalizer::CIRCULAR_REFERENCE_HANDLER и посмотреть будет ли бошено исключение, или он и дальше будет падать по памяти.

[Максим Лагойский]

Александр Гетманский, короче получилось заставить его отобразить результат. Из json становится понятно что он начинает по кругу крутить несколько связей и так до "7 колена", по хорошему наверное одну связь надо добавить в IGNORE_ATTRIBUTES и все будет в шоколаде. Есть где посмотреть примеры как на относительно реальных примерах работают с сериализатором этим?

кусочек json

[
  {
    "id": 1001,
    "priority": "urgent",
    "type": "technical",
    "status": "new",
    "title": "At id quia nesciunt consectetur ad consequatur. Temporibus maxime facere perferendis voluptatem. Eum consequatur libero sed quasi deserunt eos omnis.",
    "createdAt": "2019-06-28T23:02:36+03:00",
    "updatedAt": null,
    "assignedUsers": [
      {
        "id": 3036,
        "ticket": 1001,
        "user": {
          "id": 106,
          "username": "tromp.brandyn",
          "password": ")#.4rrhqFQwu8my1",
          "roles": [
            "ROLE_SUPER_CLIENT"
          ],
          "status": "active",
          "firstName": "Lilian",
          "lastName": "Will",
          "email": "[e-mail]",
          "assignedTickets": [
            3036,
            {
              "id": 3046,
              "ticket": {
                "id": 1003,
                "priority": "urgent",
                "type": "other",
                "status": "closed",
                "title": "Vel id natus sunt aut cum. Aut inventore expedita magnam corporis suscipit. Dolorem aut ut fugiat et sit. Qui eos aliquam sed et ratione. Inventore eos qui doloremque unde qui. Voluptatem nisi nam ut quia corrupti perferendis voluptates aut.",
                "createdAt": "2018-04-29T08:29:55+03:00",
                "updatedAt": null,
                "assignedUsers": [
                  {
                    "id": 3042,
                    "ticket": 1003,
                    "user": {
                      "id": 108,
                      "username": "river04",
                      "password": "5JQbL5VS52JI}`yb)L{y",
                      "roles": [
                        "ROLE_SUPER_CLIENT"
                      ],
                      "status": "blocked",
                      "firstName": "Arnaldo",
                      "lastName": "Homenick",
                      "email": "[e-mail]",
                      "assignedTickets": [
                        3042,
                        {
                          "id": 3060,
                          "ticket": {
                            "id": 1007,
                            "priority": "major",
                            "type": "billing",
                            "status": "new",
                            "title": "Voluptas et tempore sunt laborum iure expedita quasi nam. Asperiores sint est alias eligendi. Qui eos incidunt dolores dolore adipisci distinctio.",
                            "createdAt": "2019-06-12T15:40:14+03:00",
                            "updatedAt": null,
                            "assignedUsers": [....

[Александр Гетманский]

Все поняно, так как у вас не просто первый класс ссылается на второй и второй на первый, а через третью сущность, то Doctrine неверно их обрабатывает(это видно по json, что приложили). В таком случаи стоит убрать вывод поля user.assignedTickets, как раз через упомянутый вами массив

[AbstractNormalizer::ATTRIBUTES => ['assignedUsers' => ['assignedTickets']]

, тогда структура будет плоская, но без ухода в рекурсию.

Есть где посмотреть примеры как на относительно реальных примерах работают с сериализатором этим?

Только документация, а дальше уже нужно просто продумывать все запросы. Если говорить относительно этйо задачи, я бы на вашем месте сделал просто один метод в классе репозитория билетов и в нем реализовал SQL-запрос в обход Doctrine, так как в итоге необходимо получить json, а использование ORM дает большие накладные расходы и неоптимальные пачки запросов к БД.

[Максим Лагойский]

Александр Гетманский, понял, спасибо. Если хотите сделайте это ответом я отмечу как решение.

Answer 1

[Александр Гетманский]

Так как у вас не просто первый класс ссылается на второй и второй на первый, а через третью сущность, то Doctrine неверно их обрабатывает. В таком случаи стоит убрать вывод поля user.assignedTickets, как раз через упомянутый вами массив

[AbstractNormalizer::ATTRIBUTES => ['assignedUsers' => ['assignedTickets']]

, тогда структура будет плоская, но без ухода в рекурсию.

Есть где посмотреть примеры как на относительно реальных примерах работают с сериализатором этим?

Только документация, а дальше уже нужно просто продумывать все запросы. Если говорить относительно этйо задачи, я бы на вашем месте сделал просто один метод в классе репозитория билетов и в нем реализовал SQL-запрос в обход Doctrine, так как в итоге необходимо получить json, а использование ORM дает большие накладные расходы и неоптимальные пачки запросов к БД.