Как правильно обновить данные в приложениях по запросу?

Question

[Антон]

Есть бэкенд для мобильных приложений на Laravel к которому поступает запрос на обновление данных в json формате

'data': [
     {'table': 'Product', 'updated_at': <timestamp>}
  ],

В бэкенде выбираются все данные из переданной в запросе таблицы, которые свежее указанного там же updated_at таймстемпа и возвращаются jsonом

public function handle()
    {
        $requestData = request('data');

        $responseData = [];

        foreach ($requestData as $item) {
            $model = "\\App\\" . $item['table'];
            $updated = $item['updated_at'];

            $collection = $model::where('updated_at', '>', $updated)->get();

            if ($collection->count()) {
                $maxUpdatedAt = $collection->pluck('updated_at')->max();

                $responseData[] = [
                    'updated_at' => $maxUpdatedAt,
                    'table' => $item['table'],
                    'data' => $collection->toArray()
                ];
            }

        }

        $response = ['action' => 'update', 'data' => $responseData];

        return response()->json($response);
    }

Возникает вопрос - что делать при огромном количестве запросов? Кеширование в данном случае видимо не подходит. Какие решения подходят для подобных задач? Читал про Broadcasting, но это несколько другой подход и можно ли его использовать в данном случае?

Comments

[JhaoDa]

Как правильно обновить

поступает запрос на обновление данных

Где в коде хоть одна строка, обновляющая данные?

[Антон]

JhaoDa, исправил формулировку

[JhaoDa]

Антон, первое предложение не изменилось.

1. Таки надо обновлять даннне или надо их только отдавать?
2. «при огромном количестве запросов» — мы тут какбэ программисты, а не мариванны из гороно — «огромное» это сколько в цифрах?
3. Каково соотношение количества операций вставок (кто-то же их делает) к количеству операций чтения?

[Антон]

JhaoDa,
1. Данные надо выбирать по условию where('updated_at', '>', $updated) и отдавать. Обновлять не надо.
2. 1000 запросов в минуту
3. Насчёт соотношения сложно сказать, в данном обработчике только чтение

[Дмитрий]

Антон,

1000 запросов в минуту

Для чистой выборки, мне кажется, это несерьезная цифра...

[2vtlk]

Если медленно работает - добавите индекс по updated_at и горя знать не будете. Ну код порефакторить не помешает, зависит от задачи чего нужно добиться

Answer 1

[Razgelday]

Вы явно свернули куда-то не туда, когда начали делать один запрос для получения данных сразу из нескольких таблиц.

1) Лучше придерживаться ресурсного подхода (RESTful API), тогда не будет таких проблем.

В Laravel есть встроенные методы для реализации RESTful API, например resource-controllers (https://laravel.com/docs/master/controllers#resour...

При RESTful подходе вам надо будет делать по 1 запросу для каждой таблицы - это не должно вызывать проблем в большинстве случаев. Если число таблиц у вас огромное - тогда, скорее всего, вы что то не так спроектировали или вам нужно рассмотреть другой тип базы данных (может, ClickHouse? ).

2) Для стандартизации запросов и ответов используйте https://jsonapi.org/.
Для этого есть хорошие пакеты: https://github.com/spatie/laravel-query-builder (бекенд) и https://github.com/robsontenorio/vue-api-query (JS фронт, можно использовать даже в ReactNative).
Если для вас это слишком просто, то посмотрите в сторону GraphQL.