Yii2 как убрать дублирование записей в $dataProvider при joinWith()?

Question

[Максим]

Всем привет!) Никак не могу разобраться с данными в dataProvider. Возможно это касается не только его, но и запросов.

Суть такая... Я использую модель ProfileSearch в которой делаю joinWith других таблиц с необходимыми данными (город, регион ....).

$query = Profile::find();
        $query = $this->getTabs($query);

        $query->joinWith(['user', 'city', 'certifications', 'appointments.event'])
            ->leftJoin('auth_assignment','auth_assignment.user_id = profile.user_id');

По ним так же производится сортировка и фильтрация данных.

// grid filtering conditions
        $query->andFilterWhere([
            'id' => $this->id,
            'user_id' => $this->user_id,
            'date_birthday' => $this->date_birthday,
            'city.id' => $this->city_id,
            'gender' => $this->gender,
            'category_id' => $this->category_id,
            'comitet_id' => $this->comitet_id,
            'user.status' => $this->status,
            'auth_assignment.item_name' => $this->type,
            'city.id_district' => $this->district_id,
            'city.id_region' => $this->region_id,
        ]);

Всё это вывожу в с помощью виджета ListView используя dataProvider. После joinWith количество данных увеличилось. К примеру, пользователей в системе 100, а $dataProvider->totalCount показывает 150. Ну это и понятно. Ведь сделали leftJoin других данных. Однако появилась другая проблема. При пагинации страниц появляются дубли пользователей.



Вопрос:
1. Как мне убрать дублирование записей?

Comments

[Вячеслав]

group by user_id , не ?

[Дмитрий]

Доброе утро.
А какой запрос получается в итоге, что в debug панели показывает?
Что делает $this->getTabs()?

[Максим]

Вячеслав, действительно не подумал об этом. Я думал это что-то в dataProvider) Блин)) Спасибо)

[Максим]

slo_nik, доброе утро)) Оказалось очень все просто. Действительно не подумал сгруппировать всё по id пользователей. $query->groupBy('id');

В $this->getTabs()

я фильтрую пользователей онлайн, офлайн

/**
     * @param $query ProfileQuery
     * @return mixed
     */
    public function getTabs($query): ProfileQuery
    {
        $tab = Yii::$app->request->get('tab');

        if ($tab ==  Profile::TAB_ONLINE) {
            return $query->online();
        } else if ($tab ==  Profile::TAB_ALL) {
            return $query;
        } else {
            \Yii::$app->request->setQueryParams(['tab' => Profile::TAB_ALL]);
            return $query;
        }
    }

Answer 1

[Евгений Бухарев]

Чтобы исключить дублирование, надо сгруппировать по идентификаторам профилей
$query->groupBy('id');

Comments

[Максим]

И правда)) Что-то я не задумывался об этом. А я думал это связано с провайдером данных, а когда получил ответ ниже вообще понял, что это "нормально")))

[Андрей К]

Максим Ворожцов, я тоже не подумал, но что интересно, создатели сайта фреймворка тоже не подумали.

[Максим]

Андрей К, видимо не такие продвинутые хаха

[Андрей К]

Максим Ворожцов, ну там среди команды точно есть очень крутые чуваки, просто сайт кто-то делал и не парился.

[Максим]

Андрей К, естественно в моих словах сарказм)))))))

[Евгений Бухарев]

Максим Ворожцов, Дело в том что это совершенно нормально, и команда фреймворка тут не причем. Иногда полезно получать plain запрос из ActiveQuery и выполнять его в каком либо клиенте, так на лицо будет видно результаты запроса, и там же сразу можно попробовать решить возникающие проблемы.
Получить plain запрос можно так:
$query->createCommand()->rawSql

[Максим]

Евгений Бухарев, спасибо. Знаю про эту команду!

Answer 2

[Сергей Маловичко]

Вы в самом деле groupBy ?
distinct
https://www.yiiframework.com/doc/api/2.0/yii-db-qu...

Comments

[Максим]

Но тогда он выдает все уникальные значения... Нет? То есть будет тоже самое

[Сергей Маловичко]

Полагаю что user и profile имеют связь 1к1
Почему бы не получить все записи из user с джойном profile?

[Сергей Маловичко]

$query = Users::find()
->distinct()
->joinWith(['user', 'city', 'certifications', 'appointments.event'])
->leftJoin('auth_assignment','auth_assignment.user_id = id');

[Максим]

Сергей Маловичко, да. 1 к 1) Все работает! Решено!

Answer 3

[Андрей К]

Когда я мучался с этой проблемой, я решил посмотреть как это делают профессионалы... Посмотрел код сайта yiiframework.com, раздел новости или что-то подобное, там теги к новостям многие ко многим... В итоге... НИКАК! У них тоже все неправильно отображается.

Я в итоге сделал просто отдельный запрос, а потом сам руками мапил. Проблема Yii2, что если не идёшь по тому, что позволяет фреймворк, то потом нужно с ним бороться, хотя пока все ок - все очень быстро пишется.

Comments

[Максим]

Выше решение)

Answer 4

[mikxa]

Известная проблема дублей при пагинации, в Yii 1 то-же самое. Помогает MultiSort

$dataProvider = new ActiveDataProvider([
'query' => $query,
'sort' => [
'defaultOrder' => ['id' => SORT_DESC],
'enableMultiSort' => true,
],

]);