Как сделать выборку в mongodb?

Question

[Хуршед Абдужалил]

В mysql чтобы сделать выборку первых букв можно сделать

SELECT distinct lower(left(name, 1)) as letter FROM table

Можно ли так сделать в mongodb и как сделать если можно?

Answer 1

[Илья Караваев]

Воспользуйтесь агрегацией.

{$group: {
    _id: {$substr: ["$name", 0, 1]}, count: {$sum: 1}
}}

Comments

[Хуршед Абдужалил]

работает, только с кириллицей проблемы

[Илья Караваев]

Хуршед Абдужалил: А вы из какой среды запускаете запрос? Возможно проблема консоли или ПО?

[Хуршед Абдужалил]

Илья Караваев: через консоль запускаю, проблема я думаю в substr так как обычная выборка работает норм

[Илья Караваев]

Хуршед Абдужалил: К меня вроде проблем пока не наблюдалось. Но все возможно. Пробуйте более удобные способы общения с сервером. Например MongoChef (Studio3T)

[Хуршед Абдужалил]

Илья Караваев: ну я вообще на yii2 пишу) там свои запросы есть , позже там посмотрю как себя поведет, но через консоль к сожалению криво выводит... в общем буду разбираться)

[Илья Караваев]

Хуршед Абдужалил: аналогично :) но полезно сначала посмотреть на результат выполнения запроса. прежде чем с ним работать из кода.

[Хуршед Абдужалил]

Илья Караваев: вот это непонятно как исправить переписал запрос на yii2 монго ругается
Detected corrupt BSON data
вот в последней строке

$this->document = $this->db->getQueryBuilder()->aggregate($collectionName, $pipelines, $options);
        $cursor = $this->execute();

        $result = current($cursor->toArray());

[Илья Караваев]

Хуршед Абдужалил: Проблема с деревом, которое было получено в результате запроса. Я так понимаю, что обертки для yii2 неудачно реализуют алгоритмы обработки запросов, отличных от простого поиска. Попробуйте тоже самое реализовать на чистом Mongo. Ответ от запроса агрегации всегда массив. А в случае с агрегацией это еще и массив с 2 элементами. Статус выполнения и результат. И toArray вам не нужен, там один ответ. И current применять нужно к вложенному элементу result (точно уже не помню как он называется).

[Хуршед Абдужалил]

Илья Караваев: просто другие агрегации работают нормально выборка с группировкой и прочее

[Илья Караваев]

Хуршед Абдужалил: ответ кроется в эксперименте на чистой монге. Скорее всего ответ на запрос получается не совсем тем, что планируется и дерево с точки зрения php является поломанным. Можно попробовать еще какую нибудь стадию добавить в агрегацию, например еще один match.

[Хуршед Абдужалил]

Илья Караваев: ошибка оказывается в том что он выводит ошибку "Detected corrupt BSON data" из за того что в тексте встречается кириллица

[Илья Караваев]

Хуршед Абдужалил: Сочувствую. Значит нужно это как то обойти. Использовать другой подход. Но любой другой подход будет дороже.

[Хуршед Абдужалил]

Илья Караваев: есть вариант с костылем, при добавлении в другую коллекцию записывать первые буквы, но это жестко)

[Илья Караваев]

Хуршед Абдужалил: на самом деле можно раз в день проводить map-reduce и обновлять статистику, как это делают на высоко нагруженных проектах.

[Хуршед Абдужалил]

Илья Караваев: я так и не понял как с помощью map-reduse сделать такую выборку

[Илья Караваев]

Хуршед Абдужалил: на самом деле проще, чем кажется. Нужно передать две функции:
1) Сбор статистики - map:
function () {
emit(this.name.substring(0, 1) 1);
};
2) Склеивание статистики - reduce:
function (key, values) {
var sum = 0;
for (var i in values) {
sum += values[i];
}
return sum;
}
И на выходе получишь нужную аналитику.
Если опять не будет проблем с русской кодировкой...

Answer 2

[lega]

Можно через map-reduce.
Но сам по себе такой запрос не эффективен, т.к. происходит перебор всех данных. Как минимум кешировать.

Comments

[Хуршед Абдужалил]

мне нужен для такого фильтра joxi.ru/Q2K00Laf43w9ZA

[Хуршед Абдужалил]

просто для по названию сделать если выборку получается так:

$collection = Yii::$app->mongodb->getCollection('store');
$result = $collection->distinct('name');

а надо чтобы первые буквы были

[lega]

https://docs.mongodb.com/manual/core/map-reduce/

[Хуршед Абдужалил]

lega: ну понял что к чему, но как тогда делать выборку первых букв?