Какой sql запрос нужен чтобы получить последнюю дату события для каждого домена?

Question

[Sergei]

Есть таблица по crawls на разные домены. Нужно узнать даты последних кроулов для каждого домена. Всего их 13.

Вот такой код выдаёт ошибку и является неполноценным. При его правильном написании сможет показать только последние даты.

SELECT * FROM Crawl_Datetime LIMIT 1000
WHERE date =
(SELECT MAX(date) FROM Crawl_Datetime

Текст ошибки:
Syntax error: Expected end of input but got keyword WHERE at [2:1]

Comments

[Алексей Арх]

LIMIT надо в конце писать.

SELECT `domain`, MAX(`date`) as `max_date` FROM `crawls`
GROUP BY `domain`
ORDER BY `max_date` DESC
LIMIT 1000

[Akina]

Текст ошибки:
Syntax error: Expected end of input but got keyword WHERE at [2:1]

Этот текст ошибки никакого отношения к MySQL не имеет даже приблизительно... По тексту сообщения больше похоже на BigQuery.
Так что если пишешь про себя "Изучаю SQL" - то начни с изучения, какую СУБД используешь, что ли.

Нужно узнать даты последних кроулов для каждого домена. Всего их 13.

Если нужна только дата - нафига ты выбираешь все поля (SELECT *) ?
Если их "всего 13" - нафига LIMIT 1000 ?

[Sergei]

Akina, да, исправил на Google Cloud platform

Answer 1

[mayton2019]

Возможно это не простая таблица а Google Big Table. Тогда обычные практики оптимизации SQL могут плохо работать. Я-бы предложил не использовать group by а переписать с window functions если gbt это поддерживает. И посмотреть как партицирована таблица. Возможно под специфичный query стоит сменить partitioning если там он дефолтный или неудачный.

Answer 2

[Akina]

WITH cte AS (
    SELECT *, ROW_NUMBER() OVER (PARTITION BY domain ORDER BY date DESC) AS rn
    FROM Crawl_Datetime
)
SELECT * 
FROM cte
WHERE rn = 1