Как подсчитать кол-во совпадений строк в логах (для построения гистограмм)?

Question

[Ilia Malashko]

Здравствуйте.

Для анализа access.log необходимо построить гистограмму за несколько дней.
Для этого мне нужно привести лог в следующий вид:

{значение из логов полученное через awk} - {кол-во совпадений}

Раньше я пользовался сервисом онлайн, для этих целей, но большое кол-во данных сервис не вывозит.

Есть вариант импортировать данные в mysql, так получить желаемый результат будет просто, но постоянно импортировать данные трудозатратно.
Через php приходит на ум только перебор с рекурсией, этот способ требует много ресурсов.

Может есть быстрый способ сделать это в exel?
Или на php подскажите метод который сможет обработать большой объем строк.

Если подскажите другие варианты буду очень благодарен.

Comments

[Алексей Уколов]

В тексте вопроса такая же вермишель, как и в тегах.
Что такое "обработать большой объём строк"? Как обработать? При чём тут рекурсия вообще может быть? Что для вас "много ресурсов"?
Если говорить про php, то вам нужно на каждую строку лога натравить регулярку и полученные данные собрать в простую структуру. Это можно сделать относительно эффективно.

[Ипатьев]

кстати, а откуда здесь рекурсия?

Answer 1

[Ипатьев]

awk ... | sort | uniq -c

Comments

[Ilia Malashko]

Ой, как все просто. Спасибо.