Как с помощью grep и сut получить ip и определённую подстроку из строки?

Question

[Дмитрий Сергеев]

Из лог файла веб-сервера нужно получить пары вида IP: __utma. Строки в файле стандартные, только через "|" сохраняются куки.

80.247.101.110 - - [16/Aug/2013:06:58:23 +0400] "POST /edit HTTP/1.1" 404 327 "http://site.ru/" "Mozilla/5.0 (Windows NT 5.1) AppleWebKit/537.22 (KHTML, like Gecko) Chrome/25.0.1364.172 YaBrowser/1.7.1364.17262 Safari/537.22" "-" | "__utma=230214667.2058679839.1371519930.1376615440.1376617932.52; __utmc=230214667; __utmz=230214667.1371519930.1.1.utmcsr=(direct)|utmccn=(direct)|utmcmd=(none)"

Comments

[Дмитрий Сергеев]

Можно хоть чем. Просто интересно можно ли только грепом и катом

[3vi1_0n3]

Грепом можно строки, содержащие __utma выдрать, а дальше с каждой из них работать. Можно и cut'ом, но там по полям парсить не очень хорошо ИМХО будет, за счет пробела как делимитера и его же содержания в полях, awk'ом проще

Answer 1

[3vi1_0n3]

Если можно awk, то так:

cat ./data.txt | awk '{print $1,":",substr($0, index($0,"__utma"),64)}'

Comments

[3vi1_0n3]

Это если __utma= всегда значение такой длины

[3vi1_0n3]

Показалось, что пробел есть, сорри. Тогда чуть длиннее:

cat ./data.txt | awk '{print $1,":",substr($0, index($0,"__utma"),64)}' | sed 's/ :/:/'

[3vi1_0n3]

Если само __utma не надо, то его тоже, соответственно, грепнуть

cat ./data.txt | awk '{print $1,":",substr($0, index($0,"__utma"),64)}' | sed 's/ :/:/' | sed 's/__utma=//g'

Но я бы пробелы оставил, пожалуй, если предполагается дальнейший парсинг

Answer 2

[tgz]

Вот как-то так можно:

for line in $(cat log);
do
    ip=$(echo $line | grep -o "^[0-9]\+\.[0-9]\+\.[0-9]\+\.[0-9]\+")
    utma=$(echo $line |grep -o "__utma=\([0-9]\+\.\)\+[0-9]\+" | cut -d '=' -f2 )
    echo -en "$ip $utma\n"
done

Answer 3

[Жепь Ебрилов]

cat log | awk -F"-" '{print $1,$4}' | awk '{print $1":",$4}' | sed 's/"__utma=//g' | sed 's/;$//'