Как сделать регулярное выражение в bash скрипте?

Question

[jenya7771]

Здравствуйте, объясните, как мне сделать так, что бы

day = 1
item = "backups_all_ 2021.01.08|15.25.30.tar.gz"
d="$(date +%Y-%m-%d -d "$day days ago")"

if [[ item =~ "backups_all_$d|*.tar.gz" ]]
then
            echo "ok"
fi

Как мне интегрировать регулярное выражение, что бы после слеша (|) могло быть любое время и в ответе было OK?

Comments

[hint000]

после слеша (|)

Этот символ не называется слеш. Слеш - это косая черта. А вертикальная - это "пайп".

[jenya7771]

hint000, Буду знать, спасибо

Answer 1

[Saboteur]

Убрать пробелы вокруг =
проверить что у вас используются правильные символы везде, а то в item пишешь 2021.01.08 через точку, а в date пишешь %Y-%m-%d через дефис.
В регулярке убрать кавычки и заменить звезочку на точку со звездочкой.

#!/bin/bash

day=2
item="backups_all_2021-01-08|15.25.30.tar.gz"
d="$(date +%Y-%m-%d -d "$day days ago")"

if [[ $item =~ backups_all_$d|.*.tar.gz ]]; then
  echo "ok"
fi

Comments

[jenya7771]

Вот на таком скрипте тестирую:

#!/bin/bash

HOST=""
USER=""
PASSWD=""
UFILE="/bk"
DAYS=3
MONTHS=3

LIST="$(curl -u $USER:$PASSWD ftp://$HOST/$UFILE/ -s -l)"
for li in $LIST
do
    EXIST=0
    
    if [ "$li" = "." ] || [ "$li" = ".." ]
    then
        continue
    fi
    
    for day in `seq 0 $DAYS`
    do  
        d="$(date +%Y-%m-%d -d "$day days ago")"
        if [[ $li =~ backups_all_$d|.*.tar.gz ]]; then
            EXIST=1
            continue
        fi
    done
    
    for month in `seq 0 $MONTHS`
    do
        d="$(date +%Y-%m-01 -d "$month month ago")"
        if [[ $li =~ backups_all_$d|.*.tar.gz ]]; then
            EXIST=1
            continue
        fi
    done
    
    if [ $EXIST -eq 0 ]
    then
        curl -u $USER:$PASSWD ftp://$HOST/$UFILE/ -s -X "DELE $li"
    fi
done

И вот такие ошибки:

test_del.sh: 23: test_del.sh: [[: not found
test_del.sh: 23: test_del.sh: .*.tar.gz: not found
test_del.sh: 32: test_del.sh: [[: not found
test_del.sh: 32: test_del.sh: .*.tar.gz: not found

Может знаете причину?

[Saboteur]

На всякий случай проверьте что у вас за /bin/bash, возможно это линк на другой шелл?
двойные квадратные скобки могут не работать в dash и более старых шеллах

[jenya7771]

Saboteur,
echo $BASH_VERSION
4.4.20(1)-release

По пути /bin/bash открывается файл, с непонятной кодировкой

[Saboteur]

help [[
выводит справку или ошибку?

[jenya7771]

Saboteur, выводит справку.
Я запускал скрипт командой sh, и тогда ошибка. Если запускаю командой bash то ошибки вроде нет, но и не выполняется то что должно.
Скрипт по идее должен удалять не соответствующий файл, для теста добавил файл на ftp сервер с названием test, и скрипт его не удалять почему-то

[jenya7771]

jenya7771, во все if заходит скрипт, не зависимо от названия файлов на ftp

[Saboteur]

добавьте вывод дебаг информации через echo - что именно скрипт находит, что должен искать. Или приведите названия нескольких файлов

[jenya7771]

Saboteur, Вот так скрипт выполняю:

#!/bin/bash

HOST=""
USER=""
PASSWD=""
UFILE="/bk"
DAYS=2
MONTHS=3

LIST="$(curl -u $USER:$PASSWD ftp://$HOST/$UFILE/ -s -l)"
for li in $LIST
do
    EXIST=0
    
    if [ "$li" = "." ] || [ "$li" = ".." ]
    then
        continue
    fi
    
    for day in `seq 0 $DAYS`
    do  
        d="$(date +%Y-%m-%d -d "$day days ago")"
        if [[ $li =~ backups_all_$d|.*.tar.gz ]]; then
            echo days,  file name - $li
            EXIST=1
            continue
        fi
    done
    
    for month in `seq 0 $MONTHS`
    do
        d="$(date +%Y-%m-01 -d "$month month ago")"
        if [[ $li =~ backups_all_$d|.*.tar.gz ]]; then
            echo days, file name - $li
            EXIST=1
            continue
        fi
    done
    
    if [ $EXIST -eq 0 ]
    then
        echo Del, file name - $li, EXIST - $EXIST
        # curl -u $USER:$PASSWD ftp://$HOST/$UFILE/ -s -X "DELE $li"
    fi
done

запускаю командой:
bash script.sh

В терминале скрипт выводит вот это:

days, file name - backups_all_2021-01-10|11-29-47.tar.gz
days, file name - backups_all_2021-01-10|11-29-47.tar.gz
days, file name - backups_all_2021-01-10|11-29-47.tar.gz
monts, file name - backups_all_2021-01-10|11-29-47.tar.gz
monts, file name - backups_all_2021-01-10|11-29-47.tar.gz
monts, file name - backups_all_2021-01-10|11-29-47.tar.gz
monts, file name - backups_all_2021-01-10|11-29-47.tar.gz
days, file name - backups_all_2021-01-09|11-29-47.tar.gz
days, file name - backups_all_2021-01-09|11-29-47.tar.gz
days, file name - backups_all_2021-01-09|11-29-47.tar.gz
monts, file name - backups_all_2021-01-09|11-29-47.tar.gz
monts, file name - backups_all_2021-01-09|11-29-47.tar.gz
monts, file name - backups_all_2021-01-09|11-29-47.tar.gz
monts, file name - backups_all_2021-01-09|11-29-47.tar.gz
days, file name - backups_all_2021-01-08|11-29-47.tar.gz
days, file name - backups_all_2021-01-08|11-29-47.tar.gz
days, file name - backups_all_2021-01-08|11-29-47.tar.gz
monts, file name - backups_all_2021-01-08|11-29-47.tar.gz
monts, file name - backups_all_2021-01-08|11-29-47.tar.gz
monts, file name - backups_all_2021-01-08|11-29-47.tar.gz
monts, file name - backups_all_2021-01-08|11-29-47.tar.gz
days, file name - backups_all_2021-01-07|11-29-47.tar.gz
days, file name - backups_all_2021-01-07|11-29-47.tar.gz
days, file name - backups_all_2021-01-07|11-29-47.tar.gz
monts, file name - backups_all_2021-01-07|11-29-47.tar.gz
monts, file name - backups_all_2021-01-07|11-29-47.tar.gz
monts, file name - backups_all_2021-01-07|11-29-47.tar.gz
monts, file name - backups_all_2021-01-07|11-29-47.tar.gz
days, file name - backups_all_2021-01-06|11-29-47.tar.gz
days, file name - backups_all_2021-01-06|11-29-47.tar.gz
days, file name - backups_all_2021-01-06|11-29-47.tar.gz
monts, file name - backups_all_2021-01-06|11-29-47.tar.gz
monts, file name - backups_all_2021-01-06|11-29-47.tar.gz
monts, file name - backups_all_2021-01-06|11-29-47.tar.gz
monts, file name - backups_all_2021-01-06|11-29-47.tar.gz
days, file name - test.tar.gz
days, file name - test.tar.gz
days, file name - test.tar.gz
monts, file name - test.tar.gz
monts, file name - test.tar.gz
monts, file name - test.tar.gz
monts, file name - test.tar.gz

Файлы которые находятся на FTP сервере:

backups_all_2021-01-06|11-29-47.tar.gz
backups_all_2021-01-07|11-29-47.tar.gz
backups_all_2021-01-08|11-29-47.tar.gz
backups_all_2021-01-09|11-29-47.tar.gz
backups_all_2021-01-10|11-29-47.tar.gz
test.tar.gz

По идее скрипт должен удалить вот эти файлы:

backups_all_2021-01-06|11-29-47.tar.gz
backups_all_2021-01-07|11-29-47.tar.gz
backups_all_2021-01-08|11-29-47.tar.gz
test.tar.gz

Но ни один не удалил.

[Saboteur]

Файлы именно такие? С вертикальной чертой в имени??

echo days | file name = $li

Что по вашему, должна сделать эта команда?

[jenya7771]

Saboteur, не то скинул, сейчас отредактировать код скрипта

[Saboteur]

У вас в скрипте вообще не ясно что вы пишете. Что за имена переменных с пробелами, что за внезапные вертикальная черта, которую вы используете видимо не осознавая что она в принципе делает.
А еще EXIST вы присваиваете 1, если что-то найдено, но для удаления проверяете в конце что EXIST -eq 0

[Saboteur]

P.S. Вертикальная черта в имени файла это очень нехорошо. Работать с этим можно, но неудобно.

[jenya7771]

Saboteur, Понял, буду переписывать, избавлюсь от вертикальной черты.
EXIST я присваиваю 1 если нужно файл оставить, так я в переменной DAYS устанавливаю за какое количество дней хранить бэкапы. Если бэкапу больше например 2-х дней, то его нужно удалить

[Saboteur]

В общем посмотри на этот вариант, поскольку у тебя логика усложненная, и все можно решить проще.
А главное правильно расставить echo Для отладки (или юзать -x ;)

#!/bin/bash

HOST=""
USER=""
PASSWD=""
UFILE="/bk"
DAYS=1
MONTHS=3

#for FILE in $(curl -u $USER:$PASSWD ftp://$HOST/$UFILE/ -s -l)
for FILE in $(ls -1); do
    EXIST=0
    echo "Processing $FILE"

    if [ "$FILE" = "." ] || [ "$FILE" = ".." ]
    then
        echo "Skipping as . or .."
        continue
    fi

    for day in $(seq 0 $DAYS)
    do
        d="$(date +%Y-%m-%d -d "$day days ago")"
        if [[ $FILE =~ backups_all_$d.*.tar.gz ]]; then
          echo "Need to delete $FILE because d=$d"
          # curl -u $USER:$PASSWD ftp://$HOST/$UFILE/ -s -X "DELE $FILE"
          continue 2
        fi
    done

    for month in `seq 0 $MONTHS`
    do
        d="$(date +%Y-%m-01 -d "$month month ago")"
        if [[ $FILE =~ backups_all_$d.*.tar.gz ]]; then
            echo "Need to delete $FILE"
            # curl -u $USER:$PASSWD ftp://$HOST/$UFILE/ -s -X "DELE $FILE"
            continue 2
        fi
    done
done

[jenya7771]

Saboteur, Спасибо Вам, последнее помогло!