Как объединить строки в bash скрипте?

Question

[AlexSer]

Делаю объединение строк в цикле while, почему то не объеденяет, а выводит последнюю строку.

#!/bin/sh
VAR=""
while read line;
 do
           
  VAR+="${line}"
done < data.txt
echo "$VAR"

Comments

[vreitech]

в первой строке вашего скрипта указано, что это шелл-скрипт, но в вопросе вы называете его баш-скриптом. поправьте для начала либо вопрос, либо первую строку.

[xotkot]

посмотрите это настоящий sh или ссылка с bash
ls -l /bin/sh

[SVM]

так не проще объеденить?
echo $(cat data.txt)

[xotkot]

SOTVM, добавились пробелы вместо переноса + в строке сжирает пробелы больше одного

[SVM]

xotkot,
тады так
tr -d '\n' < data.txt

[xotkot]

SOTVM, тады надо в ответы писать, а не сюда )

Answer 1

[Вадим]

1. Используйте bash, а не sh - разные интерпретаторы

#!/bin/bash
VAR=""
while read line;
 do
  VAR+="$line"
done < data.txt
echo "$VAR"

2. Если хотите sh или bash - без разницы

VAR=$(cat data.txt | tr -d "\n")
echo "$VAR"

Answer 2

[xotkot]

awk '{printf $0}' data.txt

Comments

[shurshur]

Когда не умеешь пользоваться ножичком и используешь сложный мультитул...

[xotkot]

shurshur, ?

[shurshur]

xotkot, зачем использовать awk для задачи, которую быстрее и проще делает cat?

[xotkot]

shurshur,

зачем использовать awk для задачи, которую быстрее и проще делает cat?

простите, но я не вижу вашего быстрого и простого решения задачи с помощью одного cat

[shurshur]

xotkot, есть в других ответах.

[xotkot]

shurshur,
этот ?

$ bash --version | head -1
GNU bash, версия 5.1.16(1)-release (x86_64-pc-linux-gnu)

$ cat data1.txt ${line} >> data1.txt
cat: data1.txt: ввод и вывод в один файл

неработает

[shurshur]

xotkot, а чего бы не почитать мои комментарии к этому "ответу", где я объясняю, что это не работает?

[xotkot]

shurshur, другого ответа где для решения задачи используют один cat я не нашел, есть еще тот что в комментариях к вопросу
echo $(cat data.txt)
но он тоже не совсем рабочий

повторяю свой вопрос выше

простите, но я не вижу вашего быстрого и простого решения задачи с помощью одного cat

вы написали

есть в других ответах.

где ?

[shurshur]

xotkot, ну, я думаю что автор вопроса дальше придёт с вопросом как вставить между "строками" пробелы :)

В любом случае, использование awk выглядит довольно странно для этой задачи. И хорошо ещё, что он в $0 не сохраняет перенос строки, на что регулярно напарываются люди с однострочниками на perl/python.

[xotkot]

shurshur,

ну, я думаю что автор вопроса дальше придёт с вопросом как вставить между "строками" пробелы :)

я так понимаю простого решения с cat у вас всё же нету ? или есть ?

В любом случае, использование awk выглядит довольно странно для этой задачи.

наоборот, awk очень даже подходит для подобных манипуляций с текстом, легко пишется, легко читается, никаких лишних и магических действий.

И хорошо ещё, что он в $0 не сохраняет перенос строки, на что регулярно напарываются люди с однострочниками на perl/python.

причем здесь perl/python ? у awk с этим всё просто, у него есть разделители строк(RS - по умолчанию перевод строки) и разделители полей(FS - по умолчанию пробельные символы) манипулируя которыми можно творить чудеса, и это базовые понятия которые обретаешь когда потратишь хотя бы пол часа на изучения данного инструмента.

[shurshur]

xotkot, ну похоже автор решил без переносов строк. Что странно. Я на это не обратил внимание. А попытка складывать всё во временный файл с фиксированным именем меня впечатлила сразу и я пошёл там объяснять.

Я awk использую крайне редко и больше для тривиального форматирования вывода (впрочем, я им часто даже cut заменяю по привычке), потому что никаких преимуществ перед набросать скрипт на более универсальном языке я для себя не вижу. То же самое с sed - его использую для in-place редактирования, а так в случае чуть более сложной регулярки перехожу на perl -pne.

Answer 3

[mayton2019]

Можно попробовать

cat src1.txt ${line} >> src1.txt

Comments

[shurshur]

Да-да, а если доступа на запись в текущий каталог нет или место закончилось, то скрипт упадёт. Я уж не говорю о том, что при падении скрипта останется файл. И про то, что пересекающийся во времени запуск двух скриптов вызовет огромные проблемы...

[mayton2019]

Вот от сценария с пересечением двух сеансов во времени вообще нет спасения. Я думаю что его надо отдельно рассмотреть как такой-себе краш-тест. И он является краш-тестом не только для данного bash-приложения но и для многих других приложений которые используют сырой файловый доступ. Как workaround - можно просто ко всем output-файлам добавлять метку времени+PID процесса-родителя.

[shurshur]

mayton2019, спасение есть. Во-первых, можно каждому скрипту использовать свой файл, используя PID процесса, который будет уникален:

temp_file_name=temp$$.txt

Во-вторых, для временных файлов есть специальная команда mktemp

temp_file_name=$(mktemp)

или если хочется чтобы файл был в более предсказуемом месте и с более понятным именем:

temp_file_name=$(mktemp /tmp/temporary_file_XXXX.txt)

Создавать временные файлы в текущем каталоге вообще не очень правильно. И, кстати, надо не забывать их удалять в конце скрипта.

В-третьих и самых главных - вообще не нужно никаких временных файлов для решения этой задачи...

[shurshur]

mayton2019, ах да, самое главное: зачем делать cat файла и строки, которую в него добавляем? Надо делать echo $line >> $file_name.

[mayton2019]

А если исходный файл будет размером в терабайт?

[shurshur]

mayton2019, а если исходный файл будет размером в террабайт, то от временного файла толку будет ещё меньше. При работе через pipe хотя бы всё ограничивается размером буфера...