Как в bash полностью сохранить многострочное содержимое файла в переменную?

Question

[Drovosek01]

Для примера возьмем файл /etc/hosts

Если я попытаюсь сохранить его содержимое так:
file_content="$(cat /etc/hosts)"
или
file_content="$(printf "%s" "$(cat /etc/hosts)")"

То все переносы строк в конце файла удаляться. Как я понимаю из-за конструкции $()

Вопрос:
Как в bash полностью сохранить многострочное содержимое файла в переменную (включая пробелы, отступы и все переносы строк в конце файла)?

P.S.

ChatGPT в одном из вариантов подсказал такой способ

file_content=""
FS= read -r -d '' file_content < "/etc/hosts"

Но хочется посмотреть другие варианты

Comments

[User]

а чем способ с read не угодил?

read -r -d '' file_content < /etc/hosts
echo "$file_content"

двойные кавычки обязательны

[Drovosek01]

User, это выглядит как-то странно.
Хочется более "человеко-читаемый" вариант, а не так, что кроме пути передаешь еще стопку разных аргументов... как в данном случае с read

Answer 1

[Alexey Dmitriev]

Закодировать в base64, при применении раскодировать

Comments

[Drovosek01]

Интересный вариант, но, звучит немного геморойно

[Aragorn]

Это как по воробьям из пушки стрелять. Попасть то же, все равно попадешь)

[Alexey Dmitriev]

Drovosek01, это стандартный подход. Никаких изменений при передаче, сохраняется формат, в конвейере кодируется и раскодируется. И переменная строчная получается.

[CityCat4]

Alexey Dmitriev, Хм. Интересный вариант, надо будет крыжки в голове поставить, что он есть.

Answer 2

[SunTechnik]

Как костыльный вариант:
file_content="$(cat /etc/hosts ; echo Y)"

Помним, что последняя строка- мусор. При обработке ее убираем:
echo "$f" | sed '$d'

Answer 3

[Сергей Тарасов]

cat > foo.txt <<EOT
bar
baz
EOT

Comments

[Drovosek01]

Мне нужно прочитать и сохранить содержимое файла в переменную, а не создавать его

Answer 4

[CityCat4]

file_content="$(cat /etc/hosts)"

Зачем???
Тыщу лет читаю файлы совершенно тупым способом:
_flist=`cat /etc/hosts`
И получаю его со всеми там символами в том числе и с переводом строки

Comments

[xotkot]

И получаю его со всеми там символами в том числе и с переводом строки

не совсем, тут ведь как:

$ echo -e "1\n\n" > test
$ cat -A test
1$
$
$
$ f=`cat test`
$ echo -e "$f" | cat -A
1$

мужику кровь из носу нужны конечные переводы строк, а они теряются

[CityCat4]

xotkot, Ну прям :)
Берем тестовый файл такого содержания:

first
second
third


two empty lines before

Берем скриптец такого содержания:

#!/bin/sh
_test=`cat test.txt`
echo "[$_test]"

(скобки нужны чтобы видеть переводы строк)
Получаем:

# ./test.sh
[first
second
third


two empty lines before]

Если в скрипте поправить последнюю строчку на:echo "$_test" > test2.txt
то получим test.txt и test2.txt одинакового размера.

Уж в чем, в чем, а в этом я железобетонно уверен :) 25 лет так файлы читаю :)

[Drovosek01]

CityCat4, если вы именно так 25 лет читаете файлы, почему изначально написали заведомо не рабочий вариант?

[xotkot]

CityCat4,

Ну прям :)
Берем тестовый файл такого содержания ...

еще раз, речь идёт о "конечные переводы строк", ну или как в условии написано жирным по белому "все переносы строк в конце файла", в конце файла, не в середине или начале, а в конце

[CityCat4]

Drovosek01, Покажи мне чем отличается первый вариант от второго?

[CityCat4]

xotkot, Еще раз - ну замени ты в последней строчке echo так, чтобы вывести его в файл - получишь два одинаковых файла. То есть в переменной все переводы строк, в том числе и конечный. echo конечные пробельные символы отбрасывает. Впрочем, каждый волен заблуждаться, как хочет.

Хочешь посоветовать, а тут начинается хрень. Проваливаю нафиг в свою пещеру.

[xotkot]

CityCat4,

Еще раз - ну замени ты в последней строчке echo так, чтобы вывести его в файл - получишь два одинаковых файла.

давайте разбираться
возьмём ваш пример файла test.txt и добавим в конец файла парочку переводов строк

$ echo -en "\n\n" >> test.txt
$ cat -A test.txt
first$
second$
third$
$
$
two empty lines before$
$
$

применим ваш скрипт

#!/bin/sh
_test=`cat test.txt`
echo "[$_test]"
echo "$_test" > test2.txt

сравниваем файлы

$ diff test.txt test2.txt
7,8d6
< 
<

разница очевидна

Впрочем, каждый волен заблуждаться, как хочет.

[CityCat4]

xotkot, Может быть, тут уже спорить не буду - слишком мне предмет спора кажется незначительным. Наверное, потому что задачи сохранить концевые переводы строк у меня никогда не возникало - наоборот, всегда стояла задача, как от этого мусора избавиться.

У меня надо сказать даже фантазии не хватает предположить - для чего это может быть нужно. Даже форматирование текста пробелами, ASCII-арт - там строки из символов, а не пустые переводы строк.

[xotkot]

CityCat4,

Может быть, тут уже спорить не буду - слишком мне предмет спора кажется незначительным.

незначительный ? да, но довольно забавный, показывающий что ожидаемое поведение даже в таких простых вещах(как сохранение данных файла в переменную) может немного не совпадать с "реальностью"

[CityCat4]

xotkot, Формально - да, фактически - нет. В данном конкретном случае. Ну то есть, в данном случае - формально ожидаемое поведение не совпадает с реальностью. Фактически - этим несовпадением в большинстве случаев можно пренебречь. Число "пи" - оно ведь тоже совсем не 3.14, но для большинства расчетов его принимают таким, потому что отбрасываемый хвост не вносит сколько-нибудь заметых искажений в требуемую точность расчета...

Answer 5

[Вячеслав]

#!/bin/bash
a=`</etc/hosts`
echo "$a"

Comments

[Drovosek01]

Вы сами то проверяли?

[Вячеслав]

Drovosek01, да, работает. И я этим пользуюсь, когда надо читать файл в переменную.

[Drovosek01]

Вячеслав, и все переносы строк в конце файла у вас также сохранились в переменной?

Уверен, у вас будет также, как у меня... как я писал в самом начале этого "топика":
Переносы строк (пустые строки), находящиеся в конце файла, в переменную не записались

[Вячеслав]

Странно, bash отбрасывает последние переводы строк в резльтате операторов `...` и $(...)
В начале и в середине переводы строк остаются.
Если вам переводы строк в конце важны, то можно после содержимого файла добавить любой печатаемый символ и потом его отрезать:

#!/bin/bash
a=`cat /etc/hosts;echo -n x` # добавление символа в конец вывода
a="${a:0:$((${#a} - 1))}" # отрезание последнего символа
echo "$a"

[Drovosek01]

Вячеслав, мда... с третьей попытки вы таки прочитали, что изначально было написано в теле топика?

Мне кажется помощь нужна не мне, а вам.

Answer 6

[Виктор Таран]

file_content=$(< /etc/hosts)
а так пробовал?

Comments

[Drovosek01]

А вы?

[Виктор Таран]

Drovosek01, отличный ответ, лучше покажи что ты хочешь сделать на входе и выходе, возможно я смогу подсказать более простое решение, а если еще скрипт дашь так вообще шик, поверь мен ту народ такие вещи любит ;)

[Drovosek01]

Виктор Таран,
Вы из тех, кто читает только первые 2 слова из вопроса? Я все подробно написал в теле самого "топика" и указал на то, что конструкция $() - обрезает пробелы в конце

Если нужен пример того, как быть не должно, то это в соседнем комментарии - Как в bash полностью сохранить многострочное содержимое файла в переменную?

[Виктор Таран]

Не понимаю я тебя хороший человек, по этому и уточняю. что именно ты делаешь или скрипт.

#!/bin/bash

# Создаем многострочный массив
declare -a hosts_array

# Читаем содержимое файла /etc/hosts и заполняем массив
while IFS= read -r line; do
    hosts_array+=("$line")
done < /etc/hosts

# Выводим содержимое массива
for host in "${hosts_array[@]}"; do
    echo "$host"
done

$() - попобуй через eval или просто через функцию