Как записывать в файл до тех пор пока есть место в нем?

Question

[Borton1]

Здравствуйте! У меня есть файл, который я создал truncate -s 100049 test.txt . Он как видно на 100049 байт. Мне нужно записывать в него строки ew=`cat /dev/urandom | tr -dc 'A-Za-z0-9' | head -c 76` до тех пор пока он не заполнится полностью. Если взять бесконечный цикл и записывать, то когда не хватит места в фале, цикл он остановится?

Comments

[humoured]

Размер файла ограничен доступным свободным местом на диске, а не самим собой. Цикл на запись будет работать до тех пор, пока не закончится место на диске. Если вам нужно ограничить размер файла при записи в него, то и проверяйте размер файла в цикле.

Answer 1

[xotkot]

Он как видно на 100049 байт.

Мне нужно записывать в него строки ew=`cat /dev/urandom | tr -dc 'A-Za-z0-9' | head -c 76` до тех пор пока он не заполнится полностью.

то есть, у нас есть символы от A-Z a-z 0-9 каждый из которых занимает 1 байт
нужно записывать строки с 76 символами + 1 символ перевода строки
по итогу получим

100049/77 = 1299 полных строк и немного хвоста
размер хвоста
100049-1299*77 = 26 символов

если всё это перевести в bash-код то получим следующее

#!/usr/bin/env bash

#вводные
FILE=file.txt
S=100049 # общий размер в байтах
s=76   # максимальное количество однобайтовых символов на строку

N=$[S/(s+1)]
n=$[S-N*(s+1)]

echo "Cтрок + хвост = $N + $n"

rm -rf $FILE
for (( i = 0; i < $N; i++ )); do
	cat /dev/urandom | tr -dc 'A-Za-z0-9' | head -c $s >> $FILE
	echo >> $FILE
done
cat /dev/urandom | tr -dc 'A-Za-z0-9' | head -c $n >> $FILE

echo "Файл записан"
echo "Размер файла $FILE = $(stat -c %s $FILE) байт"

по итогу получим файл с необходимым объёмом данных

Answer 2

[Николай Савельев]

В файл можно писать до тех пор пока есть место на диске

Comments

[Borton1]

Здравствуйте! Подскажите, пожалуйста, а как можно записывать в файл только до определенного размера байт?

Answer 3

[mayton2019]

Как записывать в файл до тех пор пока есть место в нем?

Это не функционал файловой системы. Порешай такие задачи на уровне прикладного кода. Это не сложно.

Более того. В свете развития современных файловых систем (облачных систем) понятие "свободное место" сильно девальвировало. Его стало сложно посчитать. Оно уже не является уравнением где можно суммировать логический размер файлов и что-то прикидывать. Файлы стали обладать свойством SPARSE - разреженные, COMPRESSED - сжатые, стали иметь хард-линки (несколько внешних имен одного файла).

Во времена 32х битных ОС файлы часто ограничивались в 2Гб сверху. И это и сейчас наблюдается по
устаревшим API для файлов. А после ext4 например размер файлов лимитирован числом exbibyte а это на 12
порядков поболее чем 32х битки. Короче такой размер нам никогда не заполнить ничем.

Кроме того при использовании PIPELINE или канальных устройств само понятие размер файла лишено
смысла. Файл представляет собой трубу через которую с одно стороны пишут а с другой читают
информацию. И это - хорошо. Это гибкость файловой системы которую развивают еще со времен ОС Unix.
Зачем нам эту гибкость ограничивать.

Comments

[Borton1]

я быть вашим учеником. Мастер возьмете в ученики?

[Borton1]

я решаю на уровне bash у меня блин все задание для bash-a мастер

[mayton2019]

Borton1, bash - плохое кун-фу. На нем ты никогда не станешь мастером.

[Borton1]

mayton2019, это все препод заставляет не я

[Saboteur]

mayton2019, bash отличное кунгфу. Позволяет прокачивать скилл не только скриптов, но и архитектуры линукс

[Saboteur]

Более того. В свете развития современных файловых систем .....
стали иметь хард-линки (несколько внешних имен одного файла).

хард линки это не современные файловые системы. Они были в очень древних.

Во времена 32х битных ОС файлы часто ограничивались в 2Гб сверху. И это и сейчас наблюдается по
устаревшим API для файлов.

вы хотели сказать 16-битных?

Answer 4

[Алексей Ярков]

Если взять бесконечный цикл и записывать, то когда не хватит места в фале, цикл он остановится?

Чего ради? Конечно не остановится. Команда truncate всего лишь делает усечение файла до определенного размера, но ничего не мешает писать в него, пока на диске место есть.

Comments

[Borton1]

Здравствуйте! Подскажите, пожалуйста, а как можно записывать в файл только до определенного размера байт?

[Николай Савельев]

Borton1, проверяешь размер файла перед записью. Если размер позволяет, то записываешь данные, иначе - нет

[Borton1]

Николай Савельев,

GNU nano 4.8                               k                                         
#!/bin/bash
#ew=`cat /dev/urandom | tr -dc 'A-Za-z0-9'  |  head -c 76`
#size=text.txt
FILENAME=~/test.txt
FILESIZE=$(stat -c%s "$FILENAME")
#echo "Size of $FILENAME = $FILESIZE bytes."
#echo size
bit=100050
while [ $FILESIZE -le 100050 ]
do
  ew=`cat /dev/urandom | tr -dc 'A-Za-z0-9'  |  head -c 76`
  echo "$ew" > ~/test.txt
done
 
#echo "$ew" > text.txt

не так записал 100050 байт? он что-то долго выполнялся

Answer 5

[AUser0]

echo "ew=\`cat /dev/urandom \| tr -dc 'A-Za-z0-9' \| head -c 76\`" >./cmd_file.tmp && dd if=./cmd_file.tmp of=./test.txt obs=100049 count=1 && rm ./cmd_file.tmp

Comments

[Borton1]

если cat test.txt то там ew=`cat /dev/urandom \| tr -dc 'A-Za-z0-9' \| head -c 76`

[Borton1]

а нужно `cat /dev/urandom \| tr -dc 'A-Za-z0-9' \| head -c 76` записывать в файл пока до тех пор пока не будет весить 100049

[AUser0]

А так?

yes "ew=\`cat /dev/urandom | tr -dc 'A-Za-z0-9' | head -c 76\`" | dd of=./test.txt obs=100049 count=1

Answer 6

[3vi1_0n3]

Учитывая, что изначальный размер определяется размером созданного файла (который в теории может быть другим), я бы начал с получения размера и записыванием ровно такого же объема.

#!/bin/bash
FILE="test.txt"
SIZE=$(stat -c %s $FILE)
{ while [ $(stat -c %s $FILE) -lt $SIZE ]
do
        cat /dev/urandom | tr -dc 'A-Za-z0-9' | head -c 76
done } | head -c $SIZE > $FILE