Как автоматически создать 100 папок и переместить в каждую по 10 картинок из общей папки?

Question

[Маша Кравцова]

У Маши есть общая папка с картинками, их много. Необходимо каким-нибудь потоковым методом создать 100 папок и переместить в каждую из них по 10 картинок (не важно каких и не важно в какую папку) из общей папки. Как это осуществить?

Comments

[d'Ivan]

Какая ОС?

[Маша Кравцова]

Роман Мирр: в приоритете Windows

Answer 1

[jcmvbkbc]

BASE=`pwd`/..
for DIR in `seq 1 100` ; do
    mkdir "$BASE/$DIR" && { find -type f | head -n 10 | xargs -d"\n" -I{} mv {} "$BASE/$DIR" ; }
done

Comments

[Saboteur]

find не нужно ограничить max-depth?

[jcmvbkbc]

Saboteur: можно ограничить, можно не ограничивать. В задании не сказано, что папка "плоская".

[d'Ivan]

Согласно уточнённому требованию задачи, решение должно работать в среде Windows.

[Маша Кравцова]

Роман Мирр: в приоритете, но это не настолько важно. У меня под боком виртуалки.

Answer 2

[Stalker_RED]

for (i=0; i<100; i++) {
  новая_папка = сгененировать_имя_папки();
  создать_папку(новая_папка);
  переместить_10_картинок(общая_папка, новая_папка);
}

функция переместить_10_картинок(откуда, куда) {
  for (i=0; i<10; i++) {
     файл = получить_имя_файла_из_папки(откуда)
     переместить_файл(файл, куда)
  }
}

И что такое "потоковым методом"?

Comments

[vovkaooo1]

Я предполагаю, что он имел ввиду не одним потоком

[Маша Кравцова]

В несколько потоков. Но это уже не так важно.

[Растишка]

Маша Кравцова: Сколько ж там картинок, что надо перемещать в несколько потоков????

[Маша Кравцова]

Растишка: больше 40к :)
а про количество папок — условно, на деле их нужно намного больше

[Stalker_RED]

Маша Кравцова: быстрее будет разбросать их в один поток, чем писать многопоточный. Ну и вам наверное нужно их не как попало разбросать, а так, чтобы потом можно было найти нужный файл.

Один из стандартных подходов в таком случае - генерировать папки по нескольким первым символам от хэша имени файла.
Допустим файл helloWorld001.jpg
md5('helloWorld001.jpg') = 028707f54e8387ab32ef5cb373555247
Создаются папки /02/87 и перемещается файл. В результате:

/02/87/helloWorld001.jpg

Если вам не нужно равномерное распределение, то можно и не брать хеш, а сохранять как /he/ll/helloWorld001.jpg

[Растишка]

Маша Кравцова: 40к это много? У меня 250к картинок раскидывались в один поток за считанные секунды. Принцип как у Stalker_RED через MD5

Может вы сначала НОРМАЛЬНО сформулируете конечную задачу и не будете придумывать глупости?

Answer 3

[Mercury13]

Берёшь любой язык программирования с достаточно мощной библиотекой и пишешь:

целое iFile = 0
строка sourcePath = добавитьРазделитель(общаяПапка)
строка targetPath = ""
для fname : перебор по файлам в sourcePath + '*'
  строка sourceName = sourcePath + fname
  если iFile % РАЗМЕРПАПКИ = 0
    строка targetFolder = добавитьРазделитель(целеваяПапка) + целоеВСтроку(iFile / РАЗМЕРПАПКИ)
    создатьНовуюПапку(targetFolder)
    targetPath = добавитьРазделитель(targetFolder)
  копироватьФайл(sourceName, targetPath + fname)
  удалитьФайл(sourceName)
  iFile = iFile + 1