Как мне проигнорировать этот Подкаталог «old» и прочитать данные только из списка?

Question

[Dato38it]

Есть папка с подкаталогами, в которых мне нужно прочитать определенные файлы по условию:

spoiler

├───BRT
├───BRY
├───CHE
├───CHV
├───EKT
├───GRN
├───HAN
├───IRK
├───IVN
├───IZH
├───KAM
├───KHA
├───KIR
├───KLG
├───KLN
├───KOM
├───KOS
├───KRA
├───KRC
├───KRG
├───KRS
├───KUR
├───LIP
├───MGD
├───MOS
├───MRD
├───MUR
├───NEN
├───NIN
├───NOV
├───NSK
├───old
│   ├───ARH
│   ├───BEL
│   ├───BRN
│   ├───BRT
│   ├───BRY
│   │   └───От радиопланеров
│   ├───CHE
│   ├───CHV
│   │   └───Old
│   ├───EKT
│   ├───HAN
│   │   └───хлам
│   ├───IRK
│   │   ├───IRK
│   │   ├───IRK_Lac_new
│   │   └───URA
│   ├───IZH
│   ├───KAZ
│   │   ├───old
│   │   └───URA
│   ├───KEM
│   ├───KHA
│   ├───KIR
│   ├───KLG
│   ├───KLN
│   ├───KOM
│   ├───KOS
│   ├───KRA
│   ├───KRG
│   │   └───OLD
│   ├───KRS
│   │   └───OLD
│   ├───KUR
│   ├───LIP
│   ├───MOS
│   │   └───old
│   ├───MRD
│   ├───MUR
│   ├───NIN
│   │   ├───URA
│   │   └───Хлам
│   ├───NOV
│   ├───NSK
│   │   └───old
│   ├───OMS
│   ├───ORB
│   ├───ORL
│   │   └───От планеров
│   ├───PNZ
│   ├───PRM
│   ├───PSK
│   ├───PZV
│   ├───ROS
│   ├───RYZ
│   ├───SAH
│   ├───SAM
│   ├───SMO
│   ├───SPB
│   ├───SRV
│   │   └───OLD
│   ├───TAM
│   │   └───URA
│   ├───TOM
│   ├───TUL
│   ├───TUM
│   │   └───old
│   ├───TVE
│   ├───TYV
│   ├───ULN
│   ├───VLA
│   ├───VLD
│   ├───VLG
│   ├───VOL
│   │   └───URA
│   ├───VRN
│   ├───YNR
│   └───YOL
├───OMS
├───ORB
├───ORL
├───PNZ
├───PRM
├───PSK
├───PZV
├───ROS
├───RYZ
├───SAH
├───SAM
├───SMO
├───SPB
├───SRV
├───SVS
├───TAM
├───TOM
├───TUL
├───TUM
├───TVE
├───TYV
├───UFA
├───ULN
├───VLA
├───VLD
├───VLG
├───VOL
├───VRN
├───YNR
├───YOL
└───YRL

В данной папке есть Подкаталог "old", который вообще мешает, из-за него куча повторяющихся файлов отображается. Также я создал список, по которому можно отсортировать какие папки можно прочитать: ['IRK','MGD','SAH','KHA','KAM'] Такой вывод отображается когда я запускаю код:

spoiler

...
IR.kml
IR.kml
IR.kml
IR.kml
IR.kml
...
RO.kml
RO.kml
RO.kml
RO.kml
RO.kml
RZ.kml
RZ.kml
RZ.kml
RZ.kml
RZ.kml
SA.kml
SA.kml
SA.kml
SA.kml
SA.kml
SR.kml
SR.kml
SR.kml
SR.kml
SR.kml
...
YR.kml
YR_ACTUAL.kml
YR.kml
YR_ACTUAL.kml
YR.kml
YR_ACTUAL.kml
YR.kml
YR_ACTUAL.kml
YR.kml
YR_ACTUAL.kml

Когда я выполняю свой код, он у меня всю папку почему-то сканирует, хотя я в условии писал без old.
if (i in listreg) and (i != "old"):
И почему то программа дублирует аж 5 раз, на примере IR.kml. Как мне проигнорировать этот Подкаталог "old" и прочитать данные только из этого списка ['IRK','MGD','SAH','KHA','KAM']? Вот фрагмент кода:

netpath = "data/"
        listreg=['IRK','MGD','SAH','KHA','KAM']
        listnetfiles = []
        listnetdirs = []
        needdir=[]
        for root, dirs, files in os.walk(netpath):
            #print(dirs) 
            listnetdirs.append(dirs)
        #print(listnetdirs[0])        
            for i in listnetdirs[0]:
                #print(i)
                #with open("output.txt", "a") as outfile:
                #    outfile.write(i+"\n")
                if (i in listreg) and (i != "old"):
                    #print(i)
                    needdir.append(i)
                    needdir = list(dict.fromkeys(needdir))
                    #print(needdir)
                    for kmlfile in files:
                        print(kmlfile)
                        #if prefixs[0] in kmlfile:
                else:
                    continue
        #print(needdir)

Может быть как то можно вообще переделать код по считыванию определенных файлов в папке? Мне допустим надо будет прочитать файл IR.kml в папке IRK. проблема в том что он есть в папке old еще. поэтому папку old хочу проигнорировать. а как это сделать без дополнительных библиотек?

Comments

[Everything_is_bad]

for i in listnetdirs[0]:

ты как всегда творишь какую-то дичь, почему ты в каждую итерацию пробегаешь по listnetdirs[0]?

[Dato38it]

Everything_is_bad, так у меня полчилось отобразить папки в директрии без подпапок. Может есть какой то другой метод?

[Everything_is_bad]

Dato38it, еще раз, ты каждый раз пополняешь listnetdirs, но и каждый раз зачем-то делаешь цикл по его первому элементу

[Dato38it]

Everything_is_bad, а как мне нужные файлы прочитать ? Я думал что в одном цикле это можно реалищовать не?

[datka]

Dato38it,

for i in listnetdirs: # Перебирай все елементы списка. ты перебираешь только 1.

[Dato38it]

datka, я пробовал без 0 писать. Он пустые значения выдавал

[Everything_is_bad]

datka, да и даже все перебирать, какой смысл делать это кучу раз? потом еще жаловаться, а почему у меня "дублирует аж 5 раз"
Dato38it, у тебя проблемы с придумыванием алгоритма решения задач, впечатление что ты все решаешь методом тыка, без понимания что именно ты делаешь. Начни с решения более простых задач, потом усложняй

[Aragorn]

Т. е. вам нужно обойти только каталоги ['data/IRK','data/MGD','data/SAH','data/KHA','data/KAM']?

[dim5x]

У него [['IRK', 'KAM', 'KNA', 'MGD', 'SAH'], [], [], [], [], []] в listnetdirs, поэтому он берёт первый элемент.
[os.walkвозвращает кортеж списков].

1. Если вы руками составляете список директорий для обхода, то второе условие, имхо, лишнее: if (i in listreg) and (i != "old") ведь там заведомо не должно быть old.
2. При этом у вас dirsесть, которая, по сути, полностью будет повторять listreg. От чего-то можно и отказаться.
При этом вы в needdir добавляете нужные директории? Третий раз?
3. Чтобы не множился выход пятикратно, надо избавляться от вложенности циклов.
4. Вы не используете listnetfiles.
5. А он понадобиться когда вы избавитесь от проблемы 3 и у вас перестанет работать переменная files. Ибо она будет существовать только в рамках обслуживания итератора os.walk().
5. В чём смысл этой строчки: needdir = list(dict.fromkeys(needdir))- я не понимаю. Вы берёте список преобразуете в словарь, а потом обратно в список. Зачем?

Проще всё заново сесть и переписать, чем исправлять.
Прежде чем писать вы подумайте чего хотите и как это получить. Просто накидать знакомых и не очень конструкций в код в надежде что они заработают подход интересный, но не продуктивный.

Answer 1

[Aragorn]

Ну если я правильно понял, то:

import os

path = "data/"
list_dir=['IRK','MGD','SAH','KHA','KAM']
for root_dir in list_dir:
    for root, dirs, files in os.walk(os.path.join(path, root_dir)):
        for kmlfile in files:
            print(kmlfile)

Comments

[Dato38it]

Я не через dir а root вывел терерь нудные парки и с ними работаю. Вам спасибо

[Dato38it]

Вот такой код у меня получлся

netpath = "data/"
        lengthdir=len(netpath)
        listreg=['IRK','MGD','SAH','KHA','KAM']
        for root, dirs, files in os.walk(netpath):
            alldir = root[lengthdir:]
            #print(alldir) 
            if ("old" in alldir):
                #print("FALSE")
                continue
            elif alldir in listreg:
                #print(alldir)
                for kmlfile in files:
                    #print(kmlfile)
                    if prefixs[0] in kmlfile:
                        #print("Это выгрузка из всех сайтов RDB")
                        #print(kmlfile)
                        with open(kmlfile,"r", encoding="utf8") as rdbfile:
                            file = rdbfile.read()
                        #print(file)

Answer 2

[Vindicar]

from pathlib  import Path # входит в поставку питона, не сторонняя

base_path = Path("data")  # путь до каталога с данными
for item in base_path.glob('*'):
  if item.is_dir() and item.stem != 'old':
    # тут что-то делаем с путём item. Например:
    for kml_file in item.glob('*.kml'):
      print(kml_file.resolve())  # выводим полный путь к файлу

Comments

[Dato38it]

Спасбо.
Вот мой код

netpath = "data/"
        lengthdir=len(netpath)
        listreg=['IRK','MGD','SAH','KHA','KAM']
        for root, dirs, files in os.walk(netpath):
            alldir = root[lengthdir:]
            #print(alldir) 
            if ("old" in alldir):
                #print("FALSE")
                continue
            elif alldir in listreg:
                #print(alldir)
                for kmlfile in files:
                    #print(kmlfile)
                    if prefixs[0] in kmlfile:
                        #print("Это выгрузка из всех сайтов RDB")
                        #print(kmlfile)
                        with open(kmlfile,"r", encoding="utf8") as rdbfile:
                            file = rdbfile.read()
                        #print(file)