Как объединить несколько дата сетов?

Question

[san_m_m]

есть папка, куда складываются файлы разные. По признаку в названии нужно вытягивать и объединять файлы. Как это осуществить лучше?

#получил список из названий файлов с помощью библиотеки os и сохранил в переменную files
filess = []
for i in files:
    if «форма_125» in i:
        filess.append(i)

if len(filess) == 2: 
    df_1 = pd.read_excel(filess[0])
    df_2 = pd.read_excel(filess[1])
    df = pd.concat([df_1, df_2])

У меня в голове только такая полуручная идея, но было бы здорово это все улучшить.

Comments

[Михаил Кростелев]

что вам хочется улучшить? Не нравится concat? Или не нравится блок с if len(filess)==2?

[san_m_m]

Михаил Кростелев, хотелось бы чтобы автоматически объединялись все файлы… определенной формы.

Просто если каждый день будет добавляться несколько новых файлов - история с лен- это ручная работа..

А как concat зациклится не пойму

Answer 1

[dmshar]

Что такое "полуручная идея"? и что вы желаете улучшить? Если сделать вашу программу независимой от количества файлов, то вспоминаем, что на втором уроке по Python вам рассказывали про циклы и о том, когда, как и зачем их использовать. В вашем случае это будет выглядеть приметно так:

df=pd.DataFrame()
for i,unit in enumerate(filess):
    df=df.append(pd.read_excel(unit), ignore_index=True)

Ну а в точности "подогнать" под свой код - это как-нибудь самостоятельно.

Answer 2

[Михаил Кростелев]

names - список имен файлов в каталоге

datasets = []
for file_name in filter(lambda x: "форма_125" in x, names)
    datasets.append(pd.read_excel(file_name))

df = pd.concat(datasets)