Как записать float данные в DataFrame pandas?

Goobee, например у меня код я его еще дальше раскрыл что все значения получить выглядит вот так.

То есть я уже вытащил определенные значения.

Как записать float данные в DataFrame pandas?

Goobee, Так распечатай фрейм какой нибудь с инфой выдает или тоже None?

Как записать float данные в DataFrame pandas?

Goobee, Кстати код я дал несколько комментов назад, у тебя работает или нет где items?

Как записать float данные в DataFrame pandas?

Goobee, Честно может и есть на русском. Но я не подскажу, я относительно программирование не разу в жизни ничего на русском не читал. А так документация по pandas. Довести до ума такой json не самая тривиальная задача. Так что придется много трудится.

Как записать float данные в DataFrame pandas?

Goobee, Понял. Еще проще не надо заморачиваться с чтением. В общем поздравляю тебя хороший способ изучить pandas это целая работа создать такой скрипт, который из вот такого json соберет все что надо и запишет в базу правильно. Что бы данные были логически связаны.

Как записать float данные в DataFrame pandas?

вообще explode это для того что открыть колонку которая содержит списки. Например если колонка содержит словарь, то его тоже можно превратить в отдельный фрейм. Например на том куске что ты дал. Items я открыл вот таким кодом.

items = df['d051eb0d-0445-4c0d-aeb2-4f22a03a5886.Items'].apply(pd.Series).T[0].apply(pd.Series)
print(items).

То есть это уже фрейм с какой то толковой информацией. Его можно еще дальше раскрыть. И все данные что нужно вот так собирать.

Как записать float данные в DataFrame pandas?

Goobee, в скобка мы указываем print(df.columns) имена колонок. Пути до данных.

Как записать float данные в DataFrame pandas?

Goobee, По всей видимости что то пошло не так у тебя. Все значения None. По ходу. У меня нормально. В общем я тебе так скажу. Нужно отдельный скрипт парсер твоего json писать. И потом это все умно складывать в базу.

Как записать float данные в DataFrame pandas?

Goobee, Ты можешь вот так любую колонку развернуть. Можешь другое имя колонки указать.

Как записать float данные в DataFrame pandas?

Goobee, теперь сделай например

exploded = df.explode('d051eb0d-0445-4c0d-aeb2-4f22a03a5886.ParamTypes')

И распечатай. Вот все твои данные в рамках одного фрейма из которого надо пробовать работать, они логически связаны. Понимаешь, его можно начинать доводить до ума, а не плодить кучу таблиц и гадать потом что к чему в них.

Как записать float данные в DataFrame pandas?

Goobee, Да в принципе я его уже нормализовал. Смотри попробуй просто, будут ошибки или нет. Я то на том куске обшел, но может он его прочтет.

with open('data.json') as json_file:
    json_object = json.load(json_file)
df = pd.json_normalize(json_object)

Где data.json это твой json файл.

Как записать float данные в DataFrame pandas?

Goobee, Нормализовать означает привести к единой длинне, что бы можно весь этот json в таблицу превратить (фрейм). Проблема в том что json настолько плохой что pandas не может его нормализовать.

Как записать float данные в DataFrame pandas?

Goobee, Я думаю надо с этим json сначал работать и его приводить в порядок. Что бы можно было нормализовать его сначала. Так ты конечно правильно мыслишь насчет связей. Но это такое надо потратить время и нормализовать этот json.

Как записать float данные в DataFrame pandas?

Goobee, Сейчас гляну, его нужно нормализовать, если там все разной длинны. Только что то json не валидный где то нету двойных ковычек он ругается.

Как записать float данные в DataFrame pandas?

Goobee, Не видно какой, а ты пробовал, как я тебе советовал, read_json или json_normalize? Что бы сразу без всего твоего кода получить фрейм и оттуда уже выбирать те колонки которые тебе нужны.

Как записать float данные в DataFrame pandas?

Goobee, То есть в других твоих переменных None пропускаются? Так делать нельзя. Не в коем случае. Ты нарушаешь структуру, записывай там где None пусть будет None.

Как записать float данные в DataFrame pandas?

Да. Представь себе на листке бумаги. таблицу где одна колонка имеет длину 3 а вторая длину 5. Это уже не таблица. А как они логически вообще связаны, почему там больше значений?

Как записать float данные в DataFrame pandas?

Goobee, то есть как я понял, это один и тот же список закидывается в каждый кортеж. Длинна списка совпадает с остальными данными. То есть длинна списка равна длинне фрейма. Если так либо можешь просто его после всех парсингов в фрейм добавить. df['Serial'] = [i['Serial'] for i in response]. Вне цикла. Смотри смысл фрейма что каждая твоя строка это запись, сответсвенно все колонки должны быть одной длинны. Да они могут содержать пропущенные значения, но длинна всех колонок должна быть одинакова, Каждая строка это запись. Если это не так то делай отдельный фрейм для этих записей. И создавай колонку с общим индексом и там и там что бы джойнить как в sql.

Как записать float данные в DataFrame pandas?

Goobee, Смотри, у тебя есть величины и список внутри кортежа. Каждый твой кортеж это строка в фрейме. Каждая итерация цикла это новая строка. И вот в одном из полей у тебя место значений списки со значениями. Это то как я тебя понял (возможно неправильно). То есть по смыслу как то так.

[
    (1,2,'a',[100,200]),
    (1,2,'b',[300,400])
]

Это как выглядит твой tank после двух итераций. Так вот как ты хочешь что бы это выглядело, как эти данные из списка должны распределяться. Или может я не совсем верно тебя понял?

Как записать float данные в DataFrame pandas?

Goobee, Почитай я дополнил последний коммент.