Как записать float данные в DataFrame pandas?

Goobee, По всей видимости что то пошло не так у тебя. Все значения None. По ходу. У меня нормально. В общем я тебе так скажу. Нужно отдельный скрипт парсер твоего json писать. И потом это все умно складывать в базу.

Как записать float данные в DataFrame pandas?

Goobee, Ты можешь вот так любую колонку развернуть. Можешь другое имя колонки указать.

Как записать float данные в DataFrame pandas?

Goobee, теперь сделай например

exploded = df.explode('d051eb0d-0445-4c0d-aeb2-4f22a03a5886.ParamTypes')

И распечатай. Вот все твои данные в рамках одного фрейма из которого надо пробовать работать, они логически связаны. Понимаешь, его можно начинать доводить до ума, а не плодить кучу таблиц и гадать потом что к чему в них.

Как записать float данные в DataFrame pandas?

Goobee, Да в принципе я его уже нормализовал. Смотри попробуй просто, будут ошибки или нет. Я то на том куске обшел, но может он его прочтет.

with open('data.json') as json_file:
    json_object = json.load(json_file)
df = pd.json_normalize(json_object)

Где data.json это твой json файл.

Как записать float данные в DataFrame pandas?

Goobee, Нормализовать означает привести к единой длинне, что бы можно весь этот json в таблицу превратить (фрейм). Проблема в том что json настолько плохой что pandas не может его нормализовать.

Как записать float данные в DataFrame pandas?

Goobee, Я думаю надо с этим json сначал работать и его приводить в порядок. Что бы можно было нормализовать его сначала. Так ты конечно правильно мыслишь насчет связей. Но это такое надо потратить время и нормализовать этот json.

Как записать float данные в DataFrame pandas?

Goobee, Сейчас гляну, его нужно нормализовать, если там все разной длинны. Только что то json не валидный где то нету двойных ковычек он ругается.

Как записать float данные в DataFrame pandas?

Goobee, Не видно какой, а ты пробовал, как я тебе советовал, read_json или json_normalize? Что бы сразу без всего твоего кода получить фрейм и оттуда уже выбирать те колонки которые тебе нужны.

Как записать float данные в DataFrame pandas?

Goobee, То есть в других твоих переменных None пропускаются? Так делать нельзя. Не в коем случае. Ты нарушаешь структуру, записывай там где None пусть будет None.

Как записать float данные в DataFrame pandas?

Да. Представь себе на листке бумаги. таблицу где одна колонка имеет длину 3 а вторая длину 5. Это уже не таблица. А как они логически вообще связаны, почему там больше значений?

Как записать float данные в DataFrame pandas?

Goobee, то есть как я понял, это один и тот же список закидывается в каждый кортеж. Длинна списка совпадает с остальными данными. То есть длинна списка равна длинне фрейма. Если так либо можешь просто его после всех парсингов в фрейм добавить. df['Serial'] = [i['Serial'] for i in response]. Вне цикла. Смотри смысл фрейма что каждая твоя строка это запись, сответсвенно все колонки должны быть одной длинны. Да они могут содержать пропущенные значения, но длинна всех колонок должна быть одинакова, Каждая строка это запись. Если это не так то делай отдельный фрейм для этих записей. И создавай колонку с общим индексом и там и там что бы джойнить как в sql.

Как записать float данные в DataFrame pandas?

Goobee, Смотри, у тебя есть величины и список внутри кортежа. Каждый твой кортеж это строка в фрейме. Каждая итерация цикла это новая строка. И вот в одном из полей у тебя место значений списки со значениями. Это то как я тебя понял (возможно неправильно). То есть по смыслу как то так.

[
    (1,2,'a',[100,200]),
    (1,2,'b',[300,400])
]

Это как выглядит твой tank после двух итераций. Так вот как ты хочешь что бы это выглядело, как эти данные из списка должны распределяться. Или может я не совсем верно тебя понял?

Как записать float данные в DataFrame pandas?

Goobee, Почитай я дополнил последний коммент.

Как записать float данные в DataFrame pandas?

Goobee, Лучше не много изучить pandas и read_json в pandas а потом осуществить выборку того что нужно. Ну если следовать твоему коду не правильному то в список и потом твой существуеющий df['new_column'] = some_list. Но это плохое решение потенциально данные могут не совпадать, если списки разной длинны будут.

Ну и еще более менее правильное решение будет выглядеть так. Вот там где цикл ты собираешь tank_value в список. Предположим у тебя три значения это не важно, tank_value, another_value, some_value. Ты в свой список tank добавляешь вот так. tank.append((tank_value, another_value, some_value))
фрейм создаешь вот так. df = pd.DataFrame(data=tank_value, columns=['tank_value', 'another_value','some_value']). У тебя будет фрейм с тремя колонками.

Как записать float данные в DataFrame pandas?

Goobee,

Затем естественно вне цикла после твоего кода

А это ты почему не прочитал.

df = pd.DataFrame({"tank_value": tank})
pprint(df)

Вот это вне тела все циклов.

Как записать float данные в DataFrame pandas?

Goobee, Код покажи, так быть не должно. У тебя один и тоже фрейм конкатенируется Код.

Как записать float данные в DataFrame pandas?

Goobee, Что значит в таком виде? Если они по одному значению в каком нибудь цикле приходят то их сначала нужно собрать в коллекцию. Покажи код.

Как записать float данные в DataFrame pandas?

Goobee, В каком виде они приходят что за объект?

Как выучиться на машин-лернера с нулевой базой математики?

Иерокопус Таманский, Мне как то смешно сравнивать образование с khan academy с "паршивым вузом" - khan academy это образование мирового уровня.

Как выучиться на машин-лернера с нулевой базой математики?

Иерокопус Таманский, Во первых, смотря какого вуза. Во вторых базу для дальнейшего изучения она позволяет построить. Я бы мог порекомендовать классику по ML Книгу от профессоров стенфорда еще и с python кодом летом этого года выпустили python edition до этого она на R была. https://www.statlearning.com/ Но от нее толку не будет, без базы. В Khan Academy серьезнейшая база.