Парсинг json в python выдает ошибку?

Question

[BotaniQ_Q]

Есть сайт, который отдает нам json я хочу обратиться к нему, взять строку с определенным ключем ("output:") и потом с ним работать как с переменной, в этом output строки на русском со сбитой кодировкой (мне бы ее еще и востановить, пробую востанавливать на сайте востановителей кодировок - получается :)) Короче проблем куча, вот мой код

url = 'сайт.ком.json'+'Привет, Мир'
response = requests.get(url)

print(response.json())

1)Питон ругается на последнюю строку, в чем именно ошибка не говорит, json там точно есть.
2)В этом json сбитые кодировки, если сделать через javascript вот таким образом

<script>
url = "сайт.ком.json";
input = encodeURIComponent ("Привет, мир");
function ProcessReply (data) {
    if (data.error) console.log ('Error: ' + data.error);
    else alert ('Reply: ' + data.output);
}
script_element = document.createElement('script'); //create new script element
script_element.src = url + "?input=" + input ;
document.getElementsByTagName ('head')[0].appendChild(script_element); //append to page, which executes it
</script>

то текст возвращается русский, нормальный, человеческие
3)Ну и следующее я не знаю как мне получить не весь json, а только тот который "output:"

Answer 1

[Руслан]

Без json'a непонятно почему питон ругается и что там с кодировкой, получить по ключу так: print(response.json()['output:'])

Comments

[Дмитрий]

Питон ругается, так как у requests нет метода json, но есть переменная text, где хранится ответ от сервера

[Руслан]

Дмитрий: Как нет, docs.python-requests.org/en/master/user/quickstart...

[BotaniQ_Q]

Руслан: получилось вот так вывестиprint(response.text), но отдельно output не получается print(response.text['output:'])

[BotaniQ_Q]

Руслан: пишет мол str не колабл

[Дмитрий]

Не знал, спасибо.
Но в этом случае, скорее всего, json отдаётся как str

[Руслан]

BotaniQ_Q: так не получится, по text отдается строка, скорее всего там в ответе не json, если ошибку выдает типа ValueError: No JSON object could be decoded

[Руслан]

Дмитрий: Да, наверное так и есть

[BotaniQ_Q]

Руслан: если написать json_output = json.loads(response.text())['output']
то пишет вот что str не колабл, если после text не ставить () то есть вот так json_output = json.loads(response.text)['output'], выдает просто ошибку

[Руслан]

BotaniQ_Q: Ну вон по скринам видно же, что это не json, ProcessReply(все что внутри - json), или сделать так чтобы сервер возвращал json, без ProcessReply или вручную убирать ProcessReply( и последнюю )

[Руслан]

Делай что то типа этого:

url = 'сайт.ком.json'+'Привет, Мир'
response = requests.get(url)
text = response.json()
if "ProcessReply" in text:
  json.loads(text[13:-1])
else
  json.loads(text)

Но если вдруг в ответе не будет ProcessReply, то вывалится ошибка, осторожно!

Answer 2

[Дмитрий]

print(response.text)

Comments

[BotaniQ_Q]

о, блин получилось, хотя минутку назад не получалось) А как блин вывести отдельно print(response.text['output:']) вот так не выходит

[BotaniQ_Q]

пишет мол str не колабл

[Дмитрий]

import json

json_output = json.loads(response.text)['output']

[BotaniQ_Q]

Дмитрий: ругается на строчку json_output = json.loads(response.text)['output'], библиотеку json импортнул

[Руслан]

BotaniQ_Q: проверьте ответ сервера, там скорей всего не json данные

[Дмитрий]

Как ругается? Json.loads делает из строки словарь. Внимательно изучи полученный json. Вполне может быть, что он выглядит как-то так :
{'object': {'output': value} }
В этом случае нужно делать так:
json.loads(response.text)['object'] ['output']

[BotaniQ_Q]

Дмитрий: сам json получается таким
ругается вот так

[BotaniQ_Q]

Дмитрий: как вариант можно попробовать разобрать строчку на список и вывести то что после output и перед следующим ключем, но мнеб без велосипеда сделать)

[Дмитрий]

То что прилетае от сервера - это не json.
1. Из г...на и палок делаем json:

text = response.text
j = text.split('(')[1][:-2]

2. Парсим json:
json_output = json.loads(j)['output']

[BotaniQ_Q]

Дмитрий: понимаю, что я уже обнаглел, но типа три вопроса
1) Чем тру json отличается от этой херни от сервера которую нам прислали и сказали что это json
2) что мы проделали в той строчке где есть функция split
3) Эта хрень все равно не работает))))))
Ругается на строчку json_output = json.loads(j)['output']
таким матом : json.decoder.JSONDecodeError: Extra data: line 1 column 1998 (char 1997)

[Дмитрий]

1. тру json - это, по сути, тот же словарь в питоне, т.е {'blah': 'blah', 'blah2': 'blah-blah'}, а не ChegoToTam({'blah': 'blah', 'blah2': 'blah-blah'})
2. split - делает из строки список по разделителю в скобках, [1] - возвращает второй элемент из получившегося списка, [:-2] - из строки полученной в предыдущем шаге убирает два последних символа (');') - возвращает срез от символа номер 0 до символа -2
3. Выведи на печат j и посмотри на последний символ, дб }, если нет то подкоректируй срез

[BotaniQ_Q]

Дмитрий: оно как то так)

[Дмитрий]

может так прокатит:
j = text.split('(')[1].strip().[:-2]
или можешь использовать регулярки.
Твоя цель: вытащить все что находиться между круглых скобок, а потом засунуть в json.loads()

[BotaniQ_Q]

Дмитрий: ох, на это ругается инвалид синтакс j = text.split('(')[1].strip().[:-2] :) Жесть, это же должно просто быть, а я этой херней уже весь вечер маюсь) Щас буду велосипедом писать

[Дмитрий]

Точку перед [;-2] убери.
Обработка строк - это же самые основы, это ведь есть в первых главах любого учебника

[BotaniQ_Q]

Дмитрий: капец, получилось, спасибо чувак) в итоге код выглядит так

response = requests.get(url)

text = response.text
j = text.split('(')[1].strip()[:-2]

json_output = json.loads(j)['output']


print(json_output)