Как решить проблему с кодировкой?

Question

[Georgy123]

def write_json(data):
    with open('posts.json','w') as file:
        json.dump(data, file, indent=2, ensure_ascii=False)


def main():
	#https://api.vk.com/method/wall.get?user_id=210700286&v=5.52

    group_id='-30666517'
    r= requests.get('https://api.vk.com/method/wall.get', params={'owner_id':group_id, 'count':100, 'offset':0})
    write_json(r.json())


if __name__ == '__main__':
	main()

С помощью этого я по мысли должен получать запись информации о стене группы в файл,но интерпретатор выдает следующее: return codecs.charmap_encode(input,self.errors,encoding_table)[0]
UnicodeEncodeError: 'charmap' codec can't encode character '\u0306' in position 38: character maps to

Как это можно исправить ?
Заранее спасибо

Comments

[Шамуэй]

Idle?

[Georgy123]

Хомон: Sublime 3

Answer 1

[Dimonchik]

тут проверяеешь
https://www.artlebedev.ru/tools/decoder/
CP1252 - CP1251

находишь оригинал, декодишь

Comments

[Georgy123]

но это работает при ручном вбивании сбитого текста ,а там его очень много , как исправить проблему не прибегая к использованию сторонних ресурсов?(или лучше сказать,как исправить код,чтобы в файл записывались и русские строки?)

[Dimonchik]

ну попробуй детектор кодировок

но он далеко не 100% угадывает

Answer 2

[Александр]

import json
import codecs

def write_json(data):
    with codecs.open('your_file.txt', 'w', encoding='utf-8') as file:
        json.dump(data, file, indent=2, ensure_ascii=False)

Comments

[Georgy123]

там если открыть получившийся файл вместо русских строк что-то вроде этого: Ìû ïåðåâåëè ïåðâóþ ñòàòüþ èç ñåðèè îò àâòîðà áëîãà

[Александр]

Я ответил как исправить ошибку того что написано было в вопросе :)
А дальше значит при открытии просто надо подобрать нужную кодировку редактором похоже ...
Вы в винде работаете ?

Answer 3

[Александр]

Я не понял где ошибка, но судя по коду она может быть в месте получения json-ответа.

#посмотреть угаданную автоматом кодировку
print(r.encoding)       

# установить реальную кодировку (какая там - я не знаю, cp1251 написал просто так)
r.encoding = 'cp1251'   

text = r.text
data = json.loads(text)
write_json(data)

Хотя может у вас ошибка в json.dump? В этом случае у вас, скорее всего, кодировка выходного файла не utf-8 и надо просто

with open('posts.json', 'w', encoding='utf-8') as file: