Как сделать, чтобы третий питон использовал ko8-r кодировку в проекте С++?

Question

[bodrich]

Есть проект написанный на С++ с использованием буста. Собирается и работает под убунтой.
К проекту был подключен питон второй версии. Т.е. некоторые классы и функции были обернуты для питона, что их потом можно было вызывать из скриптов, которые, в свою очередь, вызывались из C++. Сам проект - это небольшая некоммерческая игра, которая поддерживается чисто из интереса для старых игроков. Движку игры лет так 20. Проблема в том, что в движке используется koi8-r. При переводе на третий питон, появилась проблема с utf8. Когда из скрипта на питоне (который в свою очередь вызывается из плюсов) импортируется модуль, в котором обернуты c++ функции, происходит ошибка UnicodeDecodeError. Полный трейсроут на пастбин. В самих скриптах кодировка koi8-r указана. Какие есть идеи, как заставить питон принимать от движка все в koi8-r ?
Вопрос второй. Как я понимаю, при переводе проекта на utf8, вместо koi8-r, придется заменять все строковые и символьные типы, на их аналоги в utf8 ? (string -> wstring, char -> wchar)

Answer 1

[Олег Цилюрик]

Как я понимаю, при переводе проекта на utf8, вместо koi8-r, придется заменять все строковые и символьные типы, на их аналоги в utf8 ? (string -> wstring, char -> wchar)

Вопросы заданы бестолково...
Этот вопрос относится, как я предполагаю, к C++ части?
Если да, то ответ однозначно: нет, не придётся заменить все "строковые и символьные типы" .

Comments

[bodrich]

>> Вопросы заданы бестолково...
Если что-то непонятно в вопросах, спрашивайте, я отвечу :)
>> нет, не придётся заменить все "строковые и символьные типы" .
А можно подробнее, куда копать ? Можно в виде ссылок на ресурсы.

[Олег Цилюрик]

bodrich:
Везде для ввода, вывода, хранения и т.д. текстовых строк UTF-8 вам везде достаточно обычных char*, string и т.д.
Только там, где нужен разбор контекста, содержания строки (а это очень редко), типа find() и strlen(), для рсскоязычных строк вам придётся принимать какие-то меры: многобайтные функции mb*(), преобразование в wchar_t, wstring и т.д.
Так что большая часть кода C++ может оставаться неизменной.

[Олег Цилюрик]

bodrich:
локализация строк в C-коде
Многобайтовые символы - вот это ваши UTF-8
18. Расширение Символов
локализация в Python