Latin-1 codec can't encode characters как исправить socketio?

Question

[MichaelMih]

Добрый день! При отправке сообщения с русскими символами возникает исключение "Latin-1 codec can't encode characters".
С английскими символами такого нет.
Socketio 3.
Ubuntu 18.
Python 3.8

Comments

[MinTnt]

У меня подобное было лишь, когда я в параметрах запроса вместо нужного для ситуации словаря, подал строку.

[Vindicar]

Приведи код, минимально воспроизводящий проблему (не забудь про форматирование).
Также укажи используемые версии ПО, так как до 2.0 у socket.io были известные проблемы с юникодом.

[MichaelMih]

Vindicar,

python:

@socketio.on('new_message', namespace="/app/auction")
def message(json):
    time = datetime.now().strftime("%d.%m.%Y %H:%M:%S")
    img = database.get_row("users", 'image', "id=%s", session['user_id'])
    database.add_row("messages", user_id=session['user_id'], user_login=session['user_login'], message=json['text'], time=time, image=img[0])
    respones = {"name": session['user_login'], "text":json['text'], "img": img, "time": time}
    emit("message", respones, namespace='/app/auction', room="1")

js:

$("#send_message").click(function (e) {
    if ($("#msg").val() == "") {
      return
    }
    socket.emit("new_message", {text: $("#msg").val()})
    $("#msg").val("");
  });

Версии:

js socketio: 3.1.3
flask-socketio: 5.1.0
python-socketio: 5.0.3
python-engineio: 4.2.0

[MichaelMih]

MichaelMih, на Windows 10 работает всё корректно, на VDS с убунту исключение описанное выше

[MinTnt]

MichaelMih, на какой строке интерпретатор говорит ошибку?

[MichaelMih]

MinTnt,

database.add_row("messages", user_id=session['user_id'], user_login=session['user_login'], message=json['text'], time=time, image=img[0])

[MichaelMih]

MinTnt, везде где есть json['text']

[Vindicar]

> database.add_row
Т.е. дело скорее всего не в socket.io, а в базе данных. Что за движок используется? Есть ли какая-либо библиотека посредник (потому что интерфейс не очень-то похож на типовой питоний интерфейс БД)? Как представлено поле message (тип данных, collate)?
Также можно для надёжности проверить, что json['text'] - это именно строка, через isinstance(json['text'], str). Но я думаю, это условие выполняется. В таком случае дело в том, что БД/обёртка над БД либо не переваривает юникод, либо предпочитает, чтобы ей передавали уже закодированный bytes.

[MichaelMih]

Vindicar, не верно. Я подметил выше, что print(json['text']) вызывает ту же ошибку

[Vindicar]

Даже так?
Ещё раз, json['text'] - это какого типа объект? str, bytes или что-то специфическое?
Если bytes, то можно попробовать декодировать самому...

[MichaelMih]

Vindicar, json['text'] мы получаем, когда socketio из Js присылает нам данные из Input, которые написал пользователь

[Vindicar]

MichaelMih, я не это спрашивал.
> Ещё раз, json['text'] - это какого типа объект? str, bytes или что-то специфическое?

[MichaelMih]

Vindicar, str