Как исправить ошибку 1366 Incorrect string value?

Question

[symnoob]

Как исправить ошибку 1366 Incorrect string value: '\xF0\x9F\x8C\xBB ?

Answer 1

[Rsa97]

Проверить кодировку колонки. Для MySQL запись символов с кодом выше U+FFFF (у вас код U+1F33B)возможна с кодировкой utf8mb4.

Comments

[symnoob]

Rsa97 это текстовые поля или поля для дат тоже?

[symnoob]

Rsa97 Есть возможность поменять во всей базе, всех таблицах и полях collation одним запросом?

[Rsa97]

symnoob, Текстовые.
Менять надо для каждой таблицы:
ALTER TABLE tablename CONVERT TO CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci;
Дополнительно можно поменять для базы:
ALTER DATABASE databasename CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci;

[Akina]

Rsa97, ни для таблицы, ни для тем более БД менять ничего не надо. тем более что это бессмысленно, ибо будет применяться только к заново создаваемым таблицам и полям, и не повлияет на существующие. fiddle
Менять надо определение конкретного поля.

[Rsa97]

Akina,

To change the table default character set and all character columns (CHAR, VARCHAR, TEXT) to a new character set, use a statement like this:

ALTER TABLE tbl_name CONVERT TO CHARACTER SET charset_name;

https://dev.mysql.com/doc/refman/8.0/en/alter-tabl...

[symnoob]

Rsa97, а на 5.6 тоже сработает?

[symnoob]

Rsa97, Akina, а менять collation на продуктивном сервере это безопасно? Есть ли какие либо риски?

[Rsa97]

symnoob, Риски есть. Если, например, стоял чарсет latin1, а данные писались в utf8, то при конвертации всё полетит.
Но никто и не делает такие процедуры сразу на боевом сервере, всегда проверяется сначала на копии базы.

[Akina]

а менять collation на продуктивном сервере это безопасно?

Изменение атрибута COLLATE поля повлияет на выполнение любых запросов, связанных с обработкой этого поля (сравнения, явные в выражениях и неявные при работе встроенных функций). Как это отразится на работе сервера и его приложений, мы предсказать не в состоянии.

Но вообще-то речь шла об изменении не COLLATE поля, а о CHARACTER SET. Это гораздо более критичная операция, она повлияет на работу с этим полем гарантированно и весьма серьёзно.

Гораздо разумнее выполнять преобразование в нужную кодировку передаваемого параметра прямо в тексте запроса INSERT/UPDATE, с помощью функции CONVERT().

[symnoob]

Akina, Rsa97 вот ещё один вопрос, как быть если нужно подогнать collation для ключей? Например в таблицах присутствуют поля varchar в которых лежит uuid? Тогда что делать?

[Rsa97]

symnoob, А зачем вам менять порядок сортировки? Или хотите сделать поля регистрозависимыми?

ALTER TABLE `table`
  MODIFY COLUMN `column` VARCHAR(...)
    CHARACTER SET 'нужный чарсет'
    COLLATE 'нужное значение'

[Akina]

Например в таблицах присутствуют поля varchar в которых лежит uuid?

UUID надо переводить в двоичный вид и хранить в BINARY(16). И всякие charset/collation будут тебе до лампадки..

[symnoob]

Rsa97, нет не хочу, но если я меняю collation для таблицы, то при операции получаю ошибку мол не мог поменять так как ключ в таблице имеется

Answer 2

[Akina]

Либо изменить кодировку поля, либо выполнить преобразование кодировки значения в запросе функцией CONVERT().

Comments

[symnoob]

Akina а есть какие либо риски при изменение поля и какой правильный стайтмент для изменения полей?

[Akina]

symnoob, в комментарии к ответу Rsa97 есть линк на fiddle. Вы уж не поленитесь... ну и сам комментарий прочитать не помешает.