Как при создании новой базы в Redmine в докере сразу задать ей uft8?

Question

[Алексей]

Вроде бы достаточно простой вопрос, но за выходные не победил

В docker-compose.yml:

redmine:
    image: redmine

  db:
    image: mysql:5.7

база создается с кодировкой latin1_swedish_ci и не позволяет создавать объекты с кириллицей.

Замена на для всей базы

ALTER DATABASE redmine CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci;

ничего не дает - все таблицы остаются в latin1_swedish_ci

Если, например, вручную меняю в journals поле notes на utf8mb4_unicode_ci - то, конечно, комментарии сразу начинают сохраняться и в кириллице.
Параметр REDMINE_DB_ENCODING вроде бы и так по-умолчанию описан, как uft8

Не хочется верить, что надо сначала создать базу, а потом все поля/таблицы менять.
В гугле нашелся именно такой совет - разовой конвертации всех таблиц после создания базы.

Может как-то проще можно сразу создать базу так, чтобы все текстовые поля были в uft8?

Updated:
В итоге пришлось все-таки обойтись разовой конвертацией всех таблиц
Нелогично, но работает

mysql -u root -p --database=redmine -B -N -e "SHOW TABLES" | awk '{print "SET foreign_key_checks = 0; ALTER TABLE", $1, "CONVERT TO CHARACTER SET utf8 COLLATE utf8_unicode_ci; SET foreign_key_checks = 1; "}' | mysql -u root -p --database=redmine

Updated2:

Для создания в utf8 помогла установка кодировки и сортировки сервера через command в контейнере mysql.
https://dev.mysql.com/doc/refman/8.0/en/charset-se...

db:
    image: mysql:5.7

    command:
      - "--character-set-server=utf8"
      - "--collation-server=utf8_general_ci"

Answer 1

[Vitaly Karasik]

Скорее всего, это баг (или undocumented) в Redmine image.
См. например
https://github.com/docker-library/redmine/issues/179
https://github.com/docker-library/redmine/issues/198

Comments

[Алексей]

Vitaly Karasik , спасибо, один из примеров помог .

Надо было не в redmine копать, а в mysql.
Там по-умолчанию latin1_swedish_ci, а redmine не просит изменить.
Хоть и задавал REDMINE_DB_ENCODING: utf8

Помогла установка кодировки и сортировки сервера через command в контейнере mysql.
https://dev.mysql.com/doc/refman/8.0/en/charset-se...

db:
    image: mysql:5.7

    command:
      - "--character-set-server=utf8"
      - "--collation-server=utf8_general_ci"

Answer 2

[mayton2019]

Докер здесь скорее всего непричем. Это особенность программного продукта Redmine.

С какой кодировкой у тебя создана база? Документация по Redmine https://www.redmine.org/projects/redmine/wiki/Redm... явно указывает пример c utf8 как правильный шаблон для демлоймента.

Comments

[Алексей]

show variables like "character_set_database";

показывает

character_set_database latin1

Я видел в документации
CREATE DATABASE redmine CHARACTER SET utf8mb4;

но ведь это для ручной инсталляции, а у меня готовая база из образа поднимается, сам я ее не создаю

[mayton2019]

Алексей, сделай свой образ со своим шаблоном.

[Алексей]

mayton2019, так я бы и рад, но что там прописывать?

Например, в описании образа postgres есть явный пример:

FROM postgres:14.3
RUN localedef -i de_DE -c -f UTF-8 -A /usr/share/locale/locale.alias de_DE.UTF-8
ENV LANG de_DE.utf8

У redmine ничего не нашел.
Только REDMINE_NO_DB_MIGRATE - запуск без создания базы по-умолчанию.

Если этот параметр не ставить - база создается из автоматически сгенерированного шаблона /usr/src/redmine/db/schema.rb, где уже прописана кодировка для всех таблиц.

# This file is auto-generated from the current state of the database. Instead
# of editing this file, please use the migrations feature of Active Record to
# incrementally modify your database, and then regenerate this schema definition.
#
# This file is the source Rails uses to define your schema when running `bin/rails
# db:schema:load`. When creating a new database, `bin/rails db:schema:load` tends to
# be faster and is potentially less error prone than running all of your
# migrations from scratch. Old migrations may fail to apply correctly if those
# migrations use external dependencies or application code.
#
# It's strongly recommended that you check this file into your version control system.

ActiveRecord::Schema.define(version: 2022_02_24_194639) do

  create_table "attachments", id: :integer, charset: "latin1", force: :cascade do |t|
    ...
  create_table "auth_sources", id: :integer, charset: "latin1", force: :cascade do |t|
    ...
  create_table "boards", id: :integer, charset: "latin1", force: :cascade do |t|
    ...

Что прописать в Dockerfile, чтобы этот файл генерировался с utf8 - непонятно...

[Алексей]

PS
REDMINE_DB_ENCODING не помогает, установка в uft8 или utf8md4 не меняет этот авто-генерируемый скрипт создания таблиц.
Подумал, может вообще не читается параметр, но при установке непонятного ему параметра, например, в utf8mb4_unicode_ci - контейнер не стартует:

rake aborted!
ActiveRecord::ConnectionNotEstablished: Unsupported charset: '"utf8mb4_unicode_ci"'

[Алексей]

Больше идей, как сделать сразу utf8 не появилось
Пришлось обойтись разовой конвертацией всех таблиц
Нелогично, но работает

mysql -u root -p --database=redmine -B -N -e "SHOW TABLES" | awk '{print "SET foreign_key_checks = 0; ALTER TABLE", $1, "CONVERT TO CHARACTER SET utf8 COLLATE utf8_unicode_ci; SET foreign_key_checks = 1; "}' | mysql -u root -p --database=redmine

[mayton2019]

Алексей, я ок. Раз работает - значит работает.