Локальная разработка на Битрикс. Bitrix VM + IDE. Как правильно организовать, чтобы работало быстро?

Question

[Leonid Markov]

Пробовал разные варианты работы с Битрикс у себя на компьютере:
1) BWM на VirtualBox (https://www.1c-bitrix.ru/download/vmbitrix.php);
2) OpenServer (либо другие варианты WAMP-сборки);
3) Docker.

1) BWM на VirtualBox. Естественно, Битрикс работает быстрее в своем родном окружение, т.е. на BWM. Но хотелось бы иметь доступ к файлам проекта через IDE, чтобы индексировать их.

На VirtualBox этот вопрос можно решить путем монтирования папки
(инструкция тут).
Но после того, как файлы сайта подключаются к VirtualBox с хост ОС, скорость работы сайта уменьшается в разы.
Тест производительности Битрикс показывает, что работа с файловой системой на очень низком уровне.
Если файлы сайта находятся внутри контейнера VirtualBox, то все ок.

Получается, что либо сайт нормально работает, но нет прямого доступа к файлам проекта, либо есть доступ, но сайт еле шевелиться.

Видимо, передача данных между хост ОС и гостевой ОС очень низкая? К сожалению, не знаю, как это работает.
Притом тесты на SSD и HDD дисках показали одно и тоже.

п.с. видел еще вариант подключения к VirtualBox через winscp или подключение через ide, как к удаленному серваку, но тут не будет индексации проекта. Да и вообще, вариант кажется странным. Тогда можно сразу с Битриксом работать на дев. серваке, где cms будет намного шустрее, чем на локалке.

2) OpenServer. В случае с WAMP у меня удобный доступ к файлам проекта, но ненастроенное Битрикс окружение. А настраивать там приходится много, одним mbstring и utf-8 не ограничивается.
Тут, правда, удивило то, что в тестах Битрикса скорость работы с файловой системой тоже весьма низкая, но по ощущениям работает быстрее, чем VirtualBox + mount folder.

3) Docker. Ну и с Докером получилось хуже всего: ненастроенное веб-окружение и виртуалка в виртуалке (Win WSL2 + Docker).

Помогите, пожалуйста, советом, как организовать работу, чтобы и с файлами проекта удобно было взаимодействовать и чтобы Битрикс более менее работал.

Comments

[Антон]

Купить vps и поставить nginx и не пудрить себе голову

[Leonid Markov]

Антон, ок, пусть будет vps с любым окружением - трехзначные суммы в месяц мне по силам. Как мне IDE подключать для индексации кода?

[Yariy]

Леонид Марков, запиливаешь гит на хостинг, клонишь себе проект (за исключением ядра, естесно), в Шторме создаешь проект из существующих файлов, потом в tools->deployment настраиваешь автоаплоад файлов на хостинг. Я таким макаром в основном и работаю

[Leonid Markov]

Yariy, мне достался проект, в котором и папка bitrix в гите и прямого доступа к дев. серверу нет, только лишь работа в своей ветке на локале и далее пулреквесты.
Поэтому нужно как-то у себя на компьютере сделать работы быстрой и удобной.

[smilingcheater]

Леонид Марков, кучу лет разрабатываю используя Битрикс на OpenServer'е. Настроить его под битрикс - дело 15 минут максимум. Какие именно сложности у вас возникли?

[Leonid Markov]

smilingcheater на новом OpenServer 5.3.8 сделал настройки mbstring и UTF-8 и Битрикс установился.
А вот в админке есть такая проблема:


Я с этим когда-то давно сталкивался и, вроде, это из-за прав на файлы стилей, уже не помню.

Просто вопрос в том, что в своем родном окружении Битрикс работает быстрее, но не удобно на локалке,
а на ОпенСервер медленнее и нужно еще настройки делать.
Но, видимо, других вариантов-то и нет )

[smilingcheater]

Леонид Марков, проблема в данном случае что файлы css/js для шаблона лежат в папке, у которой в начале названия точка (.default), а в OpenServer'е есть правило, запрещающее доступ к таким папкам.
Если у вас Apache, то надо из конфига удалить блок

<LocationMatch "/\.(?!well-known)">
    Require             all denied
</LocationMatch>

Если ещё и Nginx - то у него удалить строку
location ~ /\. {deny all;}

[smilingcheater]

Леонид Марков, На счет скорости - достаточно включить opcache и положить файлы битрикса на SSD - и на OpenServer'е время генерации и отдачи страниц (при включенном кеше) падает до вполне комфортных 0.1-0.2 сек.
И отключить xdebug по умолчанию. Если вы его используете - настроить его включение только через куку.

[Leonid Markov]

smilingcheater, отключение правила "/\.(?!well-known)" помогло, спасибо!

Файлы Битрикса, да и сам OpenServer, действительно, нужно отправлять на ssd.
Иначе на hdd (5400 rpm) вот такая картина:

И работает все это очень медленно.

[smilingcheater]

Леонид Марков, по скрину вижу, что у вас ещё и база не совсем корректно настроена
откройте страницу /bitrix/admin/perfmon_db_server.php?lang=ru и проверьте настройки
innodb_flush_log_at_trx_commit
innodb_flush_method
transaction-isolation

[smilingcheater]

Леонид Марков, И ещё заодно посмотрите страницу
/bitrix/admin/perfmon_php.php?lang=ru
чтобы убедиться, что все нужные настройки PHP сделаны

[Leonid Markov]

smilingcheater, тест БД показывает много проблем. И решить их оказалось не так просто.

Первая рекомендация transaction-isolation = READ-COMMITTED работает без проблем.

А вот попытки ставить большие значения для key_buffer_size, query_cache_limit, innodb_buffer_pool_size ни к чему не приводят.
Посмотрел параметры в файле /etc/my.cnf виртуальной машины Битрикс:
key_buffer_size = 16М,
query_cache_limit отсутствует,
innodb_buffer_pool_size = 32М
Мне эти параметры ничего не изменили в тесте БД.

И наконец установка параметра innodb_flush_method = O_DIRECT приводит к тому, что OpenServer не заводится, ошибка в логах:
InnoDB: Unrecognized value O_DIRECT for innodb_flush_method
InnoDB: Plugin initialization aborted with error Generic error
Plugin 'InnoDB' init function returned error.
Plugin 'InnoDB' registration as a STORAGE ENGINE failed.
Failed to initialize builtin plugins.
Aborting
Ничего путного по этой ошибке не нашел.

Но даже так тест производительности БД показывает нормальные результаты для чтения и изменения БД.
Теперь хромает только параметр записи.

[smilingcheater]

Леонид Марков, вы мускул какой версии используете, 8.0 / 5.7 / 5.6?
и какого примерно размера БД сайта, сколько гб?

[Leonid Markov]

smilingcheater, 5.7 версия

[Артем Житник]

У меня все проекты на docker. Постепенно окружение обтесалось, несколько контейнеров, запускаю через docker-compose. Ядро Битрикса конечно в .gitignore. PhpStorm не летает, конечно, но вполне работать можно. Да, и десктоп на ububntu, проблем с виртуализацией нет...

[Leonid Markov]

Артем Житник, спустя полгода пришел к такой же схеме.

Хост ОС Ubuntu 20, диск nvme m.2. Редактов PHP Shtorm или VSCode
Все в контейнерах docker.

Работает прям быстро, показывает много попугаев в тесте битрикса, особенно на чтение с диска.

Один только момент - хороших конфигов docker-compose почти нет.

[Артем Житник]

Леонид Марков, а во что вы упираетесь? Чего не хватает в конфигурации? На паре проектов я делал две конфигурации compose`ов: для разработки и прод. Вполне рабочая схема...

[Leonid Markov]

Артем Житник, Выложил сборку https://github.com/LMarkovWeb/docker-bitrix
Она совсем сырая. Из основных проблем - это ошибка в тесте Битрикса на работу с сокетами.
Так же не настроена отправка почты.

[Артем Житник]

Leonid Markov, можно в php-fpm контейнер добавить msmtp для отправки почты.

#Dockerfile
ARG SMTP_MAILHUB
ARG SMTP_USER
ARG SMTP_PASS
ARG SMTP_PORT
ARG SMTP_FROM

RUN apt-get update && apt-get install -y msmtp

RUN echo "defaults" > /etc/msmtprc \
    && echo "account default" >> /etc/msmtprc \
    && echo "logfile /var/www/msmtp.log" >> /etc/msmtprc \
    && echo "host $SMTP_MAILHUB" >> /etc/msmtprc \
    && echo "port $SMTP_PORT" >> /etc/msmtprc \
    && echo "from $SMTP_FROM" >> /etc/msmtprc \
    && echo "auth on" >> /etc/msmtprc \
    && echo "tls on" >> /etc/msmtprc \
    && echo "tls_starttls off" >> /etc/msmtprc \
    && echo "tls_certcheck off" >> /etc/msmtprc \
    && echo "user $SMTP_USER" >> /etc/msmtprc \
    && echo "password $SMTP_PASS" >> /etc/msmtprc

#docker-compose.yml
services:
  php-fpm:
    build:
      args:
        - HOSTNAME=${HOSTNAME}
        - SMTP_MAILHUB=${SMTP_MAILHUB}
        - SMTP_USER=${SMTP_USER}
        - SMTP_PASS=${SMTP_PASS}
        - SMTP_PORT=${SMTP_PORT}
        - SMTP_FROM=${SMTP_FROM}

Переменные окружения, можно объявить в .env файле например:

SMTP_MAILHUB=local
SMTP_USER=user
SMTP_PASS=pass
SMTP_REWRITE_DOMAIN=

[Leonid Markov]

Артем Житник, спасибо. Почту сделал. Настройки msmtp отдельным файлом добавил,
а в php:

sendmail_path = "/usr/bin/msmtp -t -i -C /var/.msmtprc -a gmail"

Правда, Битрикс жалуется, что отправка занимает более 1 сек.

Осталось сокеты победить.
В журнале ошибка

2021-Nov-11 14:01:16 Работа с сокетами (check_socket): Fail
Connection to docker-bitrix.local:80	Fail
Socket error [111]: Connection refused

По этой проблеме нашел совет, что нужно в host прописывать, но не помогает, разбираюсь дальше

[Артем Житник]

Leonid Markov, у меня тест сокетов проходит. Видимо ваш контейнер с битриксом не может определить хост docker-bitrix.local. Можно попробовать на хосте определить переменную окружения HOSTNAME=docker-bitrix.local. Либо в docker-compose для битрикс контейнера дополнить hosts таким образом:

extra_hosts:
 - "docker-bitrix.local:X.X.X.X"

Где X.X.X.X это ip nginx. Но надо чтоб ip контейнеров были постоянно определены.

Answer 1

[VitalyChaikin]

Обычно, берется копия виртуальной машины рабочего сервера, там делаются все правки, отладка ...
Когда все готово - заливаются файлы на продуктив;

Comments

[Leonid Markov]

VitalyChaikin, какими средствами делается и потом разворачивается копия на локале? И опять получается, что IDE с индексацией проекта не подключить?

Answer 2

[Вячеслав Шевченко]

Задавался этим же вопросом и пришел к следующим выводам: если сайт небольшой и работает более или менее быстро, то расшаренная папка с vbox нормальный вариант если же сайт тяжелый, то vbox с деплоем по ssh. PHPStorm сейчас можно настроить так, чтобы он выгружал все изменения файлов, т.е. даже когда ветку меняешь в гите он всё выгрузит. Да загрузка большего количества мелких файлов занимает время, но не критично. Даже если ты вне PHPStorm что-то поменяешь он выгрузит изменений/добавленный файл.

Answer 3

[Александр Торопов]

Можно создать в BitrixVM нового FTP пользователя и в PHPStorm настроить нужный деплой.
В данном видео рассказывается, как это можно сделать.
Т.к. на локальной машине у нас будут копии файлов, то проблема с индексацией решается.