Как в CMS/Битрикс 24 автоматизировать проверку работоспособности доработок после обновления?

Question

[Сергей]

Провожу иногда доработки в каких то сайтах на популярных CMS или в Битрикс 24. Иногда после обновления самого ядра или модулей пропадает сам элемент или "ломается" его работоспособность.
К примеру сделал в левом меню битрикса новую кнопку с какой то функциональностью, заказчик обновил портал и все модули - кнопка исчезла. Иногда бывает, что элемент остался, а вот функциональность, реализуемая средствами JS (всплывающее окно) уже не работает.
Когда доработок по одному порталу хотя бы 2-3 десятка, то после обновлений можно быстро пробежаться и руками все проверить. Если проектов несколько и в некоторых количество мелких доработок перевалило за 4 сотни...
Я готов потратить на каждую доработку еще время и описать какие то скрипты, тесты, лишь бы гарантированно проверять работоспособность хотя бы 90-95% всех доработок.

В идеале, мониторинг должен быть ежедневный. К примеру, запускать по cron-у каждую ночь проверку по каждому сайту/порталу в отдельности. Но устроит и просто решение для разового ручного запуска, который будет проводиться после каждого обновления.

Какие есть варианты решения проблемы?

Answer 1

[Alexej Simakov]

Короткий ответ - писать UI тесты.
Для этого чаще всего пользуются Selenium. Но нужно будет программировать, на яве, питоне или руби.
Есть решения где программировать надо по минимуму. Но такие инструменты могут быть не бесплатными.
Вот небольшая выборка таких. Ничего конкретно из них порекомендовать не могу - не пользуюсь. Пробуйте.
https://www.katalon.com/katalon-studio/
https://www.testcraft.io/
https://www.froglogic.com/squish/
https://www.leapwork.com/technology/web-automation
https://testcafe.devexpress.com/
https://www.cypress.io/
https://endtest.io/
https://experitest.com/cross-browser-testing/visua...
https://screener.io/

Comments

[Сергей]

Спасибо! Я думаю, из такого списка что то точно подберу достойное

Answer 2

[Алексей Уколов]

Какие есть варианты решения проблемы?

1. Написать автотесты.
   
2. Запускать автотесты.
   

Судя по тексту вопроса вы уже и так это знаете, но тогда непонятно в чём проблема.

Comments

[Сергей]

Самое смешное, что про автотесты отдельных модулей слышал когда то краем уха. Но как для моей ситуации их применить - не понимаю.
1. Есть кнопка в меню, потом кнопка исчезает. Автотесты как прикрутить к проверке наличия кнопки?
2. Есть ссылка, при нажатии на нее всплывает поп-ап. Вдруг в сафари или хроме поп-ап перестал всплывать. В других браузерах все ОК. Автотесты как прикрутить к проверке поп-апа?
3. Есть форма ввода. Вдруг перестала срабатывать кнопка "submit". Здесь автотесты можно прикрутить?
Если бы у меня было бы понимание, как можно проверять работоспособность элементов сайта, вопрос бы не задавал.

Answer 3

[Danbka]

Вы уверены, что правильно пишете код, следуя рекомендациям Битрикса?

К примеру сделал в левом меню битрикса новую кнопку с какой то функциональностью, заказчик обновил портал и все модули - кнопка исчезла.

Звучит так, будто вы редактируете компонент/шаблон меню прямо в папке /bitrix/components/menu/. Если так, то ничего удивительного, что при обновлении все ваши изменения исчезли.

За несколько лет разработки на Битриксе ни разу не было ситуации, при которой мои кастомные компоненты/шаблоны/модули переставали работать после обновления Битрикса (может быть 1 или 2 раза были, но я этого не помню).

Comments

[Станислав Б]

Все же Битрикс24 отличается от битрикса который для сайтов. и гораздо хуже пригоден для внесения изменений. Я наоборот за несколько лет разработки на Битриксе не один раз наблюдал проблемы после обновлений.

[Сергей]

>Вы уверены, что правильно пишете код, следуя рекомендациям Битрикса?
Чтобы ответить на вопрос, сначала надо понять, про что именно идет речь? URL?

>За несколько лет разработки на Битриксе ни разу не было ситуации
Насколько я знаю, такая ситуация наблюдается у всех моих знакомых заказчиков, которые сейчас или когда-то ранее обслуживались даже крупными интеграторами/разработчиками битрикса. Каждое обновление гарантированно влечет за собой какие то поломки, восстановление, часы работы.

И вопрос не только про битрикс был. Вопрос не про стиль программирования под конкретный битрикс, вопрос про автоматизацию проверки работоспособности в разных CMS.

[Danbka]

Чтобы ответить на вопрос, сначала надо понять, про что именно идет речь? URL?

https://dev.1c-bitrix.ru/learning/course/index.php...

Собственные компоненты и шаблоны - в собственном пространстве имен. Кастомизируя штатные компоненты и шаблоны, разрабатывая собственные, размещайте их в собственном пространстве имен. При обновлении системы все внесенные изменения в пространстве bitrix затираются.

вопрос про автоматизацию проверки работоспособности в разных CMS.

Тесты. Без них никуда.

Но я буду настаивать на том, что ситуация "все сломалось после обновления Битрикса" - это ненормальная ситуация, такого быть не должно.

[Сергей]

Danbka, Любой программист профессионально растет всю жизнь. Код, написанный 5 лет назад, всегда отличается от кода, написанного сегодня. Какие баги и костыли могли быть в коде за несколько лет разработок не вспомнит никто и никогда. Переписывать под современные знания то, что не сломалось, тоже никто не будет. Поэтому задача и вопрос остались теми же: как автоматизировать проверку каждой доработки?