Как и зачем вы используете Cypress, если он не поддерживает ни Safari, ни мобильных браузеров?

Question

[Ryberm]

Заметил, что многие хвалят Cypress, и в вакансиях он част.
Мол, за этим будущее, а Selenium пора уже потихоньку на полочку класть.
Я-то только за, мне нравится этот фреймворк.

Но все же есть очень важный момент, в котором моя логика как обычно расходится с мнением большинства.
Cypress не поддерживает Safari и даже не особо собирается его поддерживать.
Заходим сюда и видим крестик и "Not under active development".

А ведь на мой взгляд именно Safari нуждается в автоматизации прежде всего. В Chrome/FF можно и руками потестить. А вот Safari - ну если у тебя не макбук, то на практике ты, скорее всего, не будешь даже заходить на свой сайт из Safari, не то что тестить. Кроме того, в Safari наиболее часто не работает то, что работает в других браузерах (ну кроме IE - браузера, который уж точно надо на полку).
То же самое и мобильные браузеры. Опять же, тестить нужно: оно иногда преподносит сюрпризы. Но - сложно. Сильно устают пальцы и глаза, нужен отдельный человек. Или отдельный "робот", заменяющий человека.

Cypress не может ни в то и ни в то.
И поэтому вопрос - а зачем, собственно, вы его используете? И как вы его используете? У вас проект, в котором не нужно поддерживать ни Safari, ни мобильные браузеры? Что я не так понимаю, в чем ошибка моей логики?

Answer 1

[Василий Банников]

Про мобильное и сафари - оно в первую очередь нуждается в тестировании, но не обязательно в автоматизированном.
И то только если много пользователей сайта/ЦА на нём сидит.

По тому тут вопрос стоит не тем боком.

Автоматизация, кмк, в первую очередь нужна для прогона большого количества тестов, которые в принципе за
адекватное время человек не сможет пройти. Ну или устанет и наделает ошибок.
А всякие приколы, которые всплывают на всяких экзотичных браузерах - их можно и руками проверить

Comments

[Ryberm]

И то только если много пользователей сайта/ЦА на нём сидит.

Или если пользователи ценные, влиятельные люди, и даже 1 пользователь ценен.
Например - в интернет-магазинах.
Есть магазины где покупка в принципе не может быть дешевой. Ну и ты не знаешь на сколько купит тот, у кого яблоко. Может он со своего iPhone зайдет и закажет дошираков на 500 руб, как это часто бывает, а может возьмет мотоцикл за полляма.
Или - какой-то малоприбыльный, "затянувшийся стартап", где много инвесторов, мало всех остальных, а у инвесторов разные компы включая яблочные.

но не обязательно в автоматизированном.

Но на мобильных - очень желательно. Труд адский. Даже верстку проще будет тестить наделав кучу скриншотов автоматом и затем рассматривая их, чем тыкая вручную.

Ну и про

адекватное время

я бы не сказал, что Cypress работает быстро.
На ровном месте отжирает 30-60 сек (будучи запущен на железе, где это можно вручную прокликать быстрее). Типа - пройти по 100 строкам tr и проверить суммы в ячейках. И это 30-60 сек. Начинаешь думать, что не так сделал, в чем оптимизировать. Оказывается, что и не в чем... но вот логи надо попробовать убрать. Вставляешь { log: false } везде где можно, и опа, уже 10-20 сек. А логов этих там всего-то штук 300. Ну куда это годится?

Ну или устанет и наделает ошибок

Наделать ошибок при ручном e2e-тестировании, кстати, весьма сложно. В 80% ты просто тыкаешь как пользователь, и в 80% случаев это тыкание достаточно простое, потому что UX априори должен быть как можно проще.
С усталостью плохо тестить разве что UI/UX, потому что все кажется неудобным и бесячим.

[Алексей Ярков]

Ryberm, ну вот вы описали кучу минусов Cypress. Какой ответ на свой вопрос вы хотите? Я не докапываюсь, просто интересно )) Сейчас выглядит как: "Я сомневаюсь, уговорите меня".

[Ryberm]

Алексей Ярков, а оно примерно так и есть) Selenium-то мне не нравится, старый он, и разворачивать неудобно. Это тоже очень значительные минусы.

[Алексей Ярков]

Ryberm, тогда вот почитайте ))
5 причин почему Playwright лучше Cypress

[Василий Банников]

Ryberm, посмотри тогда на playwright - он проще чем селениум и быстрее.
Правда поддержки мобильных браузеров вроде нет ещё.

[Ryberm]

Василий Банников, и поддержки playwright с safari во многих облачных сервисах типа browserstack тоже нет еще. Просто playwright можно, на маке можно, safari почему-то нет. Вот думаю, а появится ли она. Полгода назад я думал, что появится поддержка safari в cypress, и соответственно в облачных сервисах тоже. Сейчас вижу, что cypress даже не работает над тем, чтобы она там появилась.

[Ryberm]

Алексей Ярков, а тут проблема в том, что хотя сам playwright и поддерживает safari, но вот в облачных сервисах типа browserstack эта связка (именно с safari) почему-то недоступна.
Хорошо, если она появится в будущем. А если нет? Она нужна, за неимением физических устройств Apple и нежеланием их иметь :) Понятно, что есть еще VPS с macOS и можно тестить там, если совсем припрет. Но это тоже не очень все-таки...

[Василий Банников]

Ryberm, а зачем browserstack, если можно просто на любой машине запустить?
Playwright даже на винде может скачать WebKit и в нём тестить

[Ryberm]

Василий Банников, где webkit и где safari? В моем проекте много специфики, webassembly например. Точно оно будет работать в safari, если работает в webkit? :)

[Василий Банников]

Ryberm, вот тут уже не подскажу)
В теории можно попробовать арендовать непосредственно макось, чтобы на ней запускать.

[Ryberm]

Василий Банников, приходилось арендовать, есть такой опыт, только по финансам это немного боком выходит. Browserstack дешевле, а то и вообще бесплатно, аккаунты только регать ) да-да, я занят этим ужасным делом, но собираюсь купить. Ну да ладно, гляну playwright.