Задать вопрос
vabka

Василий Банников

Ответы пользователя по тегу Тестирование ПО

  • Что такое техника "матрица трассировки"?

    vabka
    @vabka
    Лучше спросить там, где ты этот термин услышал, ибо не существует такого термина.
    Из того что нагуглил, возможно это искаверканная "Матрица трассируемости" / "матрица трассировки требований".
    К математике никакого отношения не имеет.
    Коротко - табличка, в которой ты сопоставляешь изначальные требования с документацией и тест-кейсами, которые эти требования должны учитывать.
    Ответ написан
    Комментировать
    Комментировать

  • Как тестировать оплату по QR-коду тестовой картой?

    vabka
    @vabka
    Можно сгенерировать qr код для тестовой оплаты.
    Ответ написан
    2 комментария
    2 комментария

  • Как проводится нагрузочное тестирование на проекте?

    vabka
    @vabka Куратор тега Веб-разработка
    У нас на проекте нагрузочное обязательно проводят перед каждым релизом как часть регрессионного тестирования.

    Но у нас и соглашения с клиентами есть по скорости ответов, отсюда и необходимость проверять.

    Думаю, если задать вопрос типа "а зачем в проекте нагрузочное тестирование", то тогда и по периодичности всё станет ясно.

    Смотрим в тестах максимальную "прочность", сколько RPS можно держать без значительной деградации и стабильность - можем ли мы длительное время держать достаточно большую нагрузку (объем смотрим по пиковой нагрузке в проде)

    + к этому ещё и постоянный мониторинг времени ответа на проде.

    Регресс, естественно, происходит в окружении близком к продовому.

    + ещё сейчас затащили нагрузочное тестирование в ci - там только смотрим, есть ли деградация по максимальной производительности. Там тестирования происходит уже в очень далёком от прода окружении, зато часто (на каждый MR)
    Ответ написан
    Комментировать
    Комментировать

  • Как сымитировать ошибку 502?

    vabka
    @vabka
    Charles, mitmproxy, burpsuite, или любой другой их аналог на твой вкус.
    С помощью них можно перехватить запрос сайта/браузера к серверу и подменить ответ на такой, какой тебе нужен.

    да, я так понял, что нужно описать порядок действий, которые должны привести к 502 ошибке

    А вот и не угадал.
    502 ошибка говорит о проблемах в инфраструктуре. Действия пользователя к ней приводить не должны в принципе.

    502
    The server was acting as a gateway or proxy and received an invalid response from the upstream server
    Ответ написан
    Комментировать
    Комментировать

  • Почему возникает проблема при применении pict для попарного тестирования?

    vabka
    @vabka
    А с чего вы взяли, что в качестве разделителя у вариантов используется вертикальная черта?
    В примере используется запятая.
    Если в вашем примере заменить вертикальную черту на запятую, то всё сходится:
    Location: X_dir, smb_host, dot_dir, host_dir, null, empty, slashes, win257, linux4097, russian
Existence: Yes, No
Access_rights: Full, Directory, None, NoContent
OS_family: Win32, Win64, Linux32, Linux64
Encoding: UTF8, UTF16, OEM

if [Location] = "smb_host" then [OS_family] in {"Linux32", "Linux64"};
if [Location] = "X_dir" then [OS_family] in {"Win32", "Win64"};
if [Location] = "host_dir" then [Encoding] = "UTF8";
if [Location] = "win257" then [OS_family] in {"Win32", "Win64"};
if [Location] = "linux4097" then [OS_family] in {"Linux32", "Linux64"};
if [Existence] = "No" then [Access_rights] = "None";


    Location	Existence	Access_rights	OS_family	Encoding
slashes	Yes	Full	Win32	UTF8
linux4097	Yes	None	Linux64	UTF16
smb_host	Yes	NoContent	Linux32	OEM
null	Yes	Directory	Win64	UTF16
russian	Yes	NoContent	Linux64	UTF8
X_dir	Yes	Directory	Win32	OEM
empty	No	None	Win64	OEM
X_dir	Yes	NoContent	Win32	UTF16
host_dir	Yes	NoContent	Win64	UTF8
empty	Yes	Full	Linux32	UTF16
dot_dir	No	None	Linux32	UTF8
null	Yes	Full	Linux64	OEM
X_dir	Yes	Full	Win64	UTF8
slashes	Yes	NoContent	Linux64	UTF16
russian	Yes	Full	Win32	UTF16
dot_dir	Yes	NoContent	Linux64	UTF16
null	Yes	NoContent	Win32	UTF8
null	No	None	Win32	UTF16
host_dir	Yes	Directory	Linux64	UTF8
russian	Yes	Directory	Linux32	OEM
host_dir	No	None	Linux32	UTF8
dot_dir	Yes	Directory	Win64	OEM
russian	No	None	Win64	OEM
linux4097	Yes	Full	Linux32	UTF8
win257	Yes	None	Win64	UTF16
dot_dir	Yes	Full	Win32	UTF16
slashes	No	None	Win64	OEM
slashes	Yes	Directory	Linux32	UTF16
empty	Yes	Directory	Linux64	UTF8
win257	Yes	Directory	Win32	UTF8
X_dir	No	None	Win32	OEM
linux4097	Yes	Directory	Linux64	OEM
smb_host	No	None	Linux64	UTF8
smb_host	Yes	Directory	Linux64	UTF16
linux4097	Yes	NoContent	Linux32	UTF8
empty	Yes	NoContent	Win32	UTF16
smb_host	Yes	Full	Linux32	OEM
host_dir	Yes	Full	Win32	UTF8
linux4097	No	None	Linux64	UTF16
win257	Yes	NoContent	Win64	OEM
win257	No	None	Win32	UTF16
win257	Yes	Full	Win32	OEM
null	Yes	Full	Linux32	UTF16
    Ответ написан
    1 комментарий
    1 комментарий

  • Регресс или регрессивный?

    vabka
    @vabka
    "регрессивный" и "регрессионный" - это разные слова
    РЕГРЕССИ́ВНЫЙ, -ая, -ое; -вен, -вна, -вно. Идущий назад в своем развитии, ведущий к регрессу. Регрессивные процессы.



    Регрессионное тестирование — собирательное название для всех видов тестирования программного обеспечения, направленных на обнаружение ошибок в уже протестированных участках исходного кода

    Ответ написан
    Комментировать
    Комментировать

  • Как тестировать в авторежиме визуальные дефекты?

    vabka
    @vabka
    Это называется скриншотные тесты. Собственно также в селениуме делаете прогон, а в ключевых точках делаете скриншоты.
    Потом сравниваете с эталоном / предыдущим прогоном.
    Готовые инструменты для этого уже есть
    Ответ написан
    Комментировать
    Комментировать

  • Тест-кейсы и чек листы?

    vabka
    @vabka
    На одну историю можно завести много тест-кейсов, если это необходимо.
    Ответ написан
    Комментировать
    Комментировать

  • В чём смысл писать функциональные тесты на Java, если есть postman и другие инструменты?

    vabka
    @vabka
    Смысл - если уже есть компетенции на жаве, а в постмане нет.
    Ответ написан
    1 комментарий
    1 комментарий

  • Как написать тест-кейс для кнопки?

    vabka
    @vabka
    1. Что эта кнопка в принципе есть
    2. Что при одиночном нажатии, собственно, происходит только то что перечислено
    3. При повторном нажатии происходит -> ???
    4. При длительном удержании происходит -> ??? (вообще кнопка срабатывает на клик или на отпускание?)
    5. Раз уж это какой-то сайт, то можно ещё посмотреть адаптивность и accessability - при изменении размеров окна, текст в кнопке остаётся читабельным и не уходит за границы и что скринридеры корректно распознают эту кнопку. Опять же смотрим, что всё ведёт себя так, как ожидает дизайнер.
    Можно даже через f12 добавить более длинный текст (чтобы п6 всегда нормально выглядел)
    6. А на этом корпоративном портале есть несколько языков? Если это международная фирма, то вполне может быть - тогда проверяем ещё наличие переводов на всех вариантах.
    7. У кнопок кроме состояния нажата/не нажата есть ещё состояние hover - следует убедиться, что при наведении мыши на кнопку - она реагирует соответствующим образом, например - меняет цвет. (как задумал дизайнер - а если не задумал, что это повод завести баг, чтобы дизайнер придумал)
    Сюда же можно вспомнить про disabled - а что если мы хотим убрать возможность нажатия на кнопку? Пользователь должен понимать, что она ненажимаемая.
    Ответ написан
    2 комментария
    2 комментария

  • Нужна ли математика для QA Automation engineer?

    vabka
    @vabka
    Да, нужна.
    Какая именно математика - зависит от конкретной предметной области.
    Как я понимаю, в ручном тестировании математика абсолютно не задействуется

    Что там что там математика используется примерно одна и та же.
    Ответ написан
    Комментировать
    Комментировать

  • Правильно-ли я пишу чек лист?

    vabka
    @vabka
    Вроде нормально
    Ответ написан
    Комментировать
    Комментировать

  • Нужно протестировать конвертер температуры, используя техники тест-дизайна?

    vabka
    @vabka
    Ну тебе же прямо в условиях даже подсказу дали - "сосредоточтесь на вводимых значениях".
    Значит нужно смотреть на граничные значения.
    Из самых очевидных:
    -1, 0, +1.
    Из неочевидных - можно попробовать посмотреть на формулы, которыми обычно из одной шкалы в другую переводят и на определения каждой из шкал. (например в случае кельвина - он никогда не может быть меньше нуля вроде как)
    Также можно посмотреть на разные потенциально проблемные варианты:
    1. Добавлять пробелы в начало/конец/середину
    2. Добавлять незначащие нули перед целой и после дробной части
    3. (пробовать) Добавлять лишние разделители знаков
    4. Пробовать вставлять валидное или невалидное значение через ctrl+v
    5. Пробовать вводить что-то кроме цифр, разделителя, и знака
    6. Пробовать вводить несколько плюсов или несколько минусов
    7. Пробовать вводить плюс или минус не перед числом а после или в середине.

    Ещё можно попробовать вводить с дробной и без дробной части. Указывать запятую или точку для отделения дробной части.

    Проверить нужно граничные значения на всех комбинациях "из-в"

    Чтобы не получить комбинаторный взрыв - попробуй использовать pairwise подход.
    Ответ написан
    2 комментария
    2 комментария

  • Почтовый сервис с доступом к содержимому писем по API?

    vabka
    @vabka
    Чем IMAP как протокол не угодил?
    Ответ написан
    Комментировать
    Комментировать

  • Чек лист тестирования админки?

    vabka
    @vabka
    Нет.
    Если ваша админка сделана по готовому шаблону - вероятно он уже протестирован без вас.

    Если это не шаблон, то значит он более-менее уникален и его надо тестировать с нуля.

    Если вам нужно, чтобы кто-то протестировал за вас - есть десяток разных бирж фриланса и пара сотен компаний, которые за ваши деньги это сделают и выдадут подробный отчёт
    Ответ написан
    3 комментария
    3 комментария

  • Какие существуют библиотеки для автотестов телеграмм-бота на python?

    vabka
    @vabka
    Проще всего - замокать всё что связано с telegram api и тестировать работу твоего кода, а не серверов телеги.
    Ответ написан
    Комментировать
    Комментировать

  • Может ли инвалид без руки работать тестировщиком игр?

    vabka
    @vabka
    Не знаю, какое конкретно требования выдвигаются, но поспешу огорчить по поводу

    очень любит играть в различные комп. игрушки.

    Тестировать игры и играть в них - это очень разные вещи.
    При тестировании нет абсолютно ничего, что радует при обычной игре.

    Вообще, если этот человек может нормально пользоваться компьютером и может играть в игры с использованием стандартной периферии, которые придётся тестировать, то да - какихто проблем с работой быть не должно.

    Но я бы не зацикливался именно на тестировании игр в частности и на тестировании вообще, ибо есть много других профессий, в которых не обязательно иметь обе руки.
    Ответ написан
    2 комментария
    2 комментария

  • Как правильно составить тест-кейс?

    vabka
    @vabka
    Тест кейс - это как минимум:
    1. Название
    2. Шаги для воспроизведения
    3. Ожидаемый результат

    Ещё могут быть разные предусловия, например "в системе зарегистрирован пользователь X".

    Это всё рассматривается в первых главах любой книги/учебника по тестированию.
    Ответ написан
    Комментировать
    Комментировать

  • В чем практический смысл тестирования?

    vabka
    @vabka

    Какие тесты нужно было сделать, чтобы предотвратить этот баг?

    Такие дефекты, обычно, отлавливаются при помощи ручного тестирования.

    Но искать визуальные баги в тексте в играх - это очень дорогое занятие, тк нужно сценарии прогонять на десятках разных конфигураций (разрешение экрана/масштабирование интерфейса/язык)
    => поиск такого бага до выпуска новой версии будет занимать много времени => это будет очень дорого.
    Что вообще не соотносится с его критичностью.

    Ещё можно попробовать скриншотное тестирование - может быть будет дешевле в плане человеческих ресурсов, но всё равно очень дорого в плане железных ресурсов и не гарантирует надёжность (скриншотные тесты известны своей нестабильностью), да и не очень популярны они в играх (ибо инструментов нет), и из-за обилия анимаций они будут очень сложны в поддержке.

    А так да - тут скорее архитектурная проблема и дизайнер не учёл, как должно работать переполнение строки в этом случае.


    Так в чем практический смысл тестирования? Где оно нужно, когда даже крупнейшие компании допускают явные баги на главном экране игры (а там про команды с миллионными бюджетами).

    Ты не учитываешь множество других, более критичных дефектов, которые не попали в релиз как раз благодаря тестированию.

    Игры тут не самый лучший пример, тк их тестирование несколько отличается от тестирования обычного ПО своей количественной (очень много чего может сломаться) и качественной (много что сложно проверить) сложностью, а также количеством различных граничных значений.
    + в играх есть рандом, который может в неожиданных местах всё сломать.
    Ответ написан
    Комментировать
    Комментировать

  • Правильно ли я понимаю разницу Unit/интеграционных/e2e тестов?

    vabka
    @vabka
    Интеграционные тесты - иногда могут быть как юнит тесты, но без моков (или почти без моков)

    При e2e могут мокаться некоторые внешние зависимости (платёжная система например)

    В остальном вроде всё так.
    Ответ написан
    Комментировать
    Комментировать