Как Вы оцениваете качество своего продукта?

Question

[AoD314]

Опишите пожалуйста какие методики вы используете, чтобы оценить на сколько ваш продукт готов для того, чтобы его можно было показывать людям?

Например:

• Продукт готов для Beta тестирования — это покрытие тестами более 30%.
  
• Продукт готов для RC — это когда ходят больше 70% тесты.
  

Comments

[AoD314]

Про фичи понятно, что не разумно выпускать релиз, без базовой функциональности.
Вопрос в том какие метрики используете(с цифрами) для оценки качества получившегося ПО.
Например: покрытие кода, количество пройденых тестов, количество ворнингов, дополнительные инструменты, профилировки(hotpath/...) и т.д.

Answer 1

[EugeneOZ]

Продукт готов для бета-тестирования, когда сделаны все фичи, запланированные на бету и все юнит-тесты проходят (30% покрытия это как-то слабовато).

Answer 2

[Wott]

RC — это когда фичи для релиза уже все есть, а тестирование еще не закончено
Бета — это когда базовый функционал протестирован, но второстепенные фичи еще не готовы или не зафискированы.

А отдавать на бетатестирование надо как можно раньше, потому что фидбэк от пользователей — неоценимая штука.

Answer 3

[Виталий Желтяков]

Элементарно — беру одного своего друга, сажаю компьютер, показываю свой продукт и разрешаю ему делать всё что пожелает. Далее остаётся следить за реакцией. Если за несколько минут он находит ошибки или ему что-то не нравиться, то это только альфа-версия. Если всё гладко, то это бета.

Если у нас уже бета версия, то беру друга уже понимающего в данной технологии. И повторяю тоже самое, только здесь либо бета, либо RC.

Answer 4

[Xintrea]

Единственная правильная тактика оценки своего продукта — им надо самим пользоваться. Ежедневно. Тогда вы или ваша команда будете точно знать, готов ли продукт для рынка.

Comments

[la0]

Мы так внутреннюю тикетницу делали.
В результате мы не замечаем очевидного.
Например, человек, первый раз видящий систему может несколько минут искать кнопку создания тикета, хотя она на самом видном месте, примерно как «написать» в gmail.
Это как пример. Самая большая проблема в этом случае — «новому человеку разобраться нереально»