Регресс

54 вопросов · Софт-скиллы

• Сколько примерно проверок было в регрессионном наборе тест-кейсов на твоём проекте? задавался 10× low
• Сколько времени занимал регресс и сколько тест-кейсов в него входило? задавался 9×
• Кто формировал регрессионный набор тестов и как он поддерживался в актуальном состоянии? задавался 8×
• Проводили ли регрессионное тестирование перед релизом? задавался 7×
• Как было организовано регрессионное тестирование на вашем проекте? задавался 6×
• Участвовали ли вы в формировании скоупа регрессионного тестирования? задавался 5× low
• Как у вас проходило регрессионное тестирование? задавался 5×
• Как прорабатывался бэклог существующих дефектов? задавался 4×
• Кто в вашей команде отбирал тест-кейсы для регрессионного тестирования? задавался 4×
• На что ты ориентируешься при выборе тест-кейсов для включения в регресс? задавался 4×
• 50–70 тест-кейсов на регрессе — это на троих или на четверых тестировщиков? задавался 3×
• Есть ли у вас опыт проведения регрессионного тестирования? задавался 3×
• На регресс нужно два дня, но до релиза остался только один день, а релиз перенести нельзя. Что будешь делать? задавался 3×
• После каждой задачи вся новая функциональность добавлялась в регресс или проводился отбор, чтобы не перегружать регрессионный набор? задавался 3×
• Что происходит, если в ходе регрессионного тестирования часть тест-кейсов не прошла? задавался 3×
• Была ли ситуация, когда на регрессе обнаруживали критический или блокирующий баг? Как действовали? задавался 2×
• Регресс у вас был полным (весь проект) или только по фичам текущего спринта? задавался 2×
• Бывало ли, что на регресс не хватало времени и вы физически не успевали пройти все тесты? задавался 2×
• Была ли возможность оптимизировать или автоматизировать регрессионное тестирование? задавался 2×
• В обычной ситуации регресс всегда проводился сначала на тестовой среде, а затем на препроде? задавался 2×
• Запускались ли автотесты в регрессионном тестировании на твоём проекте? задавался 2×
• Как определялось, какой функционал включается в регрессионный набор, и согласовывалось ли это с кем-то? задавался 2×
• Как у вас в команде определялся объём регрессионного тестирования — по фиксированному набору или лид решал каждый раз? задавался 2×
• Как часто изменяется функционал и как часто приходится обновлять регрессионные тест-кейсы? задавался 2×
• Как часто проводится регресс и как часто выполняется релиз на твоём проекте? задавался 2×
• После проведения регресса и релиза обнаружен дефект — ты его пропустил. Какие могут быть причины и что нужно сделать? задавался 2×
• При добавлении в регресс-пак ты включаешь все тест-кейсы по задаче или только часть? задавался 2×
• Ты проводишь регрессионное тестирование, и в этот момент прилетает критичный баг с промышленного контура. Что будешь делать? задавался 2×
• Чек-листы тоже попадают в регресс как чек-листы или вы их потом детализируете до тест-кейсов? задавался 2×
• PM требует срочного релиза сегодня, но полный регресс занимает три дня, а другие тестировщики недоступны. Что ты будешь делать? задавался 1×
• Был ли у вас фиксированный цикл регрессионного тестирования, привязанный к расписанию релизов? задавался 1×
• Два-три дня на регресс — это нормальный срок, по твоей оценке? задавался 1×
• Если в регрессе находили баги, каков был процесс их разбора и принятия решений? задавался 1×
• Если релиз переносили из-за найденного бага, после исправления вы прогоняли весь регресс заново или только проверяли область вокруг исправления? задавался 1×
• Есть ли у вас инструменты анализа влияния изменений? Проводится ли импакт-анализ, и кто его проводит? задавался 1×
• Как вы формируете объём регрессионного тестирования: пересобираете набор под каждый релиз или у вас статичный набор проверок? задавался 1×
• Как смоук-тесты выделялись из общего набора тестов? задавался 1×
• Как ты решал, какие сценарии добавлять в регресс-пак, а какие нет — ты добавлял всё по каждой новой фиче или как-то приоритизировал? задавался 1×
• Когда приходит небольшая задача, ты проверяешь только конкретный кусочек или также смотришь на смежный функционал, который мог быть затронут? задавался 1×
• Кто составлял регрессионный пак? задавался 1×
• После твоего релиза упал раздел, который ты не тестировала. Коллеги сразу приходят к тебе. Как ты отреагируешь и что будешь делать? задавался 1×
• Почему ты не рассматриваешь сокращение объёма тестирования (риск-ориентированный подход) как вариант при нехватке времени? задавался 1×
• Почему у вас такая большая загрузка тестировщиков? Это из-за большого объёма регрессов или чего-то ещё? задавался 1×
• Расскажите про процесс тестирования в двухнедельном спринте: когда проводился регресс, как он проходил, создавались ли планы тестирования? задавался 1×
• Расскажите, как вы формировали регрессионную модель (регрессионный пак), как её актуализировали и кто делал ревью? задавался 1×
• Регресс-сьют ты сама составляешь? задавался 1×
• Ситуация: в каждом релизе воспроизводится одна и та же ошибка на продакшене, хотя смок-тест проходит. Что можно сделать, чтобы предотвратить повторение этой ошибки? задавался 1×
• Сколько времени в среднем занимал регресс? задавался 1×
• Что вы делали, если на регрессе обнаруживались баги? задавался 1×
• Что делала команда тестирования, если до регресса оставалось свободное время (например, целый рабочий день у нескольких человек)? задавался 1×
• Что делать, если понимаешь, что не успеваешь закончить весь регресс до релиза? задавался 1×
• Что значит «всё соответствует запланированному»? Как это измерить в реальных артефактах тестирования? задавался 1×
• Что происходит с задачей после того, как она прошла регресс? задавался 1×
• Что ты будешь делать, если нет дополнительных ресурсов, а регресс нужно пройти за 2–3 дня и ты физически не успеваешь? задавался 1×