SQA Days 19 - Self-dependent QA Assessment - how to start (Самостоятельная оценка процессов - с чего начать)
Download as PPTX, PDF0 likes282 views
Документ описывает процесс самостоятельной оценки тестирования на проекте, начиная с определения целей и вопросов тестирования. Также рассматриваются метрики и KPI, используемые для оценки качества и своевременности тестирования, а также шаги по улучшению процессов на основе анализа данных. Автор делится опытом и советами по проведению аудита и корректировке процессов тестирования.
SQA Days 19 - Self-dependent QA Assessment - how to start (Самостоятельная оценка процессов - с чего начать)
- 1. Самостоятельная оценка процессов тестирования на проекте – с чего начать? Андрей Ладутько Май 20, 2016
- 2. АНДРЕЙ ЛАДУТЬКО Минск, Беларусь Тест-лид, Эксперт ЦКТ 8+ лет опыта Процессы, аудиты, тест-дизайн, личная эффективность SQA Days-12,13,15,16,17 докладчик SQA Days-18,19 – куратор ПК ISTQB Full Advanced Level ladutko_andrey@tut.by, andrey_ladutko@epam.com ladutko_andrey sof_minsk http://qastugama.blogspot.comp://qastugama.blog spot.com
- 3. 3CONFIDENTIAL ШАГ 0. ПРИНЯТИЕ В ЛЮБОЙ КОДЕ ВСЕГДА МОЖНО НАЙТИ ОШИБКИ. ЛЮБУЮ ТЕСТОВУЮ СТРАТЕГИЮ МОЖНО ЕЩЕ ЧУТЬ-ЧУТЬ УЛУЧШИТЬ
- 5. 5CONFIDENTIAL ШАГ 1. ОПРЕДЕЛЕНИЕ •Цель тестирования •Вопросы, на которые хотим получить ответ
- 7. 7CONFIDENTIAL 1 2 3 ПОЧЕМУ МЕТРИКИ Четкий Измеряемый Реалистичный
- 8. 8CONFIDENTIAL ОТВЕЧАЕМ НА ВОПРОС: КАКОЕ КАЧЕСТВО ТЕСТИРОВАНИЯ? • % ошибок, пропущенных в релиз (Defect Containment ) • % отклоненных дефектов (Decline Rate) • Число дефектов по типам и приоритетам (Total number of issues by types of testing VS priority) • Дэшборд (Testing Dashboard) • Количество открытых дефектов (Open Defects) • % рабочего времени по категориям (Total working time by categories)
- 9. 9CONFIDENTIAL ОТВЕЧАЕМ НА ВОПРОС: УСПЕВАЕМ ЛИ МЫ ПРОТЕСТИРОВАТЬ ВОВРЕМЯ? • Дэшборд (Testing dashboard) • Диаграмма выгорания (Burn Down Chart) • Число рабочих дней VS запланированное время на тестирование (Test team work Days remaining vs testing effort remaining) • Закрытые VS все дефекты (Total vs Closed) • Изменение количества дефектов по статусу (Defect progression by status and quality) • Количество дефектов на верификацию (# of defects to be verified)
- 10. 10CONFIDENTIAL ШАГ 2. ИЗМЕРЕНИЕ И АНАЛИЗ
- 11. 11CONFIDENTIAL ПРИМЕР ИЗМЕРЕНИЯ. DEFECT CONTAINMENT • Показывает % дефектов найденных до релиза VS общее количество дефектов • Считается после определенного периода после релиза • Невалидные баги не учитываются 𝑫𝒆𝒇𝒆𝒄𝒕 𝑪𝒐𝒏𝒕𝒂𝒊𝒏𝒎𝒆𝒏𝒕 = 𝒂𝒍𝒍 𝒅𝒆𝒇𝒆𝒄𝒕𝒔 − 𝒑𝒓𝒐𝒅𝒖𝒄𝒕𝒊𝒐𝒏 𝒅𝒆𝒇𝒆𝒄𝒕𝒔 𝒂𝒍𝒍 𝒅𝒆𝒇𝒆𝒄𝒕𝒔 ∗ 𝟏𝟎𝟎% Целевое значение – 95% NOTES
- 12. 12CONFIDENTIAL ПРИМЕР АНАЛИЗА ПРОПУЩЕННЫХ ДЕФЕКТОВ • Конфигурации и окружения • Вид тестирования (функциональный – нефункциональный) • Сценарий или ad-hoc • Компонента или модуль системы • Причина пропуска (регрессия, неясное требование, недостаток времени, апгрейд версии)
- 15. 15CONFIDENTIAL САМОСТОЯТЕЛЬНЫЙ АУДИТ – ИТОГОВАЯ СХЕМА Определение Коррекция Измерение ианализ Действие Цель тестирования Вопросы Метрики и KPI Сравниваем метрики до и после внедрения Улучшение – продолжаем Застой или ухудшение – ищем другие способы Метрики и KPI Шаги по улучшению Just do it!
Editor's Notes
- #4: ЛЮБОЙ - так задумано с ошибкой
- #5: TODO: ВАЖНО: кто работает с проектом (матрица 2на2, раскидываем заинт. лиц), кто влияет, кто заинтересован в проекте, «политика»
- #8: TIMING END – 10 MINUTES
- #12: Как измеряется Что показывает, на какие вопросы отвечает Пример воркфлоу: померяли – таргет – что ответили – как улучшили (story)