Organization of Automated Testing
Download as PPTX, PDF0 likes244 views
Документ обсуждает важность автоматизации тестирования, подчеркивая, что она позволяет сократить время и затраты на тестирование, увеличивая скорость и частоту его проведения. Он описывает стратегии планирования автоматизации, критерии выбора тестов и оценку успешности, акцентируя внимание на необходимости объективной оценки результатов. Основное внимание уделяется тому, что автоматизация должна приносить реальную пользу проекту и что важно правильно выбирать подход к ее внедрению.
Organization of Automated Testing
- 1. Organization of automated testing “TEST AUTOMATION IS ANY USE OF TOOLS TO SUPPORT TESTING”
- 2. О ЧЕМ ВЫ УСЛЫШИТЕ В БЛИЖАЙШИЕ 40 МИНУТ? 1. Зачем автоматизировать 2. Планирование и оценка: ● Стратегии автоматизации ● Планирование ● Критерии отбора тестов ● Оценка успешности автоматизации
- 3. ЗАЧЕМ АВТОМАТИЗИРОВАТЬ? 1. тестировать быстрее 2. больше (чаще можно прогонять, кроссбраузерно) 3. выгоднее 4. расти профессионально
- 4. ЧТО ЗНАЧИТ ТЕСТИРОВАТЬ ВЫГОДНЕЕ? Тест прогоняется вручную за 10 минут Нужно прогонять 2 раза в неделю До релиза осталось 3 месяца Заавтоматизировать тест - 4 часа (единоразовая трата времени) Анализ результатов автотеста - 2 минуты Оправдана ли автоматизация?
- 5. Сэкономили: 10*2(раза в неделю)*4(недели)*3(месяца)=240 Потратили: 4х60 + 2 минуты *2*4*3 = 288 Прибыль: - 48 минут Тест прогоняется вручную за 10 минут Нужно прогонять 2 раза в неделю До релиза осталось 3 месяца Заавтоматизировать тест - 4 часа (единоразовая трата времени) Анализ результатов автотеста - 2 минуты
- 6. Нужна ли автоматизация? 1. Проанализируйте цену в разрезе затраченного времени на разработку и поддержку 2. Не бойтесь сказать заказчику, что автоматизация для данного продукта не нужна
- 8. ПЛАНИРОВАНИЕ, ОЦЕНКА 1. Стратегии автоматизации 2. Поэтапность задач 3. Критерии отбора тестов (окупаемость) 4. Оценка успешности автоматизации
- 9. СТРАТЕГИИ АВТОМАТИЗАЦИИ Давайте попробуем Вижу цель Крупномасштабная операция Поэтапное наступление Хаос
- 10. ДАВАЙТЕ ПОПРОБУЕМ Опознавательные черты: Нет точной цели Пробуем разное Сфера применения: Впервые на проекте Нет опыта Залог успеха: Оценка результата
- 11. ВИЖУ ЦЕЛЬ Опознавательные черты: Точная постановка задачи Фокус на результате Сфера применения: Решение конеретных задач Есть собранная статистика Залог успеха: Регулярная оценка статуса и успешности
- 12. КРУПНОМАСШТАБНАЯ ОПЕРАЦИЯ Опознавательные черты: Выделение больших ресурсов на автоматизированное тестирование Сфера применения: Острая необходимость АТ Временный избыток ресурсов Залог успеха: Довести до результата
- 13. ПОЭТАПНОЕ НАСТУПЛЕНИЕ Опознавательные черты: Есть понятный вектор, но нет конкретики Сфера применения: Непостоянность ресурсов Неуверенность в применимости АТ Залог успеха: Приоритизация
- 14. ХАОС Опознавательные черты: Кто-то что-то делает, но что? Сфера применения: Непонимание проекта Непонимание возможностей АТ Залог успеха: Везение
- 15. УРОВНИ ТЕСТИРОВАНИЯ ● Пирамида показывает идеальный вариант распределения количества автотестов по категориям ● Каждый уровень характеризует количество тестов на уровне
- 17. СТАВИТЬ БОЛЕЕ МЕЛКИЕ ЗАДАЧИ
- 18. КРИТЕРИИ ОТБОРА ТЕСТОВ Окупаемость Неизменность Атомарность Независимость Безбажность Длительность использования
- 19. ОКУПАЕМОСТЬ Используется при сравнении разных тестовых наборов Помогает приоритизировать тесты Невозможно на начальной стадии (невозможно без какой-либо минимальной автоматизации - нет точных оценок для статистики)
- 20. ОЦЕНКА РЕЗУЛЬТАТОВ АВТОМАТИЗАЦИИ ПОЛЬЗА ОБЪЕКТИВНА: Автотесты никому не нужны Автозапуск никому не нужен Никому не нужна автоматическая отчетность Если это все не приносит РЕАЛЬНОЙ пользы проекту
- 21. ИЗМЕРЯЕМ ПОЛЬЗУ % сэкономленных затрат % покрытия рост скорости отклика (стали быстрее тестировать) повысили объемы тестирования (больше окружений, данных) Это можно сделать как 5 тестами, так и 5 000 тестами. Число автотестов не показывает НИЧЕГО. Это задачи, которые могут привести к улучшениям, а могут и не привести.
- 22. ПРИМЕР ПОЛЬЗЫ АВТОМАТИЗАЦИИ Вариант 1: Мы разработали 679 тестов Интегрировались с BTS У нас новая среда автозапуска Генерятся красивые отчеты Запускаемся 8 раз за день Вариант 2: Сроки релизного тестирования сокращены с 5 дней до 4 часов Регулярное тестовое покрытие увеличино с 8% до 27% Количество окружений для регрессионного тестирования увеличено с 1 до 16
- 23. Это здорово только если: Это РЕАЛЬНО нужно было проекту Этого нельзя было достичь более дешевыми и простыми способами Вариант 2: Сроки релизного тестирования сокращены с 5 дней до 4 часов Регулярное тестовое покрытие увеличино с 8% до 27% Количество окружений для регрессионного тестирования увеличено с 1 до 16 НО ДАЖЕ
- 24. ОЦЕНКА АВТОМАТИЗАЦИИ По целям По целям, а не задачам По НУЖНЫМ целям С учетом затрат ВАЖНО соотношение затрат автоматизации к ручному тестированию!★ На разработку ★ На поддержку ★ На анализ результатов
- 25. ИТОГ Нужна ли автоматизация Выбирем стратегию Планируем, что и как будем автоматизировать в зависимости от ресурсов и состояния проекта Не отклоняемся от намеченных задач Поэтапность Собираем статистику и оцениваем!!!
Editor's Notes
- #20: https://docs.google.com/spreadsheets/d/1RZjuiXCrY3ds3HUv_sOlWxBb37MkoVSffej7ieXkMxM/edit#gid=0