Проблемы UI автотестов [NoBugs WTF PRO уровень]
0 likes136 views
Документ описывает проблемы UI автотестов в веб-тестовом фреймворке, включая мигающие и медленные тесты. Основное внимание уделяется причинам мигающих тестов, таким как некорректные ожидания и разница окружений, а также факторам, способствующим замедлению тестов. В конце подчеркиваются ключевые метрики для успешного тестирования, такие как низкий уровень нестабильности и быстрое время выполнения тестов.
![Проблемы UI автотестов
Web Test Framework с нуля [PRO]
NoBugs](https://image.slidesharecdn.com/ui-241012141301-b2028d8c/85/UI-NoBugs-WTF-PRO-1-320.jpg)
![7
ШАГ 2: МИГАЮЩИЕ ТЕСТЫ
● Поиск элемента
byCSS(“button”)
byCSS(“button[onclick=”showAlert()”])
byXPath(“//button”)](https://image.slidesharecdn.com/ui-241012141301-b2028d8c/85/UI-NoBugs-WTF-PRO-7-320.jpg)
![9
ШАГ 2: МИГАЮЩИЕ ТЕСТЫ
● Поиск элемента
data-test аттрибуты
без других элементов
не byCss(“a[data-test=”button”]”)
не byXPath(“//a[data-test=”button”]”)
byAttribute(“data-test”, “button”)](https://image.slidesharecdn.com/ui-241012141301-b2028d8c/85/UI-NoBugs-WTF-PRO-9-320.jpg)
Проблемы UI автотестов [NoBugs WTF PRO уровень]
- 1. Проблемы UI автотестов Web Test Framework с нуля [PRO] NoBugs
- 2. Как избежать проблем при написании UI автотестов? 2
- 3. Надо знать врага в лицо! 3
- 4. 4 ШАГ 1: ПРОБЛЕМЫ ● Мигающие тесты ● Медленные тесты
- 5. 5 ШАГ 2: МИГАЮЩИЕ ТЕСТЫ Популярные причины: ● Поиск элемента ● Воспроизведение состояния ● Некорректное ожидание ● Разница окружений
- 6. 6 ШАГ 2: МИГАЮЩИЕ ТЕСТЫ ● Поиск элемента HTML
- 7. 7 ШАГ 2: МИГАЮЩИЕ ТЕСТЫ ● Поиск элемента byCSS(“button”) byCSS(“button[onclick=”showAlert()”]) byXPath(“//button”)
- 8. 8 ШАГ 2: МИГАЮЩИЕ ТЕСТЫ ● Поиск элемента byAttribute(“data-test”, “test_button”)
- 9. 9 ШАГ 2: МИГАЮЩИЕ ТЕСТЫ ● Поиск элемента data-test аттрибуты без других элементов не byCss(“a[data-test=”button”]”) не byXPath(“//a[data-test=”button”]”) byAttribute(“data-test”, “button”)
- 10. 10 ШАГ 2: МИГАЮЩИЕ ТЕСТЫ ● Поиск элемента ПРАВИЛО внутри команды: НЕТ data-test аттрибутa -> НЕТ элемента
- 11. 11 ШАГ 2: МИГАЮЩИЕ ТЕСТЫ ● Воспроизведение состояния КАК КЛИКАЕТ ЧЕЛОВЕК? КАК КЛИКАЕТ МАШИНА?
- 12. 12 ШАГ 2: МИГАЮЩИЕ ТЕСТЫ ● Воспроизведение состояния - проверяем состояние - повторяем
- 13. 13 ШАГ 2: МИГАЮЩИЕ ТЕСТЫ ● Воспроизведение состояния try(3 times) { click() element.shouldBe(visible) }
- 14. 14 ШАГ 2: МИГАЮЩИЕ ТЕСТЫ ● Некорректные ожидания ТИПЫ ОЖИДАНИЙ: ● явные (я тут жду) ● неявные (ты не знал, а я жду)
- 15. 15 ШАГ 2: МИГАЮЩИЕ ТЕСТЫ ● Некорректные ожидания - Не ждем совсем - Ждем дольше, чем нужно - Ждем хардкорно (не смотря на состояние)
- 16. 16 ШАГ 2: МИГАЮЩИЕ ТЕСТЫ ● Некорректные ожидания КЕЙС: кликнуть на кнопку - сразу кликаем - падаем - ждем загрузку и кликаем - возможно, падаем - кликаем через 5 мин - долго или возможно, падаем
- 17. 17 ШАГ 2: МИГАЮЩИЕ ТЕСТЫ ● Некорректные ожидания КЕЙС: кликнуть на кнопку КОРРЕКТНОЕ ОЖИДАНИЕ: - ждем видимость кнопки и кликаем
- 18. 18 ШАГ 2: МИГАЮЩИЕ ТЕСТЫ ● Разница окружений ПОДДЕРЖКА: - разных браузеров - разных расширений
- 19. 19 ШАГ 2: МИГАЮЩИЕ ТЕСТЫ ● Разница окружений В ИДЕАЛЕ: не допускать разные локаторы В РЕАЛЬНОСТИ: масштабировать разработку по платформам
- 20. 20 ШАГ 3: МЕДЛЕННЫЕ ТЕСТЫ ● Долгий старт приложения ● Долгое выполнение тестов
- 21. 21 ШАГ 3: МЕДЛЕННЫЕ ТЕСТЫ ● Долгий старт приложения - кэш - подготовленные артефакты сборки - рефакторинг способа разворачивания
- 22. 22 ШАГ 3: МЕДЛЕННЫЕ ТЕСТЫ ● Долгое выполнение тестов - синхронное выполнение - неэффективные ожидания - неэффективная декомпозиция
- 23. 23 ШАГ 4: КЛЮЧЕВЫЕ МЕТРИКИ ЦЕЛЬ: - низкий flakiness rate - быстрый test pipeline time
- 24. Проблемы UI автотестов: 24 СЕГОДНЯ МЫ УЗНАЛИ Шаг 1: Проблемы Шаг 2: Мигающие тесты Шаг 3: Медленные тесты Шаг 4: Ключевые метрики
- 25. ГНАЛИ ПОГНАЛИ ПОГНАЛИ ПОГНАЛИ ПОГНАЛИ ПОГНАЛИ ПОГНАЛИ ПОГНАЛ АЛИ ПОГНАЛИ ПОГНАЛИ ПОГНАЛИ ПО ГНАЛИ ПОГНАЛИ ПОГНАЛИ ПОГНАЛИ И ПОГНАЛИ ПОГНАЛИ ПОГНАЛИ ПОГН НАЛИ ПОГНАЛИ ПОГНАЛИ ПОГНАЛИ П ОГНАЛИ ПОГНАЛИ ПОГНАЛИ ПОГНАЛИ ГНАЛИ ПОГНАЛИ ПОГНАЛИ ПОГНАЛИ АЛИ ПОГНАЛИ ПОГНАЛИ ПОГНАЛИ ПО ГНАЛИ ПОГНАЛИ ПОГНАЛИ ПОГНАЛИ ПОГНАЛИ ПОГНАЛИ ПОГНАЛИ ПОГНАЛ АЛИ ПОГНАЛИ ПОГНАЛИ ПОГНАЛИ ПО ГНАЛИ ПОГНАЛИ ПОГНАЛИ ПОГНАЛИ И ПОГНАЛИ ПОГНАЛИ ПОГНАЛИ ПОГН ПОГНАЛИ!