Тестируем мобильное приложение в суровых реалиях Интернета
0 likes1,248 views
Документ описывает тестирование мобильного приложения 2GIS v4 на различных платформах и выявление проблем, связанных с нагрузкой и конфигурацией серверов. Рассматриваются требования к инструментам для автоматизации тестирования, такие как Ansible, и предлагается структура playbook'ов для конфигурации серверов. В результате тестирования были обнаружены дефекты и упрощены процессы обновления данных.
![Inventory. Список серверов
[hosts]
host1 ansible_ssh_host=127.0.0.1
ansible_ssh_user=user ansible_ssh_pass=123
host2 ansible_ssh_host=127.0.0.2
ansible_ssh_user=user ansible_ssh_pass=456](https://image.slidesharecdn.com/finalusov-151130110300-lva1-app6892/85/-80-320.jpg)
![Inventory. Задаем переменные
[hosts:vars]
return_for_files=502
limit_rate=256K
upstream=root.domain.name
nginx_apply_method=restarted](https://image.slidesharecdn.com/finalusov-151130110300-lva1-app6892/85/-81-320.jpg)
![Эта переменная в inventory
[hosts:vars]
return_for_files=502
limit_rate=256K
upstream=root.domain.name
nginx_apply_method=restarted](https://image.slidesharecdn.com/finalusov-151130110300-lva1-app6892/85/-85-320.jpg)
![Та самая переменная в inventory
[hosts:vars]
return_for_files=502
limit_rate=256K
upstream=root.domain.name
nginx_apply_method=restarted](https://image.slidesharecdn.com/finalusov-151130110300-lva1-app6892/85/-89-320.jpg)
Тестируем мобильное приложение в суровых реалиях Интернета
- 2. Тестируем мобильное приложение в суровых реалиях интернета Усов Андрей a.usov@2gis.ru usovand@gmail.com techno.2gis.ru
- 3. • 2 года в тестировании О себе
- 4. • 2 года в тестировании • Автоматизирую тестирование бекендов О себе
- 5. • 2 года в тестировании • Автоматизирую тестирование бекендов • Разрабатываю инстументы для тестирования О себе
- 6. Мобильное приложение 2ГИС v4 • iOS, Widows Phone, Android (beta)
- 7. Мобильное приложение 2ГИС v4 • iOS, Widows Phone, Android (beta) • 3 млн. пользователей
- 8. Мобильное приложение 2ГИС v4 • iOS, Widows Phone, Android (beta) • 3 млн. пользователей • 9 стран • 288 городов
- 9. Мобильное приложение 2ГИС v4 • iOS, Widows Phone, Android (beta) • 3 млн. пользователей • 9 стран • 288 городов • Работает офлайн Ищи 2ГИС в любом магазине приложений
- 10. Доставка данных
- 11. Нагрузка • Пиковый трафик 4 Gbps
- 12. Нагрузка • Пиковый трафик 4 Gbps • Максимум 400 rps
- 13. Нагрузка • Пиковый трафик 4 Gbps • Максимум 400 rps • Объем данных 512 Tb в месяц
- 14. Нагрузка • Пиковый трафик 4 Gbps • Максимум 400 rps • Объем данных 512 Tb в месяц Но ещё не вышло обновление для Android (65% пользователей)
- 16. Критичность • Всегда актуальные данные • Обязательства перед партнерами
- 17. Критичность • Всегда актуальные данные • Обязательства перед партнерами • Доставка фич
- 19. Устройство
- 20. Приложение
- 21. Сеть
- 22. Серверы
- 23. Nginx
- 24. Хранилище
- 25. Связь
- 26. Выбирает клиент
- 27. Требования • Выбор стабильных серверов для загрузки
- 28. Требования • Выбор стабильных серверов для загрузки • Устойчивость к отказам даже в процессе закачки
- 29. Требования • Выбор стабильных серверов для загрузки • Устойчивость к отказам даже в процессе закачки • Нативные методы фоновой загрузки (iOS, Windows Phone)
- 30. Требования • Выбор стабильных серверов для загрузки • Устойчивость к отказам даже в процессе закачки • Нативные методы фоновой загрузки (iOS, Windows Phone) Оказалось, что эти пункты плохо уживаются
- 31. Точки отказа
- 35. Сервер упал
- 37. Хранилище упало
- 39. Сломалось все
- 41. И еще • Перегрузки на сервере • Редиректы от провайдера
- 42. И еще • Перегрузки на сервере • Редиректы от провайдера • Ошибки DNS
- 43. И еще • Перегрузки на сервере • Редиректы от провайдера • Ошибки DNS • Баги в самом web-сервере
- 44. И еще • Перегрузки на сервере • Редиректы от провайдера • Ошибки DNS • Баги в самом web-сервере Все эти сценарии необходимо проверить
- 45. Проблемы
- 46. Сложная настройка окружения • Изменение конфигурации web-сервера (Nginx, Apache)
- 47. Сложная настройка окружения • Изменение конфигурации web-сервера (Nginx, Apache) • Выполнение команд в хост-системе
- 48. Сложная настройка окружения • Изменение конфигурации web-сервера (Nginx, Apache) • Выполнение команд в хост-системе • Запуск произвольного скрипта на сервере
- 54. Ограничение по ресурсам • Времени мало • Людей мало • Людей с экспертизой очень мало
- 55. Ограничение по ресурсам • Времени мало • Людей мало • Людей с экспертизой очень мало Но тестировать все равно надо
- 56. Решение
- 60. Требования к инструменту • Минимум операций • Простота использования • Простота реализации • Надежность
- 61. Декомпозиция задачи • Копирование файлов на сервер
- 62. Декомпозиция задачи • Копирование файлов на сервер • Конфигурационный файл
- 63. Декомпозиция задачи • Копирование файлов на сервер • Конфигурационный файл • Скрипт
- 64. Декомпозиция задачи • Копирование файлов на сервер • Конфигурационный файл • Скрипт • Выполнение команд на сервере
- 65. Декомпозиция задачи • Копирование файлов на сервер • Конфигурационный файл • Скрипт • Выполнение команд на сервере • Перезапуск сервера
- 66. Декомпозиция задачи • Копирование файлов на сервер • Конфигурационный файл • Скрипт • Выполнение команд на сервере • Перезапуск сервера • Запуск скрипта
- 67. Ansible
- 68. Аналоги
- 69. Ansible
- 70. Почему Ansible?
- 71. Почему Ansible?
- 72. Почему Ansible?
- 73. Про Ansible
- 74. Про Ansible
- 75. Про Ansible
- 76. Про Ansible
- 77. Про Ansible
- 78. Про Ansible
- 79. Примеры
- 80. Inventory. Список серверов [hosts] host1 ansible_ssh_host=127.0.0.1 ansible_ssh_user=user ansible_ssh_pass=123 host2 ansible_ssh_host=127.0.0.2 ansible_ssh_user=user ansible_ssh_pass=456
- 82. Playbook. Запускаем команду - name: run-script | Run script command: tc --help async: 2678400 poll: 0
- 83. Playbook. Копируем файлы - name: configure-nginx | Configure nginx template: src=../resources/config.j2 dest=./your-server.conf owner=root group=root mode=0644
- 86. Вернемся в playbook - name: configure-nginx | Configure nginx template: src=../resources/config.j2 dest=./your-server.conf owner=root group=root mode=0644
- 88. Playbook. Перезапускаем сервер - name: restart-nginx | Restart nginx service: name=nginx state=restarted when: nginx_apply_method == "restarted"
- 90. Реализация • Разбиваем на классы конфигураций
- 91. Реализация • Разбиваем на классы конфигураций • Коды состояния HTTP
- 92. Реализация • Разбиваем на классы конфигураций • Коды состояния HTTP • Лимиты скорости
- 93. Реализация • Разбиваем на классы конфигураций • Коды состояния HTTP • Лимиты скорости • Определяем набор параметров для каждого класса
- 94. Реализация • Разбиваем на классы конфигураций • Коды состояния HTTP • Лимиты скорости • Определяем набор параметров для каждого класса • Пишем playbook'и
- 95. Важные моменты • Каждая операция должна быть обратима
- 96. Важные моменты • Каждая операция должна быть обратима • Нужно уметь приводить серверы в исходное состояние
- 97. Важные моменты • Каждая операция должна быть обратима • Нужно уметь приводить серверы в исходное состояние • Пишем мониторинг состояния
- 98. Профит
- 99. Ранее • Подлючаемся к каждому серверу
- 100. Ранее • Подлючаемся к каждому серверу • Копируем файлы
- 101. Ранее • Подлючаемся к каждому серверу • Копируем файлы • Редактируем конфигурацию
- 102. Ранее • Подлючаемся к каждому серверу • Копируем файлы • Редактируем конфигурацию • Запускаем команды
- 103. Ранее • Подлючаемся к каждому серверу • Копируем файлы • Редактируем конфигурацию • Запускаем команды И так каждый раз
- 104. Сейчас • Меняем пару параметров в inventory
- 105. Сейчас • Меняем пару параметров в inventory • Запускаем нужный playbook
- 106. Сейчас • Меняем пару параметров в inventory • Запускаем нужный playbook И всё
- 107. Интерфейс
- 109. Делаем web интерфейс • Интегрируем в Jenkins • Используем стандартные средства SCM
- 110. Делаем web интерфейс • Интегрируем в Jenkins • Используем стандартные средства SCM • Пишем что-то своё
- 111. Результаты
- 112. Результаты • Тестирование обновления данных стало простым
- 113. Результаты • Тестирование обновления данных стало простым • Найдено большое количество дефектов
- 114. Результаты • Тестирование обновления данных стало простым • Найдено большое количество дефектов • Изучено поведение мобильных платформ
- 115. Ссылки • http://www.ansible.com/ - Ansible • http://habrahabr.ru/post/211306/ - "Обзор: Puppet, Chef, Ansible, Salt" • https://jenkins-ci.org/ - Jenkins