Запуск тестов с tox и Docker

Александр Кошелев
Moscow Python Meetup #48, 21 августа 2017
Запуск тестов с tox и
Docker

Задача, проблема и
решение

Задача
4
〉Запускать тесты для разных интерпретаторов и зависимостей
〉Быстрый фидбек при разработке

Проблема
5
〉Настроить среду запуска тестов
〉Прогон тестов по ходу разработки

Решение
6
Запускаем тесты в Docker, а внутри него tox
› Docker даёт возможность сделать среду с несколькими
интерпретаторами
› tox позволяет тестировать разный набор зависимостей

Готовый базовый Docker-oбраз
7
themattrix/tox от Matthew Tardiff
› https://hub.docker.com/r/themattrix/tox/
› https://github.com/themattrix/docker-tox
〉Ubuntu 16.04 (Xenial Xerus)
〉Содержит в себе все актуальные интерпретаторы:
Python 2.6, 2.7, 3.3, 3.4, 3.5, 3.6, PyPy и PyPy3

Пример:
django_replicated

Dockerfile
FROM themattrix/tox
MAINTAINER Alexander Koshelev <daevaorn@gmail.com>

Dockerfile из themattrix/tox
FROM themattrix/tox-base
MAINTAINER Matthew Tardiff <mattrix@gmail.com>
ONBUILD COPY install-prereqs*.sh requirements*.txt tox.ini /app/
ONBUILD ARG SKIP_TOX=false
ONBUILD RUN bash -c "
if [ -f '/app/install-prereqs.sh' ]; then
bash /app/install-prereqs.sh;
fi &&
if [ $SKIP_TOX == false ]; then
TOXBUILD=true tox;
fi"

ONBUILD [INSTRUCTION]
12
〉Может содержать почти любую Dockerfile-инструкцию
〉Выполняется при сборка образа-наследника
〉Записывается в виде триггера в мета-информацию образа

tox.ini
[tox]
envlist = {py27}-{django16,django18,django19},{py35}-{django18,django19},
{pypy}-{django18,django19}
skipsdist = {env:TOXBUILD:false}
[testenv]
sitepackages = False
deps =
pytest==2.8.7
pytest-django==2.9.1
mock==1.3.0
django16: Django>=1.6,<1.7

commands = {env:TOXBUILD:py.test tests}

docker-compose.yaml
tox:
build: .
volumes:
- ".:/src:ro"

Сборка образа
$ docker-compose build tox
Building tox
Step 1 : FROM themattrix/tox
# Executing 3 build triggers...
Step 1 : COPY install-prereqs*.sh requirements*.txt tox.ini /app/
Step 1 : ARG SKIP_TOX=false
---> Running in f9e38f0923f7
Step 1 : RUN bash -c " if [ -f '/app/install-prereqs.sh' ]; then
bash /app/install-prereqs.sh; fi && if [ $SKIP_TOX == false ]; then
TOXBUILD=true tox; fi"
---> Running in 22d0be8c1efa
py27-django16 create: /app/.tox/py27-django16

py27-django16 installdeps: pytest==2.8.7, pytest-django==2.9.1, mock==1.3.0,
Django>=1.6,<1.7
py27-django16 installed:
Django==1.6.11,funcsigs==1.0.2,mock==1.3.0,pbr==3.1.1,py==1.4.34,pytest==2.8.7
,pytest-django==2.9.1,six==1.10.0
py27-django16 runtests: PYTHONHASHSEED='4047276611'
py27-django16 runtests: commands[0] | true
WARNING:test command found but not installed in testenv
cmd: /bin/true
env: /app/.tox/py27-django16
Maybe you forgot to specify a dependency? See also the whitelist_externals
envconfig setting.
...
...

...
...
pypy-django18 create: /app/.tox/pypy-django18
...
pypy-django19 create: /app/.tox/pypy-django19
...
___________________________________ summary ____________________________________
py27-django16: commands succeeded
pypy-django18: commands succeeded
congratulations :)

---> 1aa69980a30e
Step 2 : MAINTAINER Alexander Koshelev <daevaorn@gmail.com>
---> Running in 659b45a37d1f
---> 10065777bc77
Successfully built 10065777bc77

Запуск тестов
$ docker-compose run tox
GLOB sdist-make: /app/setup.py
py27-django16 inst-nodeps: /app/.tox/dist/django_replicated-2.1.zip
py27-django16 installed: Django==1.6.11,django-
replicated==2.1,funcsigs==1.0.2,mock==1.3.0,pbr==3.1.1,py==1.4.34,pytest==2.8.
7,pytest-django==2.9.1,six==1.10.0
py27-django16 runtests: PYTHONHASHSEED='2897087153'
py27-django16 runtests: commands[0] | py.test tests
========================== test session starts ============================
platform linux2 -- Python 2.7.13, pytest-2.8.7, py-1.4.34, pluggy-0.3.1
rootdir: /app, inifile: pytest.ini
plugins: django-2.9.1
collected 25 items

tests/test_dbchecker.py .......
tests/test_decorators.py .
tests/test_middleware.py ............
tests/test_router.py .....
========================== 25 passed in 0.77 seconds ======================
...
__________________________________ summary ________________________________
ERROR: pypy-django19: commands failed

Запуск теста отдельного окружения
$ docker-compose run tox tox -e pypy-django19
...
pypy-django19 runtests: commands[0] | py.test tests
INTERNALERROR> Traceback (most recent call last):
...
INTERNALERROR> from django.utils.module_loading import module_has_submodule
INTERNALERROR> File "/app/.tox/pypy-django19/site-packages/django/utils/
module_loading.py", line 67, in <module>
INTERNALERROR> from importlib.util import find_spec as importlib_find
INTERNALERROR> ImportError: cannot import name 'find_spec'
ERROR: InvocationError: '/app/.tox/pypy-django19/bin/py.test tests'
____________________________ summary ___________________________________
ERROR: pypy-django19: commands failed

Выводы

Выводы
24
Плюсы
› Удобство и быстрая настройка
› Готовая среда со всеми интерпретаторами
› Минимум кода
Минусы
› Более долгое выполнение тестов из-за старта контейнера
› Нужно использовать Docker :-)

Спасибо!
Александр Кошелев
Руководитель службы разработки
alexkoshelev@yandex-team.ru
@alexkoshelev
daevaorn

Запуск тестов с tox и Docker

More Related Content

What's hot (20)

Similar to Запуск тестов с tox и Docker (20)

Запуск тестов с tox и Docker