Как правильно тестировать django сплинтером?

Question

[maxclax]

Использую Django 1.8 и selenium.

Процесc работы таков:
- Написаны BDD сценарии (pytest-bdd);
- написаны степы для тестов (pytest-splinter)
- файл settings имеет конфигурацию DB

DATABASES = {
    'default': {
        'ENGINE': 'django.db.backends.sqlite3',
        'NAME': os.path.join(BASE_DIR, 'db.sqlite3'),
    },
}

Запускаю тесты:
1 запускаю сам сервер (runserver)
2 запускаю сами тесты (py.test)

В результате вот что получаю: сервер запущен на БД с файла settings. Все фикстуры и стенд БД на отдельной БД, а тесты пытаются пройти на БД с запущенного сервера. Что делаю не так? На Django 1.7 такого не было. Но с выходом 1.8 стало разделять БД.

Даже если я укажу в настройках ДБ для тестов (djbook.ru/rel1.8/topics/testing/overview.html) в результате то-же самое из за того, что сервер подымает на БД default, а БД для тестов на каждом степе обнуляется.

Answer 1

[sim3x]

От фикстур старайся отходить - их никто не любит обновлять

создай конфиг для тестов и унаследуй его от базового конфига
progname/settings/
__init__.py
base.py
dev.py
test.py

запустит скульлайт в памяти
'NAME': ":memory:",

запускать пак тестов нужно будет так
./manage.py test --settings=progname.settings.test

./manage.py runserver --settings=progname.settings.dev

Comments

[maxclax]

Это все работало до 1.8 джанге. В моем случае фикстуры это pytest-factory-boy и обновлять особо ничего не нужно. Django 1.8 при тесте по умолчанию работает с БД :memory: без дополнительных настроек

[sim3x]

maxclax: а селениую случаем не лезет просто сам на локалхост:8000?

[maxclax]

sim3x: вот в том то и дело, что он лезит на локалхост:8000. И выходит разделение БД

[maxclax]

под него в любом случае необходимо подымать сервер, подымаю стандартный он туда и лезит

[sim3x]

maxclax:
те изменения порта для runserver nебе хватит?
https://docs.djangoproject.com/en/1.8/ref/django-a...

[maxclax]

runserver (с любым портом) подымает БД default-NAME а под тесты идет другая и на 1.8 джанго автоматом добавляет в начале любой БД TEST_ и они расходятья

[sim3x]

maxclax: да
но селениум может просто не предполагать, что во время рана теста у тебя запущен еще и дев сервер и со спокойной душей работает с локалхост:8000

[maxclax]

вот более к делу:

@given(p('I am on page "{URI}"'))
def i_am_on_page(browser, URI):

# добавлено специално для теста
# в БД добавело 5 тикетов и само собой 5 разных юзеров
from tickets.tests import factories
factories.TicketFactory.create_batch(5)

# открывши страницу список тикетов 0 так как запись выше добавила их не в #БД default
browser.visit('127.0.0.1:8000/tickets')
import ipdb; ipdb.set_trace()
# при дебаге в консоли я вижу что у меня в БД есть тикеты и юзеры как нужно но их нет в БД дефайлт и само собой селениум все тесты проваливает на последующих степах.

[sim3x]

maxclax:
а если так
./manage.py runserver localhost:9000

[maxclax]

ситуацию не изменило. Все то-же самое только сервер запущен на другом порту с БД default.

[maxclax]

1.7 небыло таких нюансов. Можно было запустить сервер с отдельным конфигом и все. И тысты с тем же конфигом. А вот с 1.8 появился такою нюанс. В документации он описан но решения я не нашел :)

[maxclax]

Changed in Django 1.8:
Previously Django used 'test_' + NAME if not provided.

[maxclax]

При таком конфиге
DATABASES = {
'default': {
'ENGINE': 'django.db.backends.sqlite3',
'NAME': os.path.join(BASE_DIR, 'db.sqlite3'),
},
'TEST': {
'NAME': os.path.join(BASE_DIR, 'db.sqlite3'),
},
}

как-бы должно работать на одной БД но результата нет!

[kazmiruk]

maxclax: потому что должно быть так:
DATABASES = {
'default': {
'ENGINE': 'django.db.backends.sqlite3',
'NAME': os.path.join(BASE_DIR, 'db.sqlite3'),
'TEST': {
'NAME': os.path.join(BASE_DIR, 'db.sqlite3'),
}
}
}

[maxclax]

kazmiruk: нет результата. При запуске тестов, перетирает ДБ. Я вот думаю может я не верно делаю сам подход с запуском сервера. Выходит что я его запускаю в ручную до запуска функциональных тестов. Возможно нужно запускать сервер с внутри самих тестов?

[kazmiruk]

maxclax: Чтобы не перетирало базу нужно --keepdb указывать при запуске. А вообще да, я запускаю для каждого теста сервер прямо внутри теста, чтобы каждый тест был в изолированной среде.

[sim3x]

kazmiruk: а никто еще не прикручивал дял такого юзкейса паралельний запуск?

[maxclax]

kazmiruk: как ты его запускаешь внутри теста?

[kazmiruk]

maxclax: django.test.testcases.LiveServerTestCase посмотрите как сделано. Я просто все свои селениум тесты наследую от этого класса.

[kazmiruk]

sim3x: я пытался, с ходу не получилось, а острой необходимости не было, поэтому забил.