我正在尝试 py.test,因为它声称对模块和 session 装置的支持比 unittest 更好,但我偶然发现了一个奇怪的行为,至少对我来说是这样。
考虑以下代码(不要告诉我它很愚蠢,我知道,它只是复制行为的快速而肮脏的黑客攻击)(我在 Windows 7 上的 Python 2.7.5 x86 上运行) 导入操作系统 导入shutil 导入pytest
test_work_dir = 'test-work-dir'
tmp = os.environ['tmp']
count = 0
@pytest.fixture(scope='module')
def work_path(request):
global count
count += 1
print('test: ' + str(count))
test_work_path = os.path.join(tmp, test_work_dir)
def cleanup():
print('cleanup: ' + str(count))
if os.path.isdir(test_work_path):
shutil.rmtree(test_work_path)
request.addfinalizer(cleanup)
os.makedirs(test_work_path)
return test_work_path
def test_1(work_path):
assert os.path.isdir(work_path)
def test_2(work_path):
assert os.path.isdir(work_path)
def test_3(work_path):
assert os.path.isdir(work_path)
if __name__ == "__main__":
pytest.main(['-s', '-v', __file__])
如果 test_work_dir 不存在,那么我将获得预期的行为:
platform win32 -- Python 2.7.5 -- pytest-2.3.5 -- C:\Programs\Python\27-envs\common\Scripts\python.exe
collecting ... collected 4 items
py_test.py: [doctest] PASSED
py_test.py:34: test_1 test: 1
cleanup: 1
PASSED
py_test.py:38: test_2 PASSED
py_test.py:42: test_3 PASSEDcleanup: 1
fixture 为模块调用一次,cleanup 在测试结束时调用一次。
然后,如果 test_work_dir 存在,我会期待类似于 unittest 的东西,该 fixture 被调用一次,它因 OSError 而失败,不运行需要它的测试,清理是一次呼唤,世界和平再次建立。
但是...这是我所看到的:
py_test.py: [doctest] PASSED
py_test.py:34: test_1 test: 1
ERROR
py_test.py:38: test_2 test: 2
ERROR
py_test.py:42: test_3 test: 3
ERROR
尽管 fixture 失败了,但所有测试都运行了,应该是 scope='module' 的 fixture 为每个测试调用一次,而终结器从未被调用!
我知道固定装置中的异常不是好的策略,但真正的固定装置很复杂,如果我可以指望每个终结器集的执行直到失败点,我宁愿避免用 try block 填充它们。我不想在失败后去寻找测试工件。 而且,当他们需要的所有固定装置都没有到位时尝试运行测试是没有意义的,并且最多会使它们变得不稳定。
这是 py.test 在 fixture 出现故障时的预期行为吗?
谢谢,加布里埃尔
请您参考如下方法:
这里有三个问题:
您应该在执行完要撤消的操作后注册终结器。所以首先调用 makedirs() 然后注册终结器。这是 fixtures 的普遍问题,因为通常拆解代码只有在成功创建某些东西时才能运行
pytest-2.3.5 有一个错误,如果 fixture 函数失败,它不会调用终结器。我刚刚修复了它,您可以使用
pip install -i http://pypi.testrun.org -U pytest安装 2.4.0.dev7(或更高)版本。它确保即使 fixture 函数部分失败也能调用 fixture 终结器。实际上有点令人惊讶,这并没有更早出现,但我想包括我在内的人们通常只是继续修理固定装置,而不是深入研究具体发生的事情。所以感谢您在这里发帖!如果模块作用域的 fixture 函数失败,下一个需要该 fixture 的测试仍将再次触发 fixture 函数的执行,因为它可能是间歇性故障。按理说,pytest 应该记住给定范围的失败,而不是重试执行。如果您这么认为,请打开一个问题,链接到这个 stackoverflow 讨论。
谢谢你
