9.10. pytest常用hooks方法
9.10.1. pytest_runtest_makereport
pytest_runtest_makereport这个钩子方法,了解用例的执行过程,并获取到每个用例的执行结果。
相关的源码,在 _pytest/runner.py
下:
from _pytest import runner
# 对应源码
def pytest_runtest_makereport(item, call):
""" return a :py:class:`_pytest.runner.TestReport` object
for the given :py:class:`pytest.Item` and
:py:class:`_pytest.runner.CallInfo`.
"""
这里item是测试用例,call是测试步骤,具体执行过程如下:
先执行call.when=’setup’ 返回setup 的执行结果
然后执行call.when=’call’ 返回call 的执行结果
最后执行call.when=’teardown’返回teardown 的执行结果
运行案例 conftest.py写pytest_runtest_makereport内容:
# conftest.py
import pytest
@pytest.hookimpl(hookwrapper=True, tryfirst=True)
def pytest_runtest_makereport(item, call):
print('------------------------------------')
# 获取钩子方法的调用结果
out = yield
print('用例执行结果', out)
# 3. 从钩子方法的调用结果中获取测试报告
report = out.get_result()
print('测试报告:%s' % report)
print('步骤:%s' % report.when)
print('nodeid:%s' % report.nodeid)
print('description:%s' % str(item.function.__doc__))
print(('运行结果: %s' % report.outcome))
9.10.2. pytest_collection_modifyitems
pytest_collection_modifyitems是当测试用例收集完成后,可以改变测试用例集合(items)的顺序
conftest.py内容:
def pytest_collection_modifyitems(session, items):
print(type(items))
print("收集到的测试用例:%s" % items)
# sort排序,根据用例名称item.name 排序
items.sort(key=lambda x: x.name)
print("排序后的用例:%s" % items)
for item in items:
print("用例名:%s" % item.name)
重新排序后就可以按用例的名称顺序执行了。
9.10.3. pytest_terminal_summary
用例执行完成后,获取到执行的结果,快速统计用例的执行情况。 关于TerminalReporter类可以在_pytest.terminal中查看到
conftest.py中写个 pytest_terminal_summary 函数收集测试结果:
def pytest_terminal_summary(terminalreporter, exitstatus, config):
'''收集测试结果'''
print(terminalreporter.stats)
print("total:", terminalreporter._numcollected)
print('passed:', len(terminalreporter.stats.get('passed', [])))
print('failed:', len(terminalreporter.stats.get('failed', [])))
print('error:', len(terminalreporter.stats.get('error', [])))
print('skipped:', len(terminalreporter.stats.get('skipped', [])))
# terminalreporter._sessionstarttime 会话开始时间
duration = time.time() - terminalreporter._sessionstarttime
print('total times:', duration, 'seconds')
9.10.4. pytest_report_teststatus
打印整个用例的测试结果 pytest_report_teststatus(report, config): 返回各个测试阶段的result,
when==’setup’ 用例的前置操作
when==’call’ 用例的执行
when==’teardown’ 用例的后置操作
可以用when属性来区分不同阶段:
def pytest_report_teststatus(report, config):
'''turn . into √,turn F into x'''
if report.when == 'call' and report.failed:
return (report.outcome, 'x', 'failed')
if report.when == 'call' and report.passed:
return (report.outcome, '√', 'passed')
9.10.5. 钩子函数集合API
最后附上所有常用的钩子函数集合
9.10.5.1. setuptools
引导挂钩要求足够早注册的插件(内部和setuptools插件),可以使用的钩子
pytest_load_initial_conftests(early_config,parser,args): 在命令行选项解析之前实现初始conftest文件的加载。
pytest_cmdline_preparse(config,args): (不建议使用)在选项解析之前修改命令行参数。
pytest_cmdline_parse(pluginmanager,args): 返回一个初始化的配置对象,解析指定的args。
pytest_cmdline_main(config): 要求执行主命令行动作。默认实现将调用configure hooks和runtest_mainloop。
9.10.5.2. 初始化挂钩
初始化钩子需要插件和conftest.py文件
pytest_addoption(parser): 注册argparse样式的选项和ini样式的配置值,这些值在测试运行开始时被调用一次。
pytest_addhooks(pluginmanager): 在插件注册时调用,以允许通过调用来添加新的挂钩
pytest_configure(config): 许插件和conftest文件执行初始配置。
pytest_unconfigure(config): 在退出测试过程之前调用。
pytest_sessionstart(session): 在Session创建对象之后,执行收集并进入运行测试循环之前调用。
pytest_sessionfinish(session,exitstatus): 在整个测试运行完成后调用,就在将退出状态返回系统之前。
pytest_plugin_registered(plugin,manager):一个新的pytest插件已注册。
9.10.5.3. collection 收集钩子
pytest_collection(session): 执行给定会话的收集协议。
pytest_collect_directory(path, parent): 在遍历目录以获取集合文件之前调用。
pytest_collect_file(path, parent) 为给定的路径创建一个收集器,如果不相关,则创建“无”。
pytest_pycollect_makemodule(path: py._path.local.LocalPath, parent) 返回给定路径的模块收集器或无。
pytest_pycollect_makeitem(collector: PyCollector, name: str, obj: object) 返回模块中Python对象的自定义项目/收集器,或者返回None。在第一个非无结果处停止
pytest_generate_tests(metafunc: Metafunc) 生成(多个)对测试函数的参数化调用。
pytest_make_parametrize_id(config: Config, val: object, argname: str) 返回val 将由@ pytest.mark.parametrize调用使用的给定用户友好的字符串表示形式,如果挂钩不知道,则返回None val。
pytest_collection_modifyitems(session: Session, config: Config, items: List[Item]) 在执行收集后调用。可能会就地过滤或重新排序项目。
pytest_collection_finish(session: Session) 在执行并修改收集后调用。
9.10.5.4. 测试运行(runtest)钩子
pytest_runtestloop(session: Session) 执行主运行测试循环(收集完成后)。
pytest_runtest_protocol(item: Item, nextitem: Optional[Item]) 对单个测试项目执行运行测试协议。
pytest_runtest_logstart(nodeid: str, location: Tuple[str, Optional[int], str]) 在运行单个项目的运行测试协议开始时调用。
pytest_runtest_logfinish(nodeid: str, location: Tuple[str, Optional[int], str])在为单个项目运行测试协议结束时调用。
pytest_runtest_setup(item: Item) 调用以执行测试项目的设置阶段。
pytest_runtest_call(item: Item) 调用以运行测试项目的测试(调用阶段)。
pytest_runtest_teardown(item: Item, nextitem: Optional[Item]) 调用以执行测试项目的拆卸阶段。
pytest_runtest_makereport(item: Item, call: CallInfo[None]) 被称为为_pytest.reports.TestReport测试项目的每个设置,调用和拆卸运行测试阶段创建一个。
pytest_pyfunc_call(pyfuncitem: Function) 调用基础测试功能。
9.10.5.5. Reporting 报告钩子
pytest_collectstart(collector: Collector) 收集器开始收集。
pytest_make_collect_report(collector: Collector) 执行collector.collect()并返回一个CollectReport。
pytest_itemcollected(item: Item) 我们刚刚收集了一个测试项目。
pytest_collectreport(report: CollectReport) 收集器完成收集。
pytest_deselected(items: Sequence[Item]) 要求取消选择的测试项目,例如按关键字。
pytest_report_header(config: Config, startdir: py._path.local.LocalPath) 返回要显示为标题信息的字符串或字符串列表,以进行终端报告。
pytest_report_collectionfinish(config: Config, startdir: py._path.local.LocalPath, items: Sequence[Item]) 返回成功完成收集后将显示的字符串或字符串列表。
pytest_report_teststatus(report: Union[CollectReport, TestReport], config: Config) 返回结果类别,简写形式和详细词以进行状态报告。
pytest_terminal_summary(terminalreporter: TerminalReporter, exitstatus: ExitCode, config: Config) 在终端摘要报告中添加一个部分。
pytest_fixture_post_finalizer(fixturedef: FixtureDef[Any], request: SubRequest) 在夹具拆除之后但在清除缓存之前调用,因此夹具结果fixturedef.cached_result仍然可用(不是 None)
pytest_warning_captured(warning_message: warnings.WarningMessage, when: Literal[‘config’, ‘collect’, ‘runtest’], item: Optional[Item], location: Optional[Tuple[str, int, str]]) (已弃用)处理内部pytest警告插件捕获的警告。
pytest_warning_recorded(warning_message: warnings.WarningMessage, when: Literal[‘config’, ‘collect’, ‘runtest’], nodeid: str, location: Optional[Tuple[str, int, str]]) 处理内部pytest警告插件捕获的警告。
pytest_runtest_logreport(report: TestReport) 处理项目的_pytest.reports.TestReport每个设置,调用和拆卸运行测试阶段产生的结果。
pytest_assertrepr_compare(config: Config, op: str, left: object, right: object) 返回失败断言表达式中的比较的说明。
pytest_assertion_pass(item: Item, lineno: int, orig: str, expl: str) (实验性的)在断言通过时调用。
9.10.5.6. 调试/相互作用钩
很少有可以用于特殊报告或与异常交互的挂钩:
pytest_internalerror(excrepr: ExceptionRepr, excinfo: ExceptionInfo[BaseException]) 要求内部错误。返回True以禁止对将INTERNALERROR消息直接打印到sys.stderr的回退处理。
pytest_keyboard_interrupt(excinfo: ExceptionInfo[Union[KeyboardInterrupt, Exit]]) 要求键盘中断。
pytest_exception_interact(node: Union[Item, Collector], call: CallInfo[Any], report: Union[CollectReport, TestReport]) 在引发可能可以交互处理的异常时调用。
pytest_enter_pdb(config: Config, pdb: pdb.Pdb) 调用了pdb.set_trace()。