QTA-qtaf自动化测试实践

背景:

项目leader认为万物皆可自动化,然后就拍脑袋要搞个自动化,后面搞不下去了,凉了。虽然说项目凉了,但是过程中收获满满,所以脱敏后就有了这篇博客:https://www.cnblogs.com/Klay/p/15339223.html

需求:

需要把自动化做成一个服务,提供给后台调用
对测试进度量化,如:测试进度的百分比
测试报告定制化,如:展示一个测试用例信息、测试标题、测试步骤等
可以在前端选择执行哪些用例,支持单个用例执行。

隐藏需求:

我们要自己写用例
执行用例的不是我们

概要设计

测试对象:http/https接口、web系统(后续方向)、app等(后续方向),基于此平台设计的自动化框架要包含测试用例管理、测试执行控制、测试报表及测试日志的生成,整体测试框架要轻量易用。
整个服务分两个部分,一是部分提供http接口对接外部服务,这里就不详述了,二是提供自动化部分。
自动化部分总共分为5个公共库模块(可复用函数、日志管理)、用例仓库(具体用例的管理)、页面管理(单独对Web页面或接口进行抽象,封装页面元素和操作方法)、执行模块(测试计划和执行计划)以及静态资源,模块之间不是相互孤立的,而是相辅相成的。

详细设计

用 qtaf 来管理用例,基础详情可以看 官方文档
然后基础功能都有了。官方文档比较详细,这里就不复制粘贴了。

拓展 testplan

拓展测试计划主要可以定制测试环境、全局初始化和测试数据等。

点击查看代码

from testbase.loader import TestLoader
from testbase.plan import TestPlan
from testbase.runner import TestRunner


class XxxxTestPlanTestPlan):
    tests = TestLoader).load"testcase.demo")
    test_target_args = ""

    hosts = ""

    def get_test_targetself):
        """获取被测对象详情"""
        return self.tests

    def test_setupself, report):
        """全局初始化"""
        pass

    def resource_setupself, report, restype, resource):
        """测试资源初始化"""
        pass


if __name__ == "__main__":

    from testbase.resource import LocalResourceManagerBackend
    from testbase.report import HtmlTestReport

    dir_report = {}
    TestRunner
        HtmlTestReport), resmgr_backend=LocalResourceManagerBackend)
    ).runSstcTestPlan))
    printdir_report)

拓展 测试报告

主要引入了一些参数,主要为了以下几点

把测试进度写到redis里
把测试报告返回回去

点击查看代码


import argparse

from testbase.report import ITestResultFactory, report_usage, JSONTestReportBase
from testbase.testresult import JSONResult


class XxxxResultJSONResult):
    """xxxx test result,先不处理后续有需要再写"""

    def get_fileself):
        """
        重写了父类方法,直接让每个测试用例的结果弄到测试报告中
        ,而不是以一个文件的形式单独存在
        # TODO: 目前未遇到内存问题,后续考虑写到redis里
        @return:
        @rtype:
        """
        return self._data


class XxxxTestResultFactoryITestResultFactory):
    """result factory"""

    def createself, testcase):
        return XxxxResulttestcase)


class XxxxTestReportJSONTestReportBase):
    """test report class"""

    def __init__self, dict_report, task_id=None, count_tests=None, redis=None):
        superJSONTestReportBase, self).__init__)
        self._logs = []
        self._filtered_tests = []
        self._load_errors = []
        self._passed_tests = {}
        self._failed_tests = {}
        self._data = dict_report
        self._data.update
            {
                "version": "1.0",
                "summary": {"tool": "SSTC", "title": "", "environment": {}},
                "logs": self._logs,
                "filtered_tests": self._filtered_tests,
                "load_errors": self._load_errors,
                "passed_tests": self._passed_tests,
                "failed_tests": self._failed_tests,
            }
        )
        self._testcase_names = set)
        self._testcase_total_run = 0
        self._task_id = task_id
        self._count_tests = count_tests
        self._redis = redis

    def _set_task_progressself, time_out=3600):
        """
        设置redis测试进度
        key: "tests_task_{}".formatself._task_id)
        value: 百分比   如:100、29
        @return:
        @rtype:
        """
        if self._task_id == None or self._count_tests == None or self._redis == None:
            return
        else:
            if self._count_tests == 0:
                self._redis.set"tests_task_{}".formatself._task_id), 0)
            else:
                self._redis.expire"tests_task_{}".formatself._task_id), time_out)
                self._redis.set
                    "tests_task_{}".formatself._task_id),
                    int
                        lenself._passed_tests) + lenself._failed_tests))
                        * 100
                        / self._count_tests
                    ),
                )

    def log_test_resultself, testcase, testresult):
        self._set_task_progress)
        superXxxxTestReport, self).log_test_resulttestcase, testresult)

    def get_testresult_factoryself):
        """获取对应的TestResult工厂
        :returns ITestResultFactory
        """
        return XxxxTestResultFactory)

    def end_reportself):
        superXxxxTestReport, self).end_report)

    def begin_reportself):
        superXxxxTestReport, self).begin_report)
        pass


使用感受和结论

在qta这套框架在腾讯外用得基本上没有文档,然后官方提供的qq群也不活跃,所有要用的人考虑遇到问题后得自己能看得懂源码(大多数注释都是中文)
pyhon3支持得不是很好,所有用python3容易遇到版本兼容问题(相关的依赖包)
如果单纯的只用qtaf,不用其他配套框架qt4i,qt4w这类的会比较容易,不容易出现深坑。
腾讯外没有metis这个这套框架的核心可以用(2021年9月),有条件可以自己去实现。
虽然框架提供了并发执行测试用例,但如果想执行效率更高需要自己定制开发执行器

结论:

虽然说社区没有其他框架(appium、selenium等)那么活跃,但提供的基础功能很全,且有全中文官方文档对英语不好的人很友好,如果其他选择你都不满意,那么qta全家桶你可以尝试下。

Published by

风君子

独自遨游何稽首 揭天掀地慰生平

发表回复

您的电子邮箱地址不会被公开。 必填项已用 * 标注