Jenkins 的 Python 单元测试?

如何让 Jenkins 执行 python 单元测试用例? 有没有可能从内置的 unittest包中输出 JUnit 样式的 XML?

108942 次浏览

我使用 nosetest。有附件输出的 XML 为詹金斯

在使用构建时,我们使用 collective.xmltestreport生成 JUnit 样式的 XML 输出,可能是 源代码或模块本身有所帮助。

您可以安装 Unittest-xml 报告包,以便将生成 XML 的测试运行程序添加到内置的 unittest中。

我们使用 派特,它内置了 XML 输出(这是一个命令行选项)。

无论哪种方式,执行单元测试都可以通过运行 shell 命令来完成。

我会第二次使用鼻子。现在内置了基本的 XML 报告。只要使用—— with-xunit 命令行选项,它就会生成一个 nosetests.xml 文件。例如:

Nosetest —— with-xunit

然后添加一个“ Publish JUnit Test result report”post build 操作,并用 nosetests.xml 填充“ Test report XML”字段(假设您在 $WORKSPACE 中运行 nosettest)。

样本测试:

Py:

# tests.py


import random
try:
import unittest2 as unittest
except ImportError:
import unittest


class SimpleTest(unittest.TestCase):
@unittest.skip("demonstrating skipping")
def test_skipped(self):
self.fail("shouldn't happen")


def test_pass(self):
self.assertEqual(10, 7 + 3)


def test_fail(self):
self.assertEqual(11, 7 + 3)

带 pytest 的 JUnit

用以下方法进行测试:

py.test --junitxml results.xml tests.py

Xml:

<?xml version="1.0" encoding="utf-8"?>
<testsuite errors="0" failures="1" name="pytest" skips="1" tests="2" time="0.097">
<testcase classname="tests.SimpleTest" name="test_fail" time="0.000301837921143">
<failure message="test failure">self = &lt;tests.SimpleTest testMethod=test_fail&gt;


def test_fail(self):
&gt;       self.assertEqual(11, 7 + 3)
E       AssertionError: 11 != 10


tests.py:16: AssertionError</failure>
</testcase>
<testcase classname="tests.SimpleTest" name="test_pass" time="0.000109910964966"/>
<testcase classname="tests.SimpleTest" name="test_skipped" time="0.000164031982422">
<skipped message="demonstrating skipping" type="pytest.skip">/home/damien/test-env/lib/python2.6/site-packages/_pytest/unittest.py:119: Skipped: demonstrating skipping</skipped>
</testcase>
</testsuite>

有鼻子的 JUnit

用以下方法进行测试:

nosetests --with-xunit

Xml:

<?xml version="1.0" encoding="UTF-8"?>
<testsuite name="nosetests" tests="3" errors="0" failures="1" skip="1">
<testcase classname="tests.SimpleTest" name="test_fail" time="0.000">
<failure type="exceptions.AssertionError" message="11 != 10">
<![CDATA[Traceback (most recent call last):
File "/opt/python-2.6.1/lib/python2.6/site-packages/unittest2-0.5.1-py2.6.egg/unittest2/case.py", line 340, in run
testMethod()
File "/home/damien/tests.py", line 16, in test_fail
self.assertEqual(11, 7 + 3)
File "/opt/python-2.6.1/lib/python2.6/site-packages/unittest2-0.5.1-py2.6.egg/unittest2/case.py", line 521, in assertEqual
assertion_func(first, second, msg=msg)
File "/opt/python-2.6.1/lib/python2.6/site-packages/unittest2-0.5.1-py2.6.egg/unittest2/case.py", line 514, in _baseAssertEqual
raise self.failureException(msg)
AssertionError: 11 != 10
]]>
</failure>
</testcase>
<testcase classname="tests.SimpleTest" name="test_pass" time="0.000"></testcase>
<testcase classname="tests.SimpleTest" name="test_skipped" time="0.000">
<skipped type="nose.plugins.skip.SkipTest" message="demonstrating skipping">
<![CDATA[SkipTest: demonstrating skipping
]]>
</skipped>
</testcase>
</testsuite>

带鼻子的 JUnit

您需要使用 nose2.plugins.junitxml插件。您可以像通常那样使用配置文件配置 nose2,或者使用 --plugin命令行选项。

用以下方法进行测试:

nose2 --plugin nose2.plugins.junitxml --junit-xml tests

Nose2-junit. xml:

<testsuite errors="0" failures="1" name="nose2-junit" skips="1" tests="3" time="0.001">
<testcase classname="tests.SimpleTest" name="test_fail" time="0.000126">
<failure message="test failure">Traceback (most recent call last):
File "/Users/damien/Work/test2/tests.py", line 18, in test_fail
self.assertEqual(11, 7 + 3)
AssertionError: 11 != 10
</failure>
</testcase>
<testcase classname="tests.SimpleTest" name="test_pass" time="0.000095" />
<testcase classname="tests.SimpleTest" name="test_skipped" time="0.000058">
<skipped />
</testcase>
</testsuite>

带有 unittest-xml 报告的 JUnit

将以下内容附加到 tests.py

if __name__ == '__main__':
import xmlrunner
unittest.main(testRunner=xmlrunner.XMLTestRunner(output='test-reports'))

用以下方法进行测试:

python tests.py

Test-reports/TEST-SimpleTest-20131001140629. xml:

<?xml version="1.0" ?>
<testsuite errors="1" failures="0" name="SimpleTest-20131001140629" tests="3" time="0.000">
<testcase classname="SimpleTest" name="test_pass" time="0.000"/>
<testcase classname="SimpleTest" name="test_fail" time="0.000">
<error message="11 != 10" type="AssertionError">
<![CDATA[Traceback (most recent call last):
File "tests.py", line 16, in test_fail
self.assertEqual(11, 7 + 3)
AssertionError: 11 != 10
]]>     </error>
</testcase>
<testcase classname="SimpleTest" name="test_skipped" time="0.000">
<skipped message="demonstrating skipping" type="skip"/>
</testcase>
<system-out>
<![CDATA[]]>    </system-out>
<system-err>
<![CDATA[]]>    </system-err>
</testsuite>
python -m pytest --junit-xml=pytest_unit.xml source_directory/test/unit || true # tests may fail

在 jenkins 中以 shell 的形式运行它,您可以将 pytest _ unit.xml 中的报告作为工件获得。