為什么需要自動(dòng)化測(cè)試
- 對(duì)于大項(xiàng)目怀大,對(duì)每個(gè)單元進(jìn)行測(cè)試可以快速定位錯(cuò)誤纱兑,確保項(xiàng)目質(zhì) 量
- 在 python 中,利用 python 的測(cè)試化模塊搭建一些測(cè)試不會(huì)比手 動(dòng)測(cè)試一些數(shù)據(jù)更麻煩
- 多寫一些代碼
- (幾乎)不和終端的輸入輸出打交道
- 少和單步調(diào)試打交道
- 在 python 交互式終端的輸入輸出化借,可以馬上成為一些測(cè)試樣例
- 帶有和 Java 類似的單元測(cè)試框架潜慎,可以提取出不同測(cè)試用例的相 同步驟
- 回歸測(cè)試:一個(gè)測(cè)試用例可以在開發(fā)過(guò)程中反復(fù)測(cè)試,保證加入新 功能后不會(huì)妨礙原有功能的運(yùn)轉(zhuǎn)
測(cè)試覆蓋率
- 定義:在運(yùn)行測(cè)試時(shí)運(yùn)行的代碼占總代碼量的比例
- 作用:找出沒有被測(cè)試過(guò)的函數(shù)和代碼行
- 自帶 trace.py:python -m trace --help
- --count 統(tǒng)計(jì)每行被執(zhí)行的次數(shù)
- --trace 程序每執(zhí)行一行蓖康,就將這一行打印到標(biāo)準(zhǔn)輸出
- 統(tǒng)計(jì)被執(zhí)行的函數(shù)名铐炫、調(diào)用關(guān)系、累積多次運(yùn)行的總次數(shù)蒜焊、標(biāo)出沒有被運(yùn)行的代碼行??
Doctest
- python 的 docstring 中有很多在交互式終端中運(yùn)行的例子
- doctest 可以檢查 docstring 中樣例的正確性
- 同樣的倒信,可以把手動(dòng)測(cè)試的終端輸出放進(jìn) docstring 里,變成一個(gè) 測(cè)試用例
- 注意:一般小型的或者簡(jiǎn)單的功能可以使用泳梆,但是較大的項(xiàng)目或者較復(fù)雜的功能并不推薦使用doctest
下面是一個(gè)樣例
def factorial(n):
"""Return the factorial of n, an exact integer >= 0.
>>> [factorial(n) for n in range(6)]
[1, 1, 2, 6, 24, 120]
>>> factorial(30) 265252859812191058636308480000000
>>> factorial(-1)
Traceback (most recent call last):
...
ValueError: n must be >= 0
"""
import math
if not n >= 0:
raise ValueError("n must be >= 0")
result = 1
factor = 2
while factor <= n:
result *= factor
factor += 1
return result
if __name__ == "__main__":
import doctest
doctest.testmod()
Unittest
- 基于 JUnit 測(cè)試框架 (JAVA)
- 比 doctest 更加靈活, 功能更加強(qiáng)大
- 我們要提到的django單元測(cè)試就是基于unittest的鳖悠,下面先簡(jiǎn)要介紹下如何使用unittest
如何使用Unittest
- 先構(gòu)造 unittest.TestCase 的子類
- unittest.main() 用法
- unittest.main() 函數(shù)將會(huì)實(shí)例化所有當(dāng)前 py 文件下的 TestCase 的 子類并且執(zhí)行以’test’ 開頭的函數(shù)
- 若需要跨文件測(cè)試唆迁,則只需 import 含 testBase 子類的 py 文件再調(diào) 用 unittest.main() 即可
- startUp 與 tearDown 函數(shù)
- startUp 將會(huì)在每個(gè) test 函數(shù)執(zhí)行前被調(diào)用
- tearDown 將會(huì)在每個(gè) test 函數(shù)執(zhí)行后被調(diào)用
- 通常用來(lái)初始化以及清除測(cè)試過(guò)程中的一些代碼
- 常用的TestCase函數(shù):
- assert_(expr[, msg]) 與 failUnless(expr[, msg])
- 會(huì)對(duì)不正確的結(jié)果報(bào)錯(cuò)
- assertEqual(x, y[, msg]) 與 failUnlessEqual(x, y[, msg])
- 值不等時(shí)報(bào)錯(cuò)并輸出二者的值
- assertAlmostEqual(x, y[, places[, msg]]) 與 failUnlessAlmostEqual(x, y[, places[, msg]])
- 值不近似等時(shí)報(bào)錯(cuò),用于浮點(diǎn)數(shù)的判等
- assertRaises(exc, callable, ...) 與 failUnlessRaises(exc, callable, ...)
- 該回調(diào)函數(shù)沒有拋出 exc 的異常則報(bào)錯(cuò)
- assert_(expr[, msg]) 與 failUnless(expr[, msg])
下面是一個(gè)樣例
class ProductTestCase(unittest.TestCase):
def testIntegers(self):
x = 3
y = 4
p = my_math.product(x, y)
self.failUnless(p == x*y, 'Integer?multiplication?failed')
if __name__ == '__main__': unittest.main()
*************************Wrong*************************
F
========================================================
FAIL: testIntegers (__main__.ProductTestCase)
-------------------------------------------------------
Traceback (most recent call last):
File "test_my_math.py", line 17, in testIntegers self.failUnless(p == x*y, 'Integer?multiplication? failed')
AssertionError: Integer multiplication failed
-------------------------------------------------------
Ran 1 tests in 0.001s
FAILED (failures=1)
*************************Correct*************************
.
-------------------------------------------------------
Ran 1 tests in 0.001s
OK
- 當(dāng)測(cè)試結(jié)果正確時(shí)竞穷,返回一個(gè)
.
而不正確時(shí)是返回一個(gè)F
的
源碼檢查
- PyChecker
- 檢查 python 源碼錯(cuò)誤唐责,例如傳參錯(cuò)誤,沒有導(dǎo)入模塊瘾带,同一作用域 中重定義函數(shù)鼠哥、類方法等。
- 使用:pychecker [options] file1.py file2.py ...
- PyLint
- 支持大部分 PyChecker 功能
- 更強(qiáng)大的功能看政,例如檢查變量名是否符合規(guī)定朴恳,檢查一行代碼的長(zhǎng) 度,一個(gè)聲明過(guò)的接口是否被實(shí)現(xiàn)
- 使用:pylint [options] module_or_package
- 結(jié)合 unittest 使用
- 代碼中嵌入
- PyChecker 與 PyLint 集成到 IDE
Django單元測(cè)試
講了這么多python的單元測(cè)試允蚣,那如何進(jìn)行Django的單元測(cè)試呢于颖?
- 在Django的單元測(cè)試中,仍然推薦使用python的unittest模塊嚷兔,像我們剛剛在上面提到的使用方法森渐,使用類名為django.test.TestCase,繼承于python的unittest.TestCase冒晰。
class TestDefault(TestCase):
def setUp(self):
# 設(shè)置配置
settings.IGNORE_WECHAT_SIGNATURE = True
# user1 => not bind
# user2 => bind
User.objects.create(open_id='abc')
User.objects.create(open_id='a', student_id='2016013265')
# textMsgs => 用戶一般可能輸入(成功)
self.textMsgs = ['balabala', 'gg', '搶火車票']
# 是否返回幫助
def is_default(self, content):
pattern = '對(duì)不起同衣,沒有找到您需要的信息:('
return content.find(pattern) != -1
def test_text(self):
users = User.objects.all()
for user in users:
for textMsg in self.textMsgs:
fromUser = user.open_id
curTime = str(getTimeStamp(datetime.datetime.now()))
msgId = str(random.randint(0, 99999)) + curTime
data = getTextXml(fromUser, curTime, textMsg, msgId)
response = self.client.post(
path='/wechat/',
content_type='application/xml',
data=data
)
content = str(response.content.decode('utf-8'))
self.assertEqual(self.is_default(content), True)
- 執(zhí)行目錄下所有的測(cè)試(所有的test*.py文件):
python manage.py test
運(yùn)行測(cè)試的時(shí)候,測(cè)試程序會(huì)在所有以test開頭的文件中查找所有的test cases(inittest.TestCase的子類),自動(dòng)建立測(cè)試集然后運(yùn)行測(cè)試壶运。(注意是所有app的test文件耐齐,包括子目錄中的)
- 執(zhí)行項(xiàng)目的所有的test測(cè)試:
python manage.py test
運(yùn)行結(jié)果:
- 執(zhí)行項(xiàng)目某個(gè)下tests包里的測(cè)試:
python manage.py xxx.tests
- 單獨(dú)執(zhí)行某個(gè)test case:
python manage.py xxx.TestDefault
- 單獨(dú)執(zhí)行某個(gè)測(cè)試方法:
python manage.py xxx.TestDefault.testxxx/py
- 通配測(cè)試文件名:
python manage.py test–pattern=”tests_*.py”
- 啟用warnings提醒:
python -Wall manage.py test
數(shù)據(jù)庫(kù)
測(cè)試是需要數(shù)據(jù)庫(kù)的,django會(huì)為測(cè)試單獨(dú)生成數(shù)據(jù)庫(kù)蒋情。不管你的測(cè)試是否通過(guò),當(dāng)你所有的測(cè)試都執(zhí)行過(guò)后,這個(gè)測(cè)試數(shù)據(jù)庫(kù)就會(huì)被銷毀埠况。
- 默認(rèn)情況下,測(cè)試數(shù)據(jù)庫(kù)的名字是test_DATABASE_NAME,DATABASE_NAME是你在settings.py里配置的數(shù)據(jù)庫(kù)名;
如果你需要給測(cè)試數(shù)據(jù)庫(kù)一個(gè)其他的名字,在settings.py中指定TEST_DATABASE_NAME的值 - 使用sqlite3時(shí)棵癣,數(shù)據(jù)庫(kù)是在內(nèi)存中創(chuàng)建的辕翰。
除了數(shù)據(jù)庫(kù)是單獨(dú)創(chuàng)建的以外,測(cè)試工具會(huì)使用相同的數(shù)據(jù)庫(kù)配置--DATABASE_ENGINE, DATABASE_USER, DATABASE_HOST等等.
創(chuàng)建測(cè)試數(shù)據(jù)庫(kù)的用戶DATABASE_USER(settings中)指定,所以你需要確認(rèn) DATABASE_USER有足夠的權(quán)限去創(chuàng)建數(shù)據(jù)庫(kù)。
為了保證所有的測(cè)試都從干凈的數(shù)據(jù)庫(kù)開始浙巫,執(zhí)行順序如下:
- 1.所有的TestCase子類首先運(yùn)行金蜀。
- 2.所有其他的單元測(cè)試(unittest.TestCase,SimpleTestCase,TransactionTestCase)刷后。
- 3.其它的測(cè)試(例如doctests等)
加速測(cè)試
- 可以將PASSWORD_HASHERS設(shè)置為更快的算法:
PASSWORD_HASHERS = (
'django.contrib.auth.hashers.MD5PasswordHasher',
)
travis CI與django的單元測(cè)試
- 在.travis.yml文件中加入(修改):
script:
- python manage.py test
參考
- Beginning Python From Novice to Professional, Second Edition
- https://blog.csdn.net/runnoob_1115/article/details/78458658
- https://m.pythontab.com/article/843
- https://medium.com/@MicroPyramid/set-up-travis-ci-for-django-project-427d6dd2f46c