python 用爬虫写网页测试

胖虎

以测试维基百科为例：

1. from urllib.request import urlopen
   
2. from bs4 import BeautifulSoup
   
3. import unittest
   
4. 
   
5. class TestWikipedia(unittest.TestCase):
   
6.     bsObj = None
   
7.     def setUpClass():
   
8.         global bsObj
   
9.         url = 'http://en.wikipedia.org/wiki/Monty_Python'
   
10.         bsObj = BeautifulSoup(urlopen(url))
    
11.         print('setting up the test')
    
12.     def test_titleTest(self):
    
13.         global bsObj
    
14.         pageTitle = bsObj.find("h1").get_text()
    
15.         self.assertEqual("Monty Python",pageTitle)
    
16.         print("tearing down the test")
    
17.     def test_contentExists(self):
    
18.         global bsObj
    
19.         content = bsObj.find("div",{"id":"mw-content-text"})
    
20.         self.assertIsNotNone(content)
    
21. 
    
22. 
    
23. if __name__=='__main__':
    
24.     unittest.main()

复制代码

写了两个测试，第一个测试页面标题是否为”Monty Python”,第二个测试页面是否有一个div节
点id属性是”mw-content-text”
注意这个页面的内容值加载一次由全局对象bsObj共享给其他测试，这是通过unittest类的函
数setUpClass来实现的，这个函数只在类的初始化阶段运行一次（与每个测试启动时都运行
的setUp函数不同），更方便。
结果：

1. .setting up the test
   
2. tearing down the test
   
3. setting up the test..
   
4. tearing down the test
   
5. 
   
6. ----------------------------------------------------------------------
   
7. Ran 3 tests in 2.568s
   
8. 
   
9. OK

复制代码

注意：单双引号无所谓，用作字符，字符串，注意有转义的时候尽量避免混淆，转单引号则外面用双引
号，反之亦然，三引号也可以用只是麻烦，另三引号可用作注释

Miss_love

梦想家

666

梦想家

赞

libingyu135

666

海海豚

谢谢分享~