51Testing软件测试论坛

标题: 爬虫测试，，，大佬速来 [打印本页]

作者: 小小猎魔人 时间: 2019-6-27 10:15
标题: 爬虫测试，，，大佬速来
现在有一个需求，是一个爬虫测试。爬虫从网上采集数据，经过处理存进数据库。如何保证数据的准确性和完整性？比如数据是不是采集全了，采集的数据对不对等等。
各位有经验的大佬指导下，思路，用例怎么写，越详细越好

作者: qqq911 时间: 2019-6-27 11:13
不好弄

作者: jingzizx 时间: 2019-6-27 11:20
除非自己设计一个

作者: abcsell 时间: 2019-6-27 13:26
人工对比

作者: 小小猎魔人 时间: 2019-6-27 14:24
1.数据量大，初期已经是百万级，人工只能抽查。
2.用一个爬虫去验证另一个爬虫，也走不通。

欢迎光临 51Testing软件测试论坛 (http://bbs.51testing.com/)