51Testing软件测试论坛

标题: 如何爬网页内嵌的多页表格？ [打印本页]

作者: 测试积点老人 时间: 2022-7-26 13:10
标题: 如何爬网页内嵌的多页表格？

https://www.gddqt.com/#/toll 想要里面的价格表，方便查找
用selenium xpath能把第一页的内容读出来，
由于查看xpath发现翻页后的位置都是一样的，
所以使用了next.click翻页，
翻页也是能成功翻页的，但是翻页后再xpath出来的内容还是第一页的……

一边试一边改，已经混乱……能顺利运行，但读了两次第一页表的text出来我想把全部页面的表格内容爬下来……

作者: qqq911 时间: 2022-7-27 10:43
做个数组去爬取

作者: bellas 时间: 2022-7-27 13:28
数据去爬

作者: 郭小贱 时间: 2022-7-27 13:58
翻页成功数据没刷新？

作者: litingting0214 时间: 2022-7-27 15:00
使用数组

作者: jingzizx 时间: 2022-7-27 17:14
保存后在查吧

欢迎光临 51Testing软件测试论坛 (http://bbs.51testing.com/)