51Testing软件测试论坛

 找回密码
 (注-册)加入51Testing

QQ登录

只需一步,快速开始

微信登录,快人一步

手机号码,快捷登录

查看: 1051|回复: 3
打印 上一主题 下一主题

在python爬取ipe的一些数据时,通过selenium库无法打开其中一步的网页

[复制链接]
  • TA的每日心情
    无聊
    8 小时前
  • 签到天数: 529 天

    连续签到: 1 天

    [LV.9]测试副司令

    跳转到指定楼层
    1#
    发表于 2022-1-18 13:33:10 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
    1测试积点
    问题遇到的现象和发生背景 在爬取过程中,倒数第五条语句无法正确执行,cookie没问题,这里我隐藏了
    1. import time
    2. import re
    3. from bs4 import BeautifulSoup
    4. from selenium import webdriver
    5. from pymongo import MongoClient

    6. browser = webdriver.Chrome()
    7. browser.get("http://www.ipe.org.cn/IndustryRecord/Regulatory.html")
    8. browser.maximize_window()

    9. cookie = {'name':'.ASPXAUTH','value':'*'}
    10. browser.add_cookie(cookie)

    11. time.sleep(1)
    12. browser.find_element_by_xpath('//*[@id="search_input"]').clear()
    13. browser.find_element_by_xpath('//*[@id="search_input"]').send_keys('常州月夜灯芯绒有限公司')
    14. browser.find_element_by_xpath('/html/body/div[2]/div[2]/div[2]/div/button').click()

    15. browser.find_element_by_xpath('//*[@id="uitab_wrap"]/div[1]/ul/li[5]').click()
    16. browser.find_element_by_xpath('//*[@id="table_con4"]/div[2]/table/tbody/tr/td[4]/a[1]').click()
    17. time.sleep(10)
    18. handles = browser.window_handles
    19. browser.switch_to.window(handles[-1])

    20. browser.quit()
    复制代码
    运行结果及报错内容 就显示了一堆DeprecationWarning和raise exception_class和Backtrace我的解答思路和尝试过的方法 用css方法也不行,我找了一些切换网页的办法也不行我想要达到的结果 在模拟浏览器中能够出现新的页面

    分享到:  QQ好友和群QQ好友和群 QQ空间QQ空间 腾讯微博腾讯微博 腾讯朋友腾讯朋友
    收藏收藏
    回复

    使用道具 举报

  • TA的每日心情
    慵懒
    7 小时前
  • 签到天数: 1519 天

    连续签到: 3 天

    [LV.Master]测试大本营

    2#
    发表于 2022-1-19 12:31:28 | 只看该作者
    直接跳转不可以么?
    回复

    使用道具 举报

  • TA的每日心情
    奋斗
    2024-10-22 14:23
  • 签到天数: 1007 天

    连续签到: 1 天

    [LV.10]测试总司令

    3#
    发表于 2022-1-19 14:26:47 | 只看该作者
    这块不是很清楚了...这个DeprecationWarning好像是关于被弃用的特征的警告。
    回复

    使用道具 举报

  • TA的每日心情
    奋斗
    10 小时前
  • 签到天数: 2815 天

    连续签到: 3 天

    [LV.Master]测试大本营

    4#
    发表于 2022-1-19 17:32:44 | 只看该作者
    正常找类似的是不是能够获取
    回复

    使用道具 举报

    本版积分规则

    关闭

    站长推荐上一条 /1 下一条

    小黑屋|手机版|Archiver|51Testing软件测试网 ( 沪ICP备05003035号 关于我们

    GMT+8, 2024-11-20 17:34 , Processed in 0.063937 second(s), 21 queries .

    Powered by Discuz! X3.2

    © 2001-2024 Comsenz Inc.

    快速回复 返回顶部 返回列表