51Testing软件测试论坛

 找回密码
 (注-册)加入51Testing

QQ登录

只需一步,快速开始

微信登录,快人一步

手机号码,快捷登录

查看: 2430|回复: 1
打印 上一主题 下一主题

[求助] JAVA中用selenium爬取动态数据(百度的解决方案都没有解决)

[复制链接]
  • TA的每日心情
    开心
    2020-5-10 08:18
  • 签到天数: 2 天

    连续签到: 2 天

    [LV.1]测试小兵

    跳转到指定楼层
    1#
    发表于 2020-5-9 21:01:11 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
    问题描述

    爬取在点击“查看更多”按钮后js渲染后的HTML源码


    测试代码
    1. if (isNumeric(code)){
    2.             System.out.println("是数字");
    3.             //点击登录操作
    4.             driver.get(PropertiesUtil.getValue("chaoxing.contentUrl"));
    5.             Thread.sleep(5000);
    6.             //点击查看更多
    7.             WebElement allMore = driver.findElement(By.id("more_reply"));
    8.             allMore.click();
    9.             //获取页面内容
    10.             WebElement element = driver.findElement(By.xpath("/html"));

    11.             System.out.println(element.getAttribute("outerHTML"));
    12.         WebElement btn = driver.findElement(By.className("zl_btn_right"));
    13.         btn.click();
    14.         Thread.sleep(3000);
    复制代码
    有没有大佬指导一下。。。。。

    邮箱地址:xinjun_zhangh@163.com

    本帖子中包含更多资源

    您需要 登录 才可以下载或查看,没有帐号?(注-册)加入51Testing

    x
    分享到:  QQ好友和群QQ好友和群 QQ空间QQ空间 腾讯微博腾讯微博 腾讯朋友腾讯朋友
    收藏收藏
    回复

    使用道具 举报

  • TA的每日心情
    开心
    2020-5-10 08:18
  • 签到天数: 2 天

    连续签到: 2 天

    [LV.1]测试小兵

    2#
     楼主| 发表于 2020-5-9 21:02:39 | 只看该作者
    获取不到js渲染后的HTML内容
    回复 支持 反对

    使用道具 举报

    本版积分规则

    关闭

    站长推荐上一条 /1 下一条

    小黑屋|手机版|Archiver|51Testing软件测试网 ( 沪ICP备05003035号 关于我们

    GMT+8, 2024-11-24 08:53 , Processed in 0.065611 second(s), 23 queries .

    Powered by Discuz! X3.2

    © 2001-2024 Comsenz Inc.

    快速回复 返回顶部 返回列表