测试积点老人 发表于 2021-7-5 13:59:41

用selenium爬gmaps評論,遇到瓶頸,求幫忙?

(任務)
我欲利用selenium爬gmaps評論,
其中會用到selenium模擬"滾軸捲動",來加載更多評論
(遇到的問題)
當滾軸滾動至約900則評論時(已經測試多個地點評論),便無法加載下去,想問一下可能解決方案

如上圖(loading的圓圈不停的轉,等超過半小時都沒反應)
delay_choices =
delay = random.choice(delay_choices)
for i in range(141):
      time.sleep(delay)
      scroll_box = driver.find_element_by_css_selector('.section-scrollbox') #find scroll box
      driver.execute_script('arguments.scrollTop = arguments.scrollHeight',scroll_box)#scroll to the bottom
      review_text = driver.find_elements_by_class_name("ODSEW-ShBeI-text")
      print(len(review_text))
(提供該部分code參考)

海海豚 发表于 2021-7-6 09:12:06

https://blog.csdn.net/GitChat/article/details/78578967   参考下

qqq911 发表于 2021-7-6 10:58:48

这种应该是瀑布流分页方式

bellas 发表于 2021-7-6 12:13:12

瀑布流分布

litingting0214 发表于 2021-7-6 13:47:44

瀑布流分布
页: [1]
查看完整版本: 用selenium爬gmaps評論,遇到瓶頸,求幫忙?