栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 面试经验 > 面试问答

用selenium刮网

面试问答 更新时间: 发布时间: IT归档 最新发布 模块sitemap 名妆网 法律咨询 聚返吧 英语巴士网 伯小乐 网商动力

用selenium刮网

结果是在一个iframe -切换到它,然后得到

.page_source

iframe = driver.find_element_by_css_selector("#mainContent iframe")driver.switch_to.frame(iframe)

我还要添加一个等待表加载的方法:

from selenium.webdriver.common.by import Byfrom selenium.webdriver.support.ui import WebDriverWaitfrom selenium.webdriver.support import expected_conditions as ECwait = WebDriverWait(driver, 10)# locate and switch to the iframeiframe = driver.find_element_by_css_selector("#mainContent iframe")driver.switch_to.frame(iframe)# wait for the table to loadwait.until(EC.visibility_of_element_located((By.CSS_SELECTOR, '.companyName')))print(driver.page_source)


转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/594955.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号