栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 软件开发 > 后端开发 > Python

Python 简单数据提取

Python 更新时间: 发布时间: IT归档 最新发布 模块sitemap 名妆网 法律咨询 聚返吧 英语巴士网 伯小乐 网商动力

Python 简单数据提取

学习目标:

提示:简单数据提取


学习内容:
import threading as td
from selenium import webdriver


class MyThread(td.Thread):
    def __init__(self, target, args=()):
        super(MyThread, self).__init__()
        self.target = target
        self.args = args

    def run(self):
        self.result = self.target(*self.args)

    def get_result(self):
        try:
            return self.result
        except:
            return None




def get_url_list(dr):
    dr.implicitly_wait(5)
    try:
        list_data=dr.find_elements_by_xpath('')
        return list_data
    except:
        return "失败"
    finally:
        dr.implicitly_wait(30)


def search(name, delay):
    driver_path = "F:\个人学习资料\学习\爬虫\chromedriver_win32+(2)\chromedriver.exe"
    driver = webdriver.Chrome(executable_path=driver_path)
    driver.implicitly_wait(30)
    driver.get('')
    driver.implicitly_wait(30)
    list_data = get_url_list(driver)
#     进行内容页面处理
    check_page_num(driver)


def check_page_num(dr):
    dr.implicitly_wait(20)
    try:
        # 当打开页面为3个的时候,关闭第2个页面
        if (len(dr.window_handles) == 3):
            dr.switch_to.window(dr.window_handles[1])
            dr.close()
        for handle in dr.window_handles:
            dr.switch_to.window(handle)
        data_value = dr.find_element_by_xpath("//table[@id='taskList']/tbody/tr/td[contains(text(),'APF')]/following-sibling::td[3]").text
        return data_value
    except:
        return 0
    finally:
        dr.implicitly_wait(5)
        dr.switch_to.window(dr.window_handles[0])
        dr.implicitly_wait(5)

# 按间距中的绿色按钮以运行脚本。
if __name__ == '__main__':
    t1 = MyThread(search, args=('thread-1', 1))
    t1.start()
    t1.join()
    t1.get_result()
转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/840372.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号