显示标题是被h1中的p标签包含, 使用正常xpath进行获取
title = resp.xpath('//[@]/div/h1/p/text()').extract()
获取到title为空, 但解析abstract却能获取到, 说明不是xpath的原因, 百度了一下
解决办法: 使用另外的方式获取h1中的p标签里的内容title = resp.xpath('//div[@]/h1/following-sibling::p/text()').extract()
获取标题成功
但是问题是为什么获取不到? 下午测试后在记录
通过测试 只要是在h标签中的值, 都没办法通过正常语法获取,如下
只能通过使用
value6 = tree.xpath("//div[@class='body-div2']/h2/following-sibling::p/text()")
print(value6)
这种方式获取h中的值
