BeautifulSoup是HTML 解析器 。
进一步的讨论实际上取决于您所处的具体情况以及特定网页的复杂性。
如果您需要与网页进行交互:提交表单,单击按钮,滚动等-您需要使用利用真实浏览器的工具,例如
selenium。
例如,在某些情况下,如果提交表单时不涉及任何javascript
mechanize,您也可以使用。
而且,有时您可以通过简单地使用
urllib2或链接来处理它
requests。

BeautifulSoup是HTML 解析器 。
进一步的讨论实际上取决于您所处的具体情况以及特定网页的复杂性。
如果您需要与网页进行交互:提交表单,单击按钮,滚动等-您需要使用利用真实浏览器的工具,例如
selenium。
例如,在某些情况下,如果提交表单时不涉及任何javascript
mechanize,您也可以使用。
而且,有时您可以通过简单地使用
urllib2或链接来处理它
requests。