使用Python Webbrowser模块打开URL却无法获取网页源代码怎么办？

使用selenium破解python webbrowser的页面源代码获取难题

在编写python脚本时，您可能遇到过使用webbrowser模块打开url后无法获取网页源代码的情况。以下是一个解决此问题的技巧。

webbrowser模块本身不提供获取页面源代码的方法。但是，我们可以利用另一个库——selenium来完成这项任务。

使用selenium获取页面源代码

立即学习“Python免费学习笔记（深入）”；

selenium是一个用于web自动化测试的库。它包含一个page_source方法，可以返回当前浏览器的页面源代码。以下是步骤：

1. 导入selenium模块。
2. 使用firefox或chrome等浏览器创建一个webdriver对象。
3. 调用webdriver对象的get()方法打开所需的url。
4. 使用page_source属性获取页面的源代码。

代码示例

from selenium import webdriver  # 创建一个WebDriver对象 driver = webdriver.Firefox()  # 打开一个URL driver.get("https://www.google.com.hk/search?num=30&q=爬虫")  # 获取页面源代码 page_source = driver.page_source  # 您可以使用page_source变量做你想做的事情

通过这种方式，您可以使用selenium轻松地获取webbrowser打开的网页源代码。