问题描述
1、在使用python实现自动化网络爬虫时,我使用到selenium来驱动谷歌Chrome浏览器来打开某一个网页,然后爬取数据,代码如下:
from selenium import webdriverimport timedriver = webdriver.Chrome()driver.get('https://klatasds.ecnu.edu.cn/xydt/list.htm')time.sleep(5)print(driver.page_source)
2、但是当执行到driver.get(url)访问网站时,页面是空白的,如下所示,没有正常显示该网站的数据
print输出的网页html也只有如下数据:
3、而我将该url网址收到复制到其他浏览器中访问是正常的,可以看到网页数据,说明这个网址是没有问题的。
原因分析:
既然手动复制到其他浏览器可以正常访问,排除网址和网络的问题,手动另起一个Chrome浏览器,复制访问该网站还是OK的,而且换成访问百度首页,也是可以的,说明不是Chromed