Python爬虫学习笔记(selenium库、隐性浏览器PhantomJs)

  • selenium库的使用:有利于解决JS渲染的问题,Splash库、PyV8库、Ghost.py库亦有同样效果
  1. 安装:pip install -U selenium
  2. 安装Chromedriver调用Chrome浏览器,下载与电脑安装的Chrome版本对应的 Chromedriver放入python根目录下的Script文件夹下
  3. 引用:CMD->python

from selenium import webdriver #引入库,模拟浏览器加载网页

  driver = webdriver.Chrome() #启动Chrome浏览器

  driver.get(‘https://www.baidu.com’) #打开百度首页

  driver.page_source #获取网页源码

*使用后台运行的隐性浏览器PhantomJs:

  1. 下载安装phantomJS参考:https://blog.csdn.net/qq_37245397/article/details/81543450

使用:CMD->python

from selenium import webdriver

driver = webdriver.PhantomJS() #启动phantomJS

driver.get(‘https://www.baidu.com’)  #后台phantomJS打开百度首页

driver.page_source  #获取百度首页源码

发布了33 篇原创文章 · 获赞 15 · 访问量 1万+

猜你喜欢

转载自blog.csdn.net/qq_33360009/article/details/104102376