版权声明:菜鸟的蜕变 https://blog.csdn.net/IdealSpring/article/details/82863713
一、背景
想要实现一个Java版本的爬虫,目前主流的怕从是Python,但是我想用Java语言自己开发一个。学习路线Selenium3+无头浏览器+分布式。高楼大厦,从地基打起。
至于Selenium3是什么,做什么用的,我这里就不介绍了,自己去网上找,很多。
二、文档安排
主要分成:基础篇,练习篇,框架设计篇。主要的框架设计思想还是POM,即页面对象模型。
三、环境搭建
3.1 所需组件及工具
JDK、Idea、Selenium for Java、Selenium 在不同浏览器上的driver插件
3.2 安装和配置JDK和Idea
这个度娘上找吧,很多(这里给出一篇如果破解idea文章:https://blog.csdn.net/IdealSpring/article/details/81267973)
3.3 下载Selenium相关包和工具
方式一:自己去官网上下载:http://www.seleniumhq.org/download/
方式二:网盘链接https://pan.baidu.com/s/1gBQW9-YORtPy2wp-67PfBQ
3.4 创建一个Selenium的Java项目
1)打开idea创建Java项目
2)导入jar包
3)完成即OK