爬虫之selenium 安装与 chromedriver安装

今天学到一个有意思的插件，就是chromedriver，在爬虫的时候，如果网站反爬虫做的很好，自己又很想爬去里面的数据，那就可以用这个插件，虽然笨笨的，慢的一批，但是还有别的办法就不会用他啦，

这个东东主要是完全模拟浏览器点击页面，一步一步去找你要的东西，就跟个机器一样，不停的去执行命令

进入正题

你要确保自己有谷歌浏览器，要知道版本号，找到对应的chromedriver版本号，还要有selenium模块

使用：

直接使用pip安装

1 pip install selenium

用 Chrome 浏览器来测试

1 from selenium import webdriver
2 
3 browser = webdriver.Chrome()
4 browser.get('http://www.baidu.com/')

运行这段代码，会自动打开浏览器，然后访问百度。

如果程序执行错误，浏览器没有打开，那么应该是没有装 Chrome 浏览器或者 Chrome 驱动没有配置在环境变量里。下载驱动，然后将驱动文件路径配置在环境变量即可。

首先你需要一张对照表

linux 安装

chromedriver:

　　　　将下载的文件移动到软件应该呆的目录去:

　　　　sudo mv chromedriver /usr/local/bin/chromedriver

　　　　改变用户执行的权限：

　　　　sudo chmod u+x,o+x /usr/local/bin/chromedriver

　　　　检验是否正常使用：

　　　　chromedriver --version

展示如下就是成功啦，linux 安装还是很简单的，用起来也方便，入文章开头运行下，就知道啦

window安装

下载后将文件解压到python安装路径下的/Script目录下，该文件是一个.exe的文件，Script目录必须配置为系统的环境变量

如果再不会，百度上太多啦，我就不赘述了

之后会自己用一用，感觉挺好玩的