[Anaconda2]Selenium+PhantomJS环境搭建

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/zhihaoma/article/details/53169458

最近在学习python的js解析,发现使用Selenium+PhantomJS的方案还是比较适合我的,以下是环境配置教程。

Selenium及PhantomJS介绍:

Selenium是一个用于Web应用程序测试的工具,Selenium测试直接运行在浏览器中,就像真正的用户在操作一样。支持的浏览器包括IE、Mozilla Firefox、Chrome等。
Phantom JS是一个服务器端的 JavaScript API 的 WebKit。其支持各种Web标准: DOM 处理, CSS 选择器, JSON, Canvas, 和 SVG。

安装环境:

Windows 7 (64位)
Anaconda2(python 2.7.11)
配置过程:
1. 使用pip安装Selenium
命令: pip install -U selenium,会发现Selenium目录已下载到Anaconda的目录下。
2. 安装PhantomJS
到PhantomJS的官方网站上下载,然后将phantomjs/lib目录下的phantomjs.exe文件放到python的安装目录,即:Anaconda2目录下。
如果想使用Chrome来实现解析的,请下载GG浏览器的相应驱动(同时需要安装chrome浏览器),如上图中的第一个程序,第二个程序就是PhantomJS了。

如果想使用Firefox来实现解析,则需要安装Selenium提供的firefox插件,位于python安装目录Lib\site-packages\selenium\webdriver\firefox\webdriver.xpi,请拖入到firefox浏览器中,然后重启浏览器即可。

测试

from selenium import webdriver

driver = webdriver.PhantomJS()
driver.get("http://news.sina.com.cn/c/2013-07-11/175827642839.shtml")
print driver.title#获取标题
print driver.find_element_by_id("media_comment").text#获取评论数,是动态加载的
print driver.
print driver.page_source#获取js执行后的源码

driver.quit()

猜你喜欢

转载自blog.csdn.net/zhihaoma/article/details/53169458
今日推荐