标签:
前两篇文章介绍了安装,此篇文章算是一个简单的进阶应用吧!它是在Windows下通过Selenium+Python实现自动访问Firefox和Chrome并实现搜索截图的功能。
[Python爬虫] 在Windows下安装PhantomJS和CasperJS及入门介绍(上)
[Python爬虫] 在Windows下安装PIP+Phantomjs+Selenium
自动访问Firefox
可以参照前文安装Selenium环境,目前Selenium这个用于Web应用程序测试的工具支持的浏览器包括IE、Mozilla Firefox、Mozilla Suite、Chrome等。但是由于Firefox是默认安装路径,webdriver可以正常访问它,而Chrome和IE需要设置driver路径。
1 from selenium import webdriver 2 from selenium.webdriver.common.keys import Keys 3 import sys 4 5 reload(sys) 6 sys.setdefaultencoding(‘gb18030‘) 7 driver = webdriver.Firefox() 8 driver.get("http://www.baidu.com") 9 assert "百度" in driver.title 10 elem = driver.find_element_by_name("wd") 11 elem.send_keys("Eastmount") 12 elem.send_keys(Keys.RETURN) 13 assert "谷歌" in driver.title 14 driver.save_screenshot(‘baidu.png‘) 15 driver.close() 16 driver.quit()
运行效果如下图所示,自动调用Firefox浏览器搜索,同时输出断言错误:
assert "谷歌" in driver.title AssertionError
from selenium import webdriver
from selenium.webdriver.common.keys import Keys
import sys
由于汉语中可能会遇到错误:reload(sys)
sys.setdefaultencoding(‘gb18030‘)
创建Firefoxwebdriver实例。其中Firefox最简单,其他Chrome还需要driver和配置路径。接下来通过driver.get()打开百度URL网页,webdriver会等待网页元素加载完成之后才把控制权交回脚本。但是,如果要打开了页面在加载的过程中包含了很多AJAX,webdriver可能无法准确判断页面何时加载完成。driver = webdriver.Firefox()
driver.get("http://www.baidu.com")
接下来使用断言判断文章的标题Title是否包含“百度”和“谷歌”。对应的标题是“百度一下,你就知道”,所以其中“百度”包括,而“谷歌”会出现断言报错。assert "百度" in driver.title
assert "谷歌" in driver.title
webdriver提供了很多如find_element_by_*的方法来匹配要查找的元素。如利用name属性查找方法find_element_by_name来定位输入框,审查元素name=wd。elem = driver.find_element_by_name("wd")
elem.send_keys("Eastmount")
elem.send_keys(Keys.RETURN)
最后是调用save_screenshot进行截图,但是图片是过程中的,怎样获取最后加载的图片呢?同时,操作完成并关闭浏览器。当然,也可以调用quit()方法,两者的区别在于:quit()方法会退出浏览器,而close()方法只是关闭页面,但如果只有一个页面被打开,close()方法同样会退出浏览器。driver.save_screenshot(‘baidu.png‘)
driver.close()
driver.quit()
1 import os 2 from selenium import webdriver 3 from selenium.webdriver.common.keys import Keys 4 5 chromedriver = "C:\Program Files (x86)\Google\Chrome\Application\chromedriver.exe" 6 os.environ["webdriver.chrome.driver"] = chromedriver 7 8 driver = webdriver.Chrome(chromedriver) 9 driver.get("http://www.python.org") 10 assert "Python" in driver.title 11 elem = driver.find_element_by_name("q") 12 elem.send_keys("selenium") 13 elem.send_keys(Keys.RETURN) 14 assert "Google" in driver.title 15 driver.close() 16 driver.quit()
需要放置chromedriver如下路径,同时可以通过代码设置。但是由于我的Chrome可能Bug一直未修复,总是打开错误。
driver = webdriver.Chrome(executable_path="G:\chromedriver.exe")
[Python爬虫] Selenium自动访问Firefox和Chrome并实现搜索截图
标签:
原文地址:http://www.cnblogs.com/eastmount/p/5055929.html