教你如何使用Python selenium
Selenium是一個(gè)用于測(cè)試網(wǎng)站的自動(dòng)化測(cè)試工具,支持各種瀏覽器包括Chrome、Firefox、Safar等瀏覽器(需要下載驅(qū)動(dòng)),之前是用來做測(cè)試網(wǎng)站的,后來發(fā)現(xiàn)也可以用來爬取數(shù)據(jù)(估計(jì)開發(fā)者都沒想到他開發(fā)的selenium被別人廣泛適用于爬蟲領(lǐng)域——笑)。
二、selenium的下載1.我這里是使用的Chrom瀏覽器 !注意不要忽視這個(gè)地方
2.python中selenium庫(kù)的下載(pycharm系列)
由于我用的pycharm的虛擬環(huán)境,所以我只需要在pycharm的終端下載第三方庫(kù)就行了,簡(jiǎn)單,方便,pycharm真是個(gè)好用的東西——O(∩_∩)O~
打開pycharm 打開pycharm的終端 輸入pip install selenium -i https://pypi.doubanio.com/simple (這是使用國(guó)內(nèi)鏡像網(wǎng)站下載selenium,下載速度較快) 等待片刻,結(jié)束 pip list ——查看自己下載的第三方庫(kù),檢查是否成功3.python中selenium庫(kù)的下載(cmd系列)
win+R輸入cmd 打開cmd 輸入pip install selenium -i https://pypi.doubanio.com/simple (這是使用國(guó)內(nèi)鏡像網(wǎng)站下載selenium,下載速度較快) 等待片刻,結(jié)束 pip list ——查看自己下載的第三方庫(kù),檢查是否成功4.selenium驅(qū)動(dòng)的下載(官網(wǎng)都是英文,看不懂)
打開你的Chrom瀏覽器查看你是什么版本的(幫助->about chrom),查看版本號(hào) 點(diǎn)擊右邊這個(gè)藍(lán)色的小可愛,沒錯(cuò)我是小可愛 ,找到與你的chrom瀏覽器版本相匹配的(沒有匹配的,相近的也可以,win都是32位的),下載 沒了,沒錯(cuò),你沒看錯(cuò),真的沒了5.selenium的環(huán)境配置,沒錯(cuò)又是這個(gè)煩人的環(huán)境配置 真想給他一腳
想必,這個(gè)時(shí)候已經(jīng)下載好了吧 下載好以后,很簡(jiǎn)單,解壓,然后——看3 最好(但是不是必要)創(chuàng)建一個(gè)文件夾放你解壓出來的geckodriver,然后復(fù)制你這個(gè)文件當(dāng)前的路徑(ctrl + c) 打開環(huán)境變量(此電腦->右鍵->屬性->高級(jí)系統(tǒng)配置->環(huán)境變量),在系統(tǒng)變量找到path,新建,ctrl + v 完事6.打開你的pycharm,新建一個(gè)py文件去寫出以下代碼
from selenium import webdriverimport time# 導(dǎo)入時(shí)間包和selenium包huohu = webdriver.Chrome()# 創(chuàng)建一個(gè)chome的selenium對(duì)象huohu.get('http://www.elong.com/')# 打開網(wǎng)站huohu.quit()# 退出
寫好后,運(yùn)行好,報(bào)錯(cuò)了,對(duì),報(bào)錯(cuò)了,可能你們不會(huì)報(bào)錯(cuò),反正我報(bào)錯(cuò)了
報(bào)錯(cuò)信息是:selenium.common.exceptions.WebDriverException: Message: ‘chromedriver’ executable needs to be in PATH.
意思是,你需要吧chromdriver放到路徑,我照著做了,可是呢,還是這個(gè)報(bào)錯(cuò)!
這是什么情況??明明我是按照教程來的啊
著急的我去群里請(qǐng)求大佬,大佬們直接無視我——::>_<::
然后又去找它——>好吧啦網(wǎng),左翻翻,右找找,終于找到了解決方案:
將chromdriver放在python解釋器的位置,我照著做了之后,就成功了。。。
好家伙,上面教程不是說隨便放的嗎?…
哎,人與人之間最基本的信任都沒有了
三、selenium的基本使用from selenium import webdriver# 導(dǎo)包driver = webdriver.Chrome()# 創(chuàng)建一個(gè)瀏覽器對(duì)象driver.get('https://m.elong.com/')# 訪問藝龍網(wǎng)driver.quit()# 關(guān)閉瀏覽器,也可以不關(guān)閉,但是最好關(guān)閉,養(yǎng)成一個(gè)打開后不忘記關(guān)閉的好習(xí)慣
然后我們就會(huì)發(fā)現(xiàn),瀏覽器界面一閃而過(為什么?因?yàn)轫?yè)面渲染完成后,就直接退出了),那么如何才能讓我們能夠觀察到呢?有請(qǐng)我們的time模塊,讓它睡會(huì)兒,就能觀察到了這樣改
from selenium import webdriverimport time# 導(dǎo)包driver = webdriver.Chrome()driver.get('https://m.elong.com/')time.sleep(5)# 頁(yè)面渲染完成后讓它睡5s,這樣就能觀察到了driver.quit()
OK,看到,代碼替我們打開了這個(gè)網(wǎng)址,并且展示了5s后關(guān)閉了
四、結(jié)語好了,相信大家已經(jīng)學(xué)會(huì)如何使用筷子了,那么讓我們?nèi)?dòng)用我們的筷子去把這個(gè)網(wǎng)站抓下來吧——笑,玩?zhèn)€老梗今天的筆記就到這里了(主要是不想寫了,一天當(dāng)然不可能只學(xué)會(huì)點(diǎn)這玩意),拜拜
到此這篇關(guān)于教你如何使用Python selenium的文章就介紹到這了,更多相關(guān)Python selenium內(nèi)容請(qǐng)搜索好吧啦網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持好吧啦網(wǎng)!
相關(guān)文章:
1. ASP中if語句、select 、while循環(huán)的使用方法2. html小技巧之td,div標(biāo)簽里內(nèi)容不換行3. xml中的空格之完全解說4. ASP中解決“對(duì)象關(guān)閉時(shí),不允許操作。”的詭異問題……5. XML入門的常見問題(四)6. php bugs代碼審計(jì)基礎(chǔ)詳解7. ASP使用MySQL數(shù)據(jù)庫(kù)的方法8. ASP動(dòng)態(tài)網(wǎng)頁(yè)制作技術(shù)經(jīng)驗(yàn)分享9. WMLScript的語法基礎(chǔ)10. msxml3.dll 錯(cuò)誤 800c0019 系統(tǒng)錯(cuò)誤:-2146697191解決方法
