文章詳情頁
我要在命令行同時不間斷地運行八九個python爬蟲程序(爬不同的網(wǎng)站)?
瀏覽:100日期:2022-08-21 18:56:02
問題描述
但是過一段時間總有一兩個程序會無響應,好像是被掛起了,CPU占用率并不高,不到10%,內(nèi)存占用也不算多,60%左右,爬蟲程序是去批量下載文件,平均每個幾兆到十幾兆。我設(shè)置了這幾個程序的優(yōu)先級高于普通標準,但是還是會出現(xiàn)無響應的狀況。版本 python 2.7
求問:這個問題算不算進程被掛起?以及應該如何解決這個問題?
謝謝!
問題解答
回答1:這種問題得自己調(diào),多打log
回答2:Python 有 GIL
上一條:flask - Python使用redis發(fā)布訂閱時,監(jiān)聽頻道時出現(xiàn)的問題?【一句話描述不清楚,請各位細看內(nèi)容】下一條:python - django queryset自定義排序問題
相關(guān)文章:
1. javascript - node.js服務端渲染解疑2. javascript - 求助關(guān)于js正則問題3. html5 - 如何解決bootstrap打開模態(tài)modal窗口引起頁面抖動?4. javascript - 求助這種功能有什么好點的插件?5. objective-c - ios百度地圖定位問題6. 微信開放平臺 - Android調(diào)用微信分享不顯示7. html - css 如何添加這種邊框?8. html5 - rudy編譯sass的時候有中文報錯9. javascript - 關(guān)于定時器 與 防止連續(xù)點擊 問題10. 為何 localStorage、sessionStorage 屬于html5的范疇,但是為何 IE8卻支持?
排行榜

熱門標簽