文章詳情頁
我要在命令行同時不間斷地運(yùn)行八九個python爬蟲程序（爬不同的網(wǎng)站）？
瀏覽：102日期：2022-08-21 18:56:02
問題描述
但是過一段時間總有一兩個程序會無響應(yīng)，好像是被掛起了，CPU占用率并不高，不到10％，內(nèi)存占用也不算多，60％左右，爬蟲程序是去批量下載文件，平均每個幾兆到十幾兆。我設(shè)置了這幾個程序的優(yōu)先級高于普通標(biāo)準(zhǔn)，但是還是會出現(xiàn)無響應(yīng)的狀況。版本 python 2.7
求問:這個問題算不算進(jìn)程被掛起？以及應(yīng)該如何解決這個問題？
謝謝！
問題解答
回答1：這種問題得自己調(diào)，多打log
回答2：Python 有 GIL
上一條：flask - Python使用redis發(fā)布訂閱時，監(jiān)聽頻道時出現(xiàn)的問題？【一句話描述不清楚，請各位細(xì)看內(nèi)容】下一條：python - django queryset自定義排序問題
相關(guān)文章：
1. css - 如何把一個視圖放在左浮動定位的視圖的上面？2. javascript - axios請求回來的數(shù)據(jù)組件無法進(jìn)行綁定渲染3. php多任務(wù)倒計時求助4. python的正則怎么同時匹配兩個不同結(jié)果？5. javascript - vue中怎么使用原生js插件6. javascript - 請問下面代碼中的...是擴(kuò)展運(yùn)算符還是操作運(yùn)算符？這樣寫是什么意思？7. javascript - 小demo：請教怎么做出類似于水滴不斷擴(kuò)張的效果？8. css - 子元素跑到父元素外面9. MySQL的聯(lián)合查詢[union]有什么實(shí)際的用處10. javascript - jquery怎么讓a標(biāo)簽跳轉(zhuǎn)后保持tab的樣式
排行榜
熱門標(biāo)簽
網(wǎng)公網(wǎng)安備