文章詳情頁
我要在命令行同時不間斷地運行八九個python爬蟲程序（爬不同的網(wǎng)站）？
瀏覽：92日期：2022-08-21 18:56:02
問題描述
但是過一段時間總有一兩個程序會無響應，好像是被掛起了，CPU占用率并不高，不到10％，內存占用也不算多，60％左右，爬蟲程序是去批量下載文件，平均每個幾兆到十幾兆。我設置了這幾個程序的優(yōu)先級高于普通標準，但是還是會出現(xiàn)無響應的狀況。版本 python 2.7
求問:這個問題算不算進程被掛起？以及應該如何解決這個問題？
謝謝！
問題解答
回答1：這種問題得自己調，多打log
回答2：Python 有 GIL
上一條：flask - Python使用redis發(fā)布訂閱時，監(jiān)聽頻道時出現(xiàn)的問題？【一句話描述不清楚，請各位細看內容】下一條：python - django queryset自定義排序問題
相關文章：
1. python小白 關于類里面的方法獲取變量失敗的問題2. thinkPHP5中獲取數(shù)據(jù)庫數(shù)據(jù)后默認選中下拉框的值，傳遞到后臺消失不見。有圖有代碼，希望有人幫忙3. linux運維 - python遠程控制windows如何實現(xiàn)4. Python2中code.co_kwonlyargcount的等效寫法5. javascript - 如何用最快的速度C#或Python開發(fā)一個桌面應用程序來訪問我的網(wǎng)站？6. django - Python error: [Errno 99] Cannot assign requested address7. mysql數(shù)據(jù)庫做關聯(lián)一般用id還是用戶名8. [python2]local variable referenced before assignment問題9. 求救一下，用新版的phpstudy，數(shù)據(jù)庫過段時間會消失是什么情況？10. python小白，關于函數(shù)問題
排行榜
熱門標簽
網(wǎng)公網(wǎng)安備