文章詳情頁(yè)
python - pyspider爬pdf爬了一小段時(shí)間后就不動(dòng)了
瀏覽：128日期：2022-08-06 15:07:58
問(wèn)題描述
下載了一小部分之后就不動(dòng)了，stop之后重新跑也沒(méi)有任何反應(yīng)，有人知道是怎么回事嗎？謝謝大家。
問(wèn)題解答
回答1：放代碼吧 騷年
回答2：根據(jù) dashboard 最上方的信息
scheduler 到 fetcher 有100條隊(duì)列中的任務(wù)fetcher 到 processor 也有100條隊(duì)列中的任務(wù)processor 下游都是空的
因?yàn)槟J(rèn)的隊(duì)列容量為 100，這說(shuō)明在 processor 發(fā)生了堵塞，那就要看 processor 在干什么，是不是死掉了。
上一條：網(wǎng)頁(yè)爬蟲(chóng) - python爬蟲(chóng)翻頁(yè)問(wèn)題，請(qǐng)問(wèn)各位大神我這段代碼怎樣翻頁(yè)，還有價(jià)格要登陸后才能看到，應(yīng)該怎么解決下一條：python - 如何獲取rabbitmq連接的celery的個(gè)數(shù)
相關(guān)文章：
1. javascript - 微信網(wǎng)頁(yè)開(kāi)發(fā)從菜單進(jìn)入頁(yè)面后，按返回鍵沒(méi)有關(guān)閉瀏覽器而是刷新當(dāng)前頁(yè)面，求解決？2. mysql replace 死鎖3. android - 安卓做前端，PHP做后臺(tái)服務(wù)器 有什么需要注意的？4. mysql - ubuntu開(kāi)啟3306端口失敗,有什么辦法可以解決？5. 求救一下，用新版的phpstudy，數(shù)據(jù)庫(kù)過(guò)段時(shí)間會(huì)消失是什么情況？6. extra沒(méi)有加載出來(lái)7. python3.x - Python not 運(yùn)算符的問(wèn)題8. python - 數(shù)據(jù)與循環(huán)次數(shù)對(duì)應(yīng)不上9. mysql - C#連接數(shù)據(jù)庫(kù)時(shí)一直這一句出問(wèn)題int i = cmd.ExecuteNonQuery();10. python小白，關(guān)于函數(shù)問(wèn)題
排行榜
熱門標(biāo)簽
網(wǎng)公網(wǎng)安備