文章詳情頁
python - pyspider爬pdf爬了一小段時間后就不動了
瀏覽：100日期：2022-08-06 15:07:58
問題描述
下載了一小部分之后就不動了，stop之后重新跑也沒有任何反應，有人知道是怎么回事嗎？謝謝大家。
問題解答
回答1：放代碼吧 騷年
回答2：根據 dashboard 最上方的信息
scheduler 到 fetcher 有100條隊列中的任務fetcher 到 processor 也有100條隊列中的任務processor 下游都是空的
因為默認的隊列容量為 100，這說明在 processor 發生了堵塞，那就要看 processor 在干什么，是不是死掉了。
相關文章：
1. node.js - webpack-dev-server正常運行，webpack打包卻出錯，怎么辦？2. node.js - nodejs,express搭建，為什么ejs模板被解析成pre了？3. javascript - 關于iscroll的一段代碼，希望有人解釋4. 我何時應該在Java中使用JFrame.add（component）和JFrame.getContentPane（）。add（component）5. javascript - 不定高度動畫怎么實現？6. android - 哪位大神知道java后臺的api接口的對象傳到前端后輸入日期報錯，是什么情況？求大神指點7. html5 - 請問一下寫H5的時候 你們都是兼容那些手機8. 輸入地址報以下截圖錯誤，怎么辦？9. php自學從哪里開始？10. mysql - 瞬間流量很高的網站，要頻繁的插入數據到數據庫，應該怎么解決這個問題？
排行榜
網公網安備