文章詳情頁(yè)
python - pyspider爬pdf爬了一小段時(shí)間后就不動(dòng)了
瀏覽：244日期：2022-08-06 15:07:58
問(wèn)題描述
下載了一小部分之后就不動(dòng)了，stop之后重新跑也沒(méi)有任何反應(yīng)，有人知道是怎么回事嗎？謝謝大家。
問(wèn)題解答
回答1：放代碼吧 騷年
回答2：根據(jù) dashboard 最上方的信息
scheduler 到 fetcher 有100條隊(duì)列中的任務(wù)fetcher 到 processor 也有100條隊(duì)列中的任務(wù)processor 下游都是空的
因?yàn)槟J(rèn)的隊(duì)列容量為 100，這說(shuō)明在 processor 發(fā)生了堵塞，那就要看 processor 在干什么，是不是死掉了。
上一條：網(wǎng)頁(yè)爬蟲(chóng) - python爬蟲(chóng)翻頁(yè)問(wèn)題，請(qǐng)問(wèn)各位大神我這段代碼怎樣翻頁(yè)，還有價(jià)格要登陸后才能看到，應(yīng)該怎么解決下一條：python - 如何獲取rabbitmq連接的celery的個(gè)數(shù)
相關(guān)文章：
1. python小白 自學(xué)看書(shū)遇到看不懂的地方2. javascript - avalon.js ms-on 事件綁定無(wú)效 ?3. javascript - vue中使用prop傳遞數(shù)據(jù)問(wèn)題4. javascript - 連續(xù)點(diǎn)擊觸發(fā)mouseleave事件5. php對(duì)mysql提取數(shù)據(jù)那種速度更快6. DADB.class.php文件的代碼怎么寫(xiě)7. shell - mysql更新錯(cuò)誤8. javascript - immutable配合react提升性能？9. mysql - 在log日志中已知用戶(hù)的某一步操作，如何獲取其上一步操作？10. 網(wǎng)頁(yè)爬蟲(chóng) - 如何使用使用java抓取信息并制作一個(gè)排名系統(tǒng)？
排行榜
熱門(mén)標(biāo)簽
網(wǎng)公網(wǎng)安備