文章詳情頁
python - scrapy無法爬取數據,并且不能創建txt文件
瀏覽:86日期:2022-06-29 16:13:49
問題描述
問題解答
回答1:是xpath解析路徑的問題,謝謝大家
回答2:應該是寫入模式有問題,試試 ab.
回答3:在linux運行的吧,是不是有權限問題?
回答4:看日志輸出好像scrapy遇到robot.txt提前退出了,在settings中將ROBOTSTXT_OBEY改為ROBOTSTXT_OBEY = False試試。還不行就打斷點調試吧
排行榜
