文章詳情頁
python - scrapy無法爬取數據，并且不能創建txt文件
瀏覽：186日期：2022-06-29 16:13:49
問題描述
問題解答
回答1：是xpath解析路徑的問題，謝謝大家
回答2：應該是寫入模式有問題，試試 ab.
回答3：在linux運行的吧，是不是有權限問題？
回答4：看日志輸出好像scrapy遇到robot.txt提前退出了，在settings中將ROBOTSTXT_OBEY改為ROBOTSTXT_OBEY = False試試。還不行就打斷點調試吧
排行榜
網公網安備