文章詳情頁
python - scrapy無法爬取數(shù)據(jù),并且不能創(chuàng)建txt文件
瀏覽:87日期:2022-06-29 16:13:49
問題描述
問題解答
回答1:是xpath解析路徑的問題,謝謝大家
回答2:應(yīng)該是寫入模式有問題,試試 ab.
回答3:在linux運(yùn)行的吧,是不是有權(quán)限問題?
回答4:看日志輸出好像scrapy遇到robot.txt提前退出了,在settings中將ROBOTSTXT_OBEY改為ROBOTSTXT_OBEY = False試試。還不行就打斷點(diǎn)調(diào)試吧
排行榜

熱門標(biāo)簽