文章詳情頁
python - 在編寫scrapy爬蟲的時(shí)候rules中allow的書寫問題
瀏覽：176日期：2022-08-01 16:58:44
問題描述
在編寫爬取58同城二手手機(jī)出售的信息的時(shí)候，rules里的allow應(yīng)該怎么寫？它里面給出的下一頁或者第二頁第三頁等等的鏈接給出的都是縮減的鏈接，那么rules里的allow應(yīng)該要怎么寫呢？有哪位高手可以指點(diǎn)一二嘛？謝謝~
問題解答
回答1：縮減的鏈接可以用urljoin()組合啊
相關(guān)文章：
1. 關(guān)docker hub上有些鏡像的tag被標(biāo)記““This image has vulnerabilities””2. docker-compose中volumes的問題3. boot2docker無法啟動(dòng)4. nignx - docker內(nèi)nginx 80端口被占用5. docker安裝后出現(xiàn)Cannot connect to the Docker daemon.6. dockerfile - 為什么docker容器啟動(dòng)不了？7. java - SSH框架中寫分頁時(shí)service層中不能注入分頁類8. node.js - antdesign怎么集合react-redux對(duì)input控件進(jìn)行初始化賦值9. 關(guān)于docker下的nginx壓力測(cè)試10. docker容器呢SSH為什么連不通呢？
排行榜
熱門標(biāo)簽
網(wǎng)公網(wǎng)安備