文章詳情頁
python - 在編寫scrapy爬蟲的時候rules中allow的書寫問題
瀏覽：188日期：2022-08-01 16:58:44
問題描述
在編寫爬取58同城二手手機出售的信息的時候，rules里的allow應該怎么寫？它里面給出的下一頁或者第二頁第三頁等等的鏈接給出的都是縮減的鏈接，那么rules里的allow應該要怎么寫呢？有哪位高手可以指點一二嘛？謝謝~
問題解答
回答1：縮減的鏈接可以用urljoin()組合啊
相關文章：
1. 關于docker下的nginx壓力測試2. Docker for Mac 創建的dnsmasq容器連不上/不工作的問題3. mac里的docker如何命令行開啟呢？4. 關docker hub上有些鏡像的tag被標記““This image has vulnerabilities””5. docker容器呢SSH為什么連不通呢？6. nignx - docker內nginx 80端口被占用7. docker - 各位電腦上有多少個容器啊？容器一多，自己都搞混了，咋辦呢？8. docker-compose 為何找不到配置文件？9. docker 下面創建的IMAGE 他們的 ID 一樣？這個是怎么回事？？？？10. angular.js使用$resource服務把數據存入mongodb的問題。
排行榜
網公網安備