文章詳情頁
網(wǎng)頁爬蟲 - Python爬蟲入門知識(shí)
瀏覽：306日期：2022-06-26 18:12:12
問題描述
本人快大二了，自習(xí)了Python，語法基本會(huì)。想學(xué)下爬蟲，但是感覺這涉及到好多知識(shí)啊，有沒有過來人總結(jié)下都有什么知識(shí)，或者Python爬蟲該怎么學(xué)？
問題解答
回答1：爬蟲學(xué)習(xí)要從需求學(xué)習(xí)，你看網(wǎng)上那么多初級(jí)爬蟲都是爬些什么段子，美女圖什么的，三天就能搞定這些簡單的爬蟲。
但是深入的話就是很難的，涉及到的方面也很多。
入門不是什么難事，可以看下這個(gè)--如何學(xué)習(xí)Python爬蟲[入門篇] https://zhuanlan.zhihu.com/p/...
回答2：原理上就是http請(qǐng)求,再多一點(diǎn)就是session和cookie，再多就是驗(yàn)證碼識(shí)別。工具上就是請(qǐng)求工具可以用urllib2，更好是request庫，請(qǐng)求過來需要解析，那就是beautifulsoup。
Python 基礎(chǔ)教程 | 菜鳥教程 http://www.runoob.com/python/...
Beautiful Soup 4.2.0 文檔 — Beautiful Soup 4.2.0 documentation https://www.crummy.com/softwa...
爬蟲性能：NodeJs VS Python - QueenKing - SegmentFault /a/11...
用KNN來進(jìn)行驗(yàn)證碼識(shí)別 - QueenKing - SegmentFault /a/11...
回答3：可以參考 Python-Scrapy 爬蟲框架，這有中文手冊(cè)。
上一條：python - Pycharm調(diào)試代碼進(jìn)行列表遍歷時(shí)，如何直接賦值指定元素下一條：python - 斗魚關(guān)注人數(shù)爬下來是張加載圖片，如何爬取關(guān)注人數(shù)
相關(guān)文章：
1. debian - docker依賴的aufs-tools源碼哪里可以找到啊？2. angular.js使用$resource服務(wù)把數(shù)據(jù)存入mongodb的問題。3. docker - 如何修改運(yùn)行中容器的配置4. macos - mac下docker如何設(shè)置代理5. docker start -a dockername 老是卡住，什么情況？6. docker網(wǎng)絡(luò)端口映射，沒有方便點(diǎn)的操作方法么？7. docker 下面創(chuàng)建的IMAGE 他們的 ID 一樣？這個(gè)是怎么回事？？？？8. docker api 開發(fā)的端口怎么獲取？9. dockerfile - 我用docker build的時(shí)候出現(xiàn)下邊問題 麻煩幫我看一下10. docker gitlab 如何git clone？
排行榜
熱門標(biāo)簽
網(wǎng)公網(wǎng)安備