網(wǎng)頁(yè)爬蟲(chóng) - Python爬蟲(chóng)入門(mén)知識(shí)
問(wèn)題描述
本人快大二了，自習(xí)了Python，語(yǔ)法基本會(huì)。想學(xué)下爬蟲(chóng)，但是感覺(jué)這涉及到好多知識(shí)啊，有沒(méi)有過(guò)來(lái)人總結(jié)下都有什么知識(shí)，或者Python爬蟲(chóng)該怎么學(xué)？
問(wèn)題解答
回答1：爬蟲(chóng)學(xué)習(xí)要從需求學(xué)習(xí)，你看網(wǎng)上那么多初級(jí)爬蟲(chóng)都是爬些什么段子，美女圖什么的，三天就能搞定這些簡(jiǎn)單的爬蟲(chóng)。
但是深入的話(huà)就是很難的，涉及到的方面也很多。
入門(mén)不是什么難事，可以看下這個(gè)--如何學(xué)習(xí)Python爬蟲(chóng)[入門(mén)篇] https://zhuanlan.zhihu.com/p/...
回答2：原理上就是http請(qǐng)求,再多一點(diǎn)就是session和cookie，再多就是驗(yàn)證碼識(shí)別。工具上就是請(qǐng)求工具可以用urllib2，更好是request庫(kù)，請(qǐng)求過(guò)來(lái)需要解析，那就是beautifulsoup。
Python 基礎(chǔ)教程 | 菜鳥(niǎo)教程 http://www.runoob.com/python/...
Beautiful Soup 4.2.0 文檔 — Beautiful Soup 4.2.0 documentation https://www.crummy.com/softwa...
爬蟲(chóng)性能：NodeJs VS Python - QueenKing - SegmentFault /a/11...
用KNN來(lái)進(jìn)行驗(yàn)證碼識(shí)別 - QueenKing - SegmentFault /a/11...
回答3：可以參考 Python-Scrapy 爬蟲(chóng)框架，這有中文手冊(cè)。
相關(guān)文章：
1. android - NavigationView 的側(cè)滑菜單中如何保存新增項(xiàng)（通過(guò)程序添加）2. tp5 不同控制器中的變量調(diào)用問(wèn)題3. 微信小程序可以用gulp,webpack嗎？4. mysql服務(wù)無(wú)法啟動(dòng)1067錯(cuò)誤，誰(shuí)知道正確的解決方法？5. ueditor上傳服務(wù)器提示后端配置項(xiàng)沒(méi)有正常加載，求助！！！！！6. python - 為什么正常輸出中文沒(méi)有亂碼，zip函數(shù)之后出現(xiàn)中文編程unicode編碼的問(wèn)題，我是遍歷輸出的啊。7. 老師 我是一個(gè)沒(méi)有學(xué)過(guò)php語(yǔ)言的準(zhǔn)畢業(yè)生 我希望您能幫我一下8. 這段代碼既不提示錯(cuò)誤也看不到結(jié)果，請(qǐng)老師明示錯(cuò)在哪里，謝謝！9. php7.3.4中怎么開(kāi)啟pdo驅(qū)動(dòng)10. 提示語(yǔ)法錯(cuò)誤語(yǔ)法錯(cuò)誤: unexpected ’abstract’ (T_ABSTRACT)
網(wǎng)公網(wǎng)安備