python學習爬蟲？

如果你想深入學習爬蟲，那你肯定繞不過前端的知識，html+css+javascript更是其中的基礎知識了。

不過話說回來，你如果僅僅是想學習爬蟲拿來用，也不一定要系統地去學這些東西。有個名詞叫“學以致用”，你可以直接通過搜索“python爬蟲入門”，你就可以短時間學會簡單的爬蟲了。

但是長遠來說，你現在學會的這點小技巧，你是沒有辦法更靈活地使用爬蟲來滿足自己的需求的。

爬蟲爬的究竟是什么？通俗地說就是用編程的方式，讓計算機代替我們收集數據，其中爬的便是我們想要得到的公開數據。

一般來說，只要是通過瀏覽器看到的信息都是可爬的，但是這其中會涉及到一些技術和法律上的問題。

比如技術上，你想爬蟲，平臺會有反爬手段，如果判定你頻繁爬取信息，那你通過此IP將無法正常訪問信息。其中的IP、瀏覽器頭信息、referer等技術手段，用得好的話都可以讓無蟲可爬。

法律上，如果你爬取非公開數據，或者你高頻爬取導致平臺服務出現問題的，你很可能要到某個地方呆上一段時間。這個其實也可以理解，人家辛苦呈現的數據，被你反手一爬就爬完了，平臺不是很冤嗎？

所以爬蟲有風險，下手需謹慎。

前端是現在互聯網內容服務中不可或缺的一員，它擔當了直接與用戶交互的所有內容。

一般來說，IT開發主要分為兩個端，一個是前端，另一個則是后端了。

后端負責業務邏輯，前端負責頁面交互。

由于爬蟲主要是爬取顯示出來的東西，所以要學習的內容更多是前端這一塊，比如頁面是由什么組成？頁面是怎么交互的？數據是從哪個接口取的？

如果是選擇用python爬蟲，那么scrapy框架將非常適合。

這個框架可以讓你快速學會怎么爬蟲，并且也很容易擴展功能來滿足其它的需求。