什么是爬蟲

爬蟲是一個很有意思的東西，對個人而言，我們可以通過爬蟲，獲取我們感興趣的內容，包括文字小說，圖片，視頻，對企業(yè)來說，我們可以通過爬蟲，獲取行業(yè)有價值的信息，假如我們從事淘寶客，我們可以通過爬蟲，API調用等方式，及時，迅速，大批量的獲取推廣鏈接商品等，其實說了這么多，爬蟲就是通過程序的方式，替代人工操作的復雜性，自動高效的完成任務。

爬蟲需要什么前置基礎

要回爬蟲，首先得明白我們的操作對象是誰，顯然，我們爬蟲的對象是瀏覽器，網頁。正所謂知己知彼，方能百戰(zhàn)不殆，我們需要了解瀏覽器，網頁，因此建議開始學習爬蟲的新人先學習html基礎，包括標簽，樣式等，這是最重要的，其次可以了解了解css和js

爬蟲框架選擇

nodejs+cherrio

如果你是選擇使用js技術線路爬蟲，我們可以使用nodejs發(fā)送請求獲取爬蟲目標網站信息，cherrio用來解析dom獲取我們想要的數據

python+selenium+chromedrive

如果我們使用python技術路線，我們可以使用python調用selenium提供的模擬瀏覽器的接口，來獲取我們想要爬目標網站的信息

python+scrapy

當然，使用python爬蟲，我最推薦大家使用scrapy來開發(fā)，豐富的模擬爬取接口，簡易的爬取數據處理，就可以將數據寫入數據庫了。

我是kyeteo碼上閑談，關于爬蟲的介意就說到這里了，大家如果有什么問題或者在編程方面有啥困難，關注我，為您一一解答，kyeteo帶你玩邊前端，后端，數據庫。