為什么很少人討論或者使用java爬蟲?
1、爬蟲的經濟價值在哪里?只有經濟價值存在的情況下,才有必要去開發這樣一個爬蟲。但不幸的是,現在的很多場合下,爬蟲沒有太大價值。僅有:比價,數據統計,搜索引擎,信貸爬蟲等有限的幾個場合在用,而這幾個場合基本被大公司壟斷了。所以現在很少有人寫爬蟲了。
2、寫個爬蟲的難度有多大?一上午,僅此而已。所以沒什么難度,頂多設置一下userAgent,設置一下refer,弄個調用順序先獲得cookie,設置個延時什么的。換成金錢看,估價大概價值三四百塊吧,用不了多錢。
3、爬蟲能用多久?很久很久,只要被爬的系統不升級,那么就能一直用下去,換話說:寫一個爬蟲,用半年是很常見的事情。很常見就意味著沒什么太大意思,不受人關注