爬蟲真的能用python嗎

『壹』 python是不是就是可以做爬蟲的編程

是的，但不只是可以做爬蟲。

還可以做Web 程序開發、桌面程序開發、科學計算、圖像處理、人工智慧等以及其他的各種各樣的方向。

『貳』 python爬蟲真這么厲害嗎

Python可以爬取數據，這么說吧，只要能通過瀏覽器獲取的數據都能通過Python爬蟲獲取，比如爬圖片、爬視頻、爬文章；Python爬蟲能自動循環執行目標程序，實現自動下載、自動存儲圖片、音視頻和資料庫的數據。

Python爬蟲

『叄』 除了python可以爬蟲還有哪些編程語言可以爬蟲

能夠做網路爬蟲的編程語言很多，包括PHP、java、C/C++、Python等都能做爬蟲，都能達到抓取想要的數據資源。針對不同的環境，我們需要了解他們做爬蟲的優缺點，才能選出合適的開發環境。

（一）PHP
網路爬蟲需要快速的從伺服器中抓取需要的數據，有時數據量較大時需要進行多線程抓取。PHP雖然是世界上最好的語言，但是PHP對多線程、非同步支持不足，並發不足，而爬蟲程序對速度和效率要求極高，所以說PHP天生不是做爬蟲的。

（二）C/C++
C語言是一門面向過程、抽象化的通用程序設計語言，廣泛應用於底層開發，運行效率和性能是最強大的，但是它的學習成本非常高，需要有很好地編程知識基礎，對於初學者或者編程知識不是很好地程序員來說，不是一個很好的選擇。當然，能夠用C/C++編寫爬蟲程序，足以說明能力很強，但是絕不是最正確的選擇。

（三）Java
在網路爬蟲方面，作為Python最大的對手Java，擁有強大的生態圈。但是Java本身很笨重，代碼量大。由於爬蟲與反爬蟲的較量是持久的，也是頻繁的，剛寫好的爬蟲程序很可能就不能用了。爬蟲程序需要經常性的修改部分代碼。而Java的重構成本比較高，任何修改都會導致大量代碼的變動。

（四）Python
Python在設計上堅持了清晰劃一的風格，易讀、易維護，語法優美、代碼簡潔、開發效率高、第三方模塊多。並且擁有強大的爬蟲Scrapy，以及成熟高效的scrapy-redis分布式策略。實現同樣的爬蟲功能，代碼量少，而且維護方便，開發效率高。

『肆』 爬蟲是Python寫的嗎

爬蟲是一種程序，是模擬人訪問網頁的
爬蟲可以用任何語言編寫。現在用Python寫爬蟲比較方便，但不一定必須用他

『伍』 用Python寫網路爬蟲怎麼樣

python非常適合寫網路爬蟲，語法簡單，代碼簡練，可用的庫成熟強大。
常用的庫有urllib2、 requests 、selenium 、Scrapy框架等，一般簡單的網頁連接登錄用requests就好了，使用簡單、功能強大；
HTML內容用BeautifulSoup解析就ok了，lxml、html.parser都是很方便的解析庫，和正則表達式搭配使用效果更佳。
處理JavaScript的動態HTML,用selenium+PhantomJS或firefox的網站自動化測試的思路就可以做到。存儲數據建議用mongdb資料庫，都是超簡單的操作。
處理驗證碼可以訓練Tesseract做到。
如果網站有api的話，那將是最快速、最方便的數據採集途徑了。
另外，python是進行數據處理最好的編程語言了，數據的採集是數據處理的第一步。

『陸』 為什麼寫爬蟲都喜歡用python

python的腳本特性，python易於配置，對字元的處理也非常靈活，加上python有著豐富的網路抓取模塊，所以兩者經常聯系在一起。
作為一門編程語言而言，python是純粹的自由軟體，以簡潔清晰的語法和強制使用空白符進行語句縮進的特點從而深受程序員的喜愛。使用python來完成編程任務的話編寫的代碼量更少，代碼簡潔簡短可讀性更強，一個團隊進行開發的時候讀別人的代碼會更快，開發效率會更高，使工作變得更加高效。
這是一門非常適合開發網路爬蟲的編程語言，相比於其他靜態編程語言，python抓取網頁文檔的介面更簡潔;相比於其他動態腳本語言，python的urllib2包提供了較為完整的訪問網頁文檔的API。此外，python中有優秀的第三方包可以高效實現網頁抓取，並可用極短的代碼完成網頁的標簽過濾功能。這也就是為什麼python被叫作爬蟲的原因。

『柒』 為什麼寫爬蟲都喜歡用 python

具體原因如下：

1、抓取網頁本身介面

相比其他靜態編程語言，如java、c#、c++，python抓取網頁文檔的介面更簡潔，相比其他動態腳本語言，如shell、perl，python的urlib2包提供了較為完整的訪問網頁文檔的api，當然，ruby也是很好的選擇。

抓取網頁有時需要模擬瀏覽器的行為，很多網站對於生硬的爬蟲抓取都是封殺的。

這是我們需要模擬user
agent的行為構造合適的請求，譬如模擬用戶登陸、模擬session/cookie的存儲和設置。在python里都有非常優秀的第三方包幫你搞定，如Requests，mechanize

2、網頁抓取後的處理

抓取的網頁通常需要處理，比如過濾html標簽，提取文本等。python的beautifulsoap提供了簡潔的文檔處理功能，能用極短的代碼完成大部分文檔的處理。

其實以上功能很多語言和工具都能做，但是用python能夠幹得最快，最干凈。

python語言在linux上很強大，語言也非常簡單。

快速開發：唯一能和python比開發效率的語言只有rudy，語言簡潔，沒有那麼多技巧，所以讀起來也更容易。

跨平台：由於python的開源，它比java更能體現「一次編寫到處運行」。

解釋性：無須編譯，直接運行/調試代碼。

構架選擇太多：gui構架方面，主要的就有wxpython、tkinter、pygkt、pyqt。

『捌』 爬蟲python入門難學嗎

只要自己肯努力！是很好學的！
計算機基礎、網路基礎，這些先基本了解一下，然後選擇一個編程技術方向，現在熱門的編程崗位就是Web前端、Java，如果是為了就業可以考慮這兩個技術方向，如果是對編程感興趣，可以學Python，語法簡單，可以迅速做一些小項目。
"編程"就是我們為了完成某項任務, 將解決問題的步驟, 用計算機能夠理解的語言寫成指令, 這就是"編程". 而後, 計算機會根據這些指令一步步執行, 最後完成任務.
編程語言有很多種，只需要精通一門編程語言或者說一個技術方向就可以了，可以結合自身，選擇一門自己喜歡並合適自己的。

HTML5+JS（web前端開發）
什麼是前端？在網站上看到的一切圖片、文字、視頻、都是前端寫的。
目前web前端開發還是熱門編程方向，這門語言對於零基礎的學員來說學起來難度不大。

Java
java仍然是市場上最流行和最火爆的編程語言，常常跟企業聯系在一起, 因為具備一些很好的語言特性, 以及豐富的框架, 在企業應用中最被青睞。

Python
Python是動態形的靈活的解釋性語言，從軟體開發到Web開發，Python都有在被使用，因為他的解釋性，適合輕量級開發，Python是很多新手會選擇的編程語言。

C語言
C語言，語法較多，時間相對還是比較多的，所以也可以考慮從C語言入手，因為打好編程基礎，以後再學其他語言會很快上手。如果是快速就業，不太適合C語言

C++
和C語言一樣，語法有一定難度，C++是一種最廣泛支持範式的編程語言，。當然如果C學的不錯，C++上手也會快。

『玖』 為什麼都說爬蟲PYTHON好

python上手容易，第三方庫多（go現在第三方庫也多）。

如果不考慮採集速度，不用登陸——requests，單線程，簡單的代碼如下：

url = "http://dd.com"

html = requests.get(url)

html.encoding=('GBK') #避免編碼問題 如有報錯，另外測試

print (html.text[:1000]) #輸出1000個字元，避免ide假死。

本人沒學過java c#，不清楚他們兩個一個簡單爬蟲的代碼量，想來最起碼比python的要多。

不過說實話python的工作機會沒有 java c#的多，也就是說別想著花錢去培訓班培訓了幾個月，就能找到月入過萬的工作。

python的運行效率比其他編程語言要差，不考慮效率的情況下，可以用python寫寫小代碼，有錢的可以寫scrapy代碼，堆伺服器做分布式爬蟲。