A. python爬蟲 如何自己用雲伺服器上搭建代理伺服器 並使用requests測試代理
1、簡介
使用同一個ip頻繁爬取一個網站,久了之後會被該網站的伺服器屏蔽。所以這個時候需要使用代理伺服器。通過ip欺騙的方式去爬取網站
可以使用http://yum.iqianyue.com.com/proxy中找到很多伺服器代理地址
2、應用
# *-*coding:utf-8*-*
from urllib import request
def use_porxy(porxy_addr,url):
porxy = request.ProxyHandler({'http':porxy_addr})
opener = request.build_opener(porxy, request.ProxyHandler)
request.install_opener(opener)
data = request.urlopen(url).read().decode('utf-8')
return data
data = use_porxy("114.115.182.59:128","http://www..com")
print(len(data))
B. 如何使用代理伺服器
小鳥雲伺服器niaoyun實例創建好之後,您可以使用以下任意一種方式登錄伺服器:
遠程桌面連接 (Microsoft Terminal Services Client, MSTSC):
採用這種方式登錄,請確保實例能訪問公網。如果在創建實例時沒有購買帶寬,則不能使用遠程桌面連接。
管理終端 VNC:無論您在創建實例時是否購買了帶寬,只要您本地有網頁瀏覽器,都可以通過管理控制台的管理終端登錄實例。
使用遠程桌面連接 (MSTSC) 登錄實例
打開 開始菜單 > 遠程桌面連接,或在 開始菜單 > 搜索 中輸入 mstsc。也可以使用快捷鍵 Win+R 來啟動運行窗口,輸入
mstsc後回車啟動遠程桌面連接。
在 遠程桌面連接 對話框中,輸入實例的公網 IP 地址。單擊 顯示選項。
輸入用戶名,如小鳥雲默認為 niaoyun。單擊 允許我保存憑據,然後單擊 連接。這樣以後登錄就不需要手動輸入密碼了。
C. 怎麼設置代理伺服器上網
1,打開,瀏覽器,單擊左上角的用戶圖標,在彈出菜單中點擊「設置」。
2,跳出設置窗口,選擇左側菜單項中的「代理伺服器」
3,在 「代理伺服器設置」 中選擇 「使用自定義代理」,點擊添加。
4,在跳出窗口填寫代理伺服器信息,如圖所示,填完然後單擊確定。注意:14.29.117.37:80@HTTP 這是演示用的代理IP,其中14.29.117.37即為地址,80為埠,HTTP為類型,其中用戶名和密碼不用填。
5,添加成功,由於代理伺服器裡面只有這一個,所以被默認使用。如果含有多個代理伺服器,則需要先選中要使用的伺服器,再單擊默認。
6,接下來就是測試是否成功啦。網路「ip」,在搜索結果中可以看到,本地ip已經變成了代理伺服器ip。
7,設置代理成功。
D. 雲伺服器,代理伺服器的區別
雲伺服器是基於雲基礎上建立的伺服器,有獨立的操作系統,有獨立的IP
有自己的內存,硬碟,帶寬等資源
代理伺服器應該就是一個簡單的IP
希望可以幫上你
E. 如何把阿里雲或騰訊雲伺服器作為代理ip上網
一般這種大公司的雲伺服器都是不可以配置成代理ip的,發現後也會封禁,要配置代理可以找國外的主機商比較合適