A. 如何用python3.x爬取百度圖片
網路的反爬蟲機制觸發了，它檢測到你是爬蟲所以拒絕了你的請求。
這個東西比較復雜，建議網上搜一搜反爬蟲機制，然後一個一個試解決辦法。
最簡單的就是通過代理伺服器來爬。
最後建議你可以試一試requests庫，我在爬取微博圖床的時候只用requests庫就完美解決了反爬蟲，再沒報過錯。
B. Python如何爬取百度圖片
幾乎所有的網站都會有反爬機制，這就需要在爬取網頁時攜帶一些特殊參數，比如：user-agent、Cookie等等，可以在寫代碼的時候用工具將所有參數都帶上。
C. python3 爬取圖片異常的原因
我們在下載文件時，一會會採取urlretrieve或是requests的get方式，
from urllib.request import urlretrieve
urlretrieve(self.url, filename="xxx.png")
但對於連續下載，各個文件保存是需要時間的，而程序運行永運是快於存儲的，我懷疑這是水管里流水速度與缸的大小不合適的原因，那可以試試下面這種方式：
r = requests.get(url, stream=True)
with open(local_filename, 'wb') as f:
for chunk in r.iter_content(chunk_size=1024):
if chunk: # filter out keep-alive new chunks
f.write(chunk)
f.flush()
D. python beautifulsoup 網頁圖片抓取
importurllib.request
importssl
frombs4importBeautifulSoup
importlxml
ssl._create_default_https_context=ssl._create_unverified_context
url="https://app.griffith.e.au/explore-student-blog/what-do-you-order-at-an-australian-cafe/"
response=urllib.request.urlopen(url)
html=response.read()
soup=BeautifulSoup(html,'lxml')
res=soup.find('div',class_='post-entry').find_all('a')[10]
result=res.find('img')['src']
print(result)
filename='photo'+'.jpg'
f=open(filename,'w')
urllib.request.urlretrieve(result,filename)
E. python爬蟲爬取圖片代碼
三步，用scrapy爬蟲框架
定義item類
開發spider類
開發pipeline
推薦看一看 瘋狂python講義，裡面有更詳細的python學習內容
F. 想用python爬取網頁上的圖片，但無法用select()方法定點陣圖片的源地址
是的可以撒入爬去獲得。
G. python抓取網頁上圖片
正則表達式匹配的url有錯誤
for x in add:
print x # 這里可以看到報錯的時候是 url 錯誤
dirpath = os.path.join('C:\\Users\\lilinan\\Desktop\\新建文件夾','%s.jpg' % t)
urllib.request.urlretrieve(x,dirpath)
t+=1
H. python如何利用requests和bs4爬取圖片
目標網站網址呢？網址發出來我看一下
每個網站的HTML結構不一樣，解析代碼就不一樣，要針對不同的網站編寫不同的代碼
編寫爬蟲代碼前還要評估目標網站是否需要登錄，數據是否有加密等諸多問題
I. 如何使用python爬取到高清原圖
#-*-coding:utf8-*-
#2013.12.3619:41wnlo-c209
#抓取dbmei.com的圖片。
frombs4importBeautifulSoup
importos,sys,urllib2
#創建文件夾，昨天剛學會
path=os.getcwd() #獲取此腳本所在目錄
new_path=os.path.join(path,u'豆瓣妹子')
ifnotos.path.isdir(new_path):
os.mkdir(new_path)
defpage_loop(page=0):
url='http://www.dbmeizi.com/?p=%s'%page
content=urllib2.urlopen(url)
soup=BeautifulSoup(content)
my_girl=soup.find_all('img')
#加入結束檢測，寫的不好....
ifmy_girl==[]:
printu'已經全部抓取完畢'
sys.exit(0)
printu'開始抓取'
forgirlinmy_girl:
link=girl.get('src')
flink='http://www.dbmeizi.com/'+link
printflink
content2=urllib2.urlopen(flink).read()
withopen(u'豆瓣妹子'+'/'+flink[-11:],'wb')ascode:#在OSC上現學的
code.write(content2)
page=int(page)+1
printu'開始抓取下一頁'
print'the%spage'%page
page_loop(page)
page_loop()
print"~~~~~~~~~~~~~~~~~~~~~~~~~~END~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~"
#為了避免雙擊的時候直接一閃退出，在最後面加了這么一句
raw_input("Press<Enter>ToQuit!")