Ⅰ python 怎麼網頁下載文件.
這個需要你分析網頁,提取其中的鏈接,然後下載鏈接
python自帶的urllib2, urllib可以用來處理網頁,不過比較麻煩,需要自記寫很多代碼
或者用beautiful soap之類的庫,處理html就比較輕鬆了;可以自己看Beautiful Soap的文檔,有中文版本的,鏈接我就不貼了,網路老會發神經屏蔽;按文檔寫幾個例子,就能處理你自己的事情了,很容易的
Ⅱ python 怎麼下載網站文件夾下的所有文件
第一步:
必須知道有哪些文件。
第二步:
知道路徑就可以使用urlretrieve函數保存了。
但是第一步你不說背景很難啊。
是網頁的話,可能那個需要簡單解析一下網頁就行了,有list dir許可權更方便,直接ls就行,窮舉是估計不行的,誰知道文件路徑長度?
Ⅲ python爬蟲 將在線html網頁中的圖片鏈接替換成本地鏈接並將html文件下載到本地
import os,re
def check_flag(flag):
regex = re.compile(r'images\/')
result = True if regex.match(flag) else False
return result
#soup = BeautifulSoup(open('index.html'))
from bs4 import BeautifulSoup
html_content = '''
<a href="https://xxx.com">測試01</a>
<a href="https://yyy.com/123">測試02</a>
<a href="https://xxx.com">測試01</a>
<a href="https://xxx.com">測試01</a>
'''
file = open(r'favour-en.html','r',encoding="UTF-8")
soup = BeautifulSoup(file, 'html.parser')
for element in soup.find_all('img'):
if 'src' in element.attrs:
print(element.attrs['src'])
if check_flag(element.attrs['src']):
#if element.attrs['src'].find("png"):
element.attrs['src'] = "michenxxxxxxxxxxxx" +'/'+ element.attrs['src']
print("##################################")
with open('index.html', 'w',encoding="UTF-8") as fp:
fp.write(soup.prettify()) # prettify()的作⽤是將sp美化⼀下,有可讀性