導航:首頁 > 編程語言 > python怎麼看運行進度

python怎麼看運行進度

發布時間:2023-05-25 09:05:54

① 如何用python爬取網頁中隱藏的div內容

你說的隱藏的div內容,應該是動態載入的數據吧,不在網頁源碼中顯示,只在載入網頁時才請求數據進行顯示,一般情況下,這種數據都保存在一個json文件中,只要抓包分析出這個json文件的url地址,然後再根據json文件結構進行解析,很快就能獲取到動態載入的div數據,下面我以爬取人人貸上面的散標數據為例,簡單介紹一下python如何爬蘆枝取div動態載入的數據,實驗環境win10+python3.6+pycharm5.0,主要步驟如下:

1.首先,打開散標數族咐據,如下,爬取的信息主要包括年利率、借款標題、期限、金額和進度這5個欄位信息:

右鍵對應元素進行檢查,可以看出所有的數據嵌套在div標簽中,如下:

打開網頁源碼,我們按Ctrl+F查找對應的數據,會發現所查找的數據都未在網頁源碼中,如下,即數據都是動態載入,所以直接解析原網頁是找不到div嵌套的數據的:

2.接著,我們按F12調出開發者工具,依次點擊「Network」->「XHR」,F5刷新頁面,就會看到動態載入的json文件,查看這個文件,內容如下,左邊為json文件的url地址,右邊就是我們需要爬取的div數據:

3.最後對應上面的json文件,我們就可以直接獲取並解析json了,這里主要用到requests和json這2個模塊,其中requests用於根據url地址獲取json文件,json用於解析json文件,提取出我們所需要的信息,即div動態載入的數據,測試代碼如下,非常簡單:

運行程序,截圖如下,已經成功爬取到div載入的數據:

至此,我們就完成了利用python爬取div動態載入的數據。總的來說,整個過程非常簡單,最主要的陪穗敏還是抓包分析,只要你有一定的爬蟲基礎,熟悉一下上面的代碼,多調試幾遍程序,很快就能掌握的,當然,你也可以使用selenium進行爬取,直接解析就行,網上也有相關教程和資料可供參考,非常豐富,希望以上分享的內容能對你有所幫助吧,也歡迎大家評論、留言。

② python 進度條如何控制

首先,我們需要創建一個新的python文件,點擊工具欄上方的file按鈕,然後在彈出的選項中選擇新建,找到如圖所示的新建python file,創建一個新文件。
按照提示給我們的新文件命名,然後在創建的文件中輸入我們需要的代碼,如圖所示,我們需要導入time包,使用其中的功能來完成進度條的設置。
相關推薦:《Python教程》
我們可以按照需求來定義進度條的長度,最後一條語句中括弧內的數值就可以控制進度條顯示的長度,也可以更改時間來定義進度條顯示的速度。
設置完成之後,我們點擊工具欄上方的run按鈕,來運行我們的程序,點擊運行按鈕之後,選擇我們需要運行的python文件,下方會提示我們的文件是否有錯誤信息。
如果沒有錯誤信息,系統會提示錯誤為零,如果有錯誤信息,我們需要將錯誤的內容更正之後才能正常運行,點擊運行之後,可以看到我們的進度條已經開始正常顯示了。
按照我們設置的方式,進度條前方顯示載入的數據,進度條以方框的形式顯示,一共設置了20個方框來設置為整個進度條的長度,20個方框全部載入完成,進度條完成100%.整個進度條顯示完成。

③ python怎麼查看進度

進度條類,代碼如下:

importsysclassprogressbar(object):def__init__(self,finalcount,block_char='.'):
self.finalcount=finalcount
self.blockcount=0
self.block=block_char
self.f=sys.stdoutifnotself.finalcount:return
self.f.write(' ------------------%Progress-------------------1 ')
self.f.write('12345678友消90 ')
self.f.write('----0----0----0----0----0----0----0----0----0----0 ')defprogress(self,count):
count=min(count,self.finalcount)ifself.finalcount:
percentcomplete=int(round(100.0*count/self.finalcount))ifpercentcomplete<1:percentcomplete=1else:
percentcomplete=100
blockcount=int(percentcomplete//2)ifblockcount<=叢告森self.blockcount:return
foriinrange(self.blockcount,blockcount):
滲畝self.f.write(self.block)
self.f.flush()
self.blockcount=blockcountifpercentcomplete==100:
self.f.write(" ")if__name__=="__main__":fromtimeimportsleep
pb=progressbar(8,"*")forcountinrange(1,9):
pb.progress(count)
sleep(0.2)
pb=progressbar(100)
pb.progress(20)
sleep(0.3)
pb.progress(47)
sleep(0.3)
pb.progress(90)
sleep(0.3)
pb.progress(100)print"testing1:"
pb=progressbar(1)
pb.progress(1)

運行結果如下:

④ python怎麼看程序是否在運行

你說的文件有沒有運行,指的是什麼意思?是說一個應用程序有沒有被運行?還是一個文件讀取到尾巴了?

⑤ python和selenium怎麼判斷進度條

phython:

  1. 首先利用pip快速安裝第三方庫,tqdm

  2. 使用tqdm的函數之前需要導入qdm庫

  3. 在tqdm的應用中,直接在for結構上,添加一個tdqm()即可。

  4. 執行上一步的操作,就可以觀察到進度條。

selenium:

  1. 拿到瀏覽器滾動條的js代碼,然後執行,就可以看到進度條

  2. .通過模擬鍵盤的形式去滾動屏幕,就可以看到進度條

其中通過 driver.execute_script()執行js代碼時,可以用兩個語法,語法:scrollBy(x,y)和語法:scrollBy(x,y

⑥ 7種檢測Python程序運行時間、CPU和內存佔用的方法

1. 使用裝飾器來衡量函數執行時間

有一個簡單方法,那就是定義一個裝飾器來測量函數的執行時間,並輸出結果:

import time

from functoolsimport wraps

import random

def fn_timer(function):

  @wraps(function)

  def function_timer(*args, **kwargs):

      t0= time.time()

      result= function(*args, **kwargs)

      t1= time.time()

      print("Total time running %s: %s seconds" %

          (function.__name__, str(t1- t0))

)

      return result

return function_timer

@fn_timer

def random_sort(n):

  return sorted([random.random() for i in range(n)])

if __name__== "__main__":

  random_sort(2000000)

輸出:Total time running random_sort: 0.6598007678985596 seconds

使用方式的話,就是在要監控的函數定義上面加上 @fn_timer 就行了

或者

# 可監控程序運行時間

import time

import random

def clock(func):

    def wrapper(*args, **kwargs):

        start_time= time.time()

        result= func(*args, **kwargs)

        end_time= time.time()

        print("共耗時: %s秒" % round(end_time- start_time, 5))

        return result

return wrapper

@clock

def random_sort(n):

  return sorted([random.random() for i in range(n)])

if __name__== "__main__":

  random_sort(2000000)

輸出結果:共耗時: 0.65634秒

2. 使用timeit模塊

另一種方法是使用timeit模塊,用來計算平均時間消耗。

執行下面的腳本可以運行該模塊。

這里的timing_functions是Python腳本文件名稱。

在輸出的末尾,可以看到以下結果:4 loops, best of 5: 2.08 sec per loop

這表示測試了4次,平均每次測試重復5次,最好的測試結果是2.08秒。

如果不指定測試或重復次數,默認值為10次測試,每次重復5次。

3. 使用Unix系統中的time命令

然而,裝飾器和timeit都是基於Python的。在外部環境測試Python時,unix time實用工具就非常有用。

運行time實用工具:

輸出結果為:

Total time running random_sort: 1.3931210041 seconds

real 1.49

user 1.40

sys 0.08

第一行來自預定義的裝飾器,其他三行為:

    real表示的是執行腳本的總時間

    user表示的是執行腳本消耗的CPU時間。

    sys表示的是執行內核函數消耗的時間。

注意:根據維基網路的定義,內核是一個計算機程序,用來管理軟體的輸入輸出,並將其翻譯成CPU和其他計算機中的電子設備能夠執行的數據處理指令。

因此,Real執行時間和User+Sys執行時間的差就是消耗在輸入/輸出和系統執行其他任務時消耗的時間。

4. 使用cProfile模塊

5. 使用line_profiler模塊

6. 使用memory_profiler模塊

7. 使用guppy包

⑦ python能檢測軟體狀態嗎

python是能檢測軟體運行狀態的。具體代碼如下:
首先我們需要首先注意的一個地方是配置文件的後綴。
vim /etc/supervisord.conf
[include]
files = supervisord.d/*.ini
如果你想配置文件為其他格式,比如 conf 格式的話, 需要更改 iles = supervisord.d/*.conf 。
比如我們需要守護啟動一個進程,我們就以守護Prometheus 為例:
vim /etc/supervisord.d/proms.ini
[program:proms]
command=/opt/prometheus/server/prometheus/prometheus
directory=/opt/prometheus/server/prometheus
stdout_logfile=/home/data/logs/prometheus/sever.log
autostart=true
autorestart=true
redirect_stderr=true
user=root
startsecs=3
supervisor配置文件詳解:
program: 指定的守護進程名
command: 命令
stdout_logfile: 日誌路徑
autostart: supervisor啟動的時候是否隨著同時啟動,默認為 true
autorestart: 是否掛了自動重啟
redirect_stderr:標准錯誤重定向
startsecs: 子進程啟動多少秒之後,此時的狀態是running
啟動supervisor--(yum方式安裝的)
/usr/bin/python /usr/bin/supervisord -c /etc/supervisord.conf

⑧ python 怎麼判斷命令執行的時間長短和結束狀態

你是說用python查看shell的命令的運行狀態吧?
一般我會用commands模塊

比如查看某個我啟動森明的後台信野進程是此坦告否終止了
stat, output = commands.getstatusoutput( "ps aux | grep PATTERN | wc -l" )

if output == '0':
....

⑨ python如何保存程序運行進度

1、用快捷鍵win加R,打余答開電腦的命令行窗口。
2、在命令行輸入python程序仿毀帶。
3、在備蘆文件的下拉菜單中找到需要保存的程序。
4、點擊導入。
5、點擊菜單欄的保存即可。

⑩ python 計算程序運行了多長時間

python 計算程序運行時間:

6.760052s

一、import time

閱讀全文

與python怎麼看運行進度相關的資料

熱點內容
安卓手機沒有聲音均衡器怎麼辦 瀏覽:504
吃雞國際服為什麼會伺服器匆忙 瀏覽:246
微信中如何打開定位伺服器 瀏覽:203
java並發編程書籍 瀏覽:280
android601源碼 瀏覽:788
程序員離職了還能幹嘛 瀏覽:156
少林功法pdf 瀏覽:471
安卓80版本小游戲怎麼玩 瀏覽:632
奇書pdf 瀏覽:836
伺服器的管理口有什麼用 瀏覽:641
澳洲加密資產新政策 瀏覽:155
哈利波特連接伺服器失敗什麼意思 瀏覽:234
提取手機上安裝的app並反編譯 瀏覽:964
人工智慧演算法書 瀏覽:604
安卓如何傳輸圖片給蘋果 瀏覽:829
可編程式控制制器原理應用網路 瀏覽:587
社畜解壓是什麼意思 瀏覽:436
吉利博越用哪個app啊 瀏覽:513
西安單片機晶振電容 瀏覽:187
分地面積的演算法 瀏覽:179