GPU排隊腳本實現空閑觸發(fā)python腳本實現示例
今天寫了一個GPU排隊腳本,事實上還是挺實用的。有的服務器是多用戶使用,GPU的資源常常被占據著,很可能在夜間GPU空閑了,但來不及運行自己的腳本。如果沒有和別人共享服務器的話,自己的多個程序想排隊使用GPU,也可以用這個腳本。環(huán)境非常簡單,有python就行了:
python3.7
ubuntu16.04
先創(chuàng)建腳本:
vim narrow_setup.py
cmd = 'python xxx.py'這句可以設置你要運行的python腳本
# author: muzhan # contact: levio.pku@gmail.com import os import sys import time cmd = 'python ~/hehe.py' def gpu_info(): gpu_status = os.popen('nvidia-smi | grep %').read().split('|') gpu_memory = int(gpu_status[2].split('/')[0].split('M')[0].strip()) gpu_power = int(gpu_status[1].split(' ')[-1].split('/')[0].split('W')[0].strip()) return gpu_power, gpu_memory def narrow_setup(interval=2): gpu_power, gpu_memory = gpu_info() i = 0 while gpu_memory > 1000 or gpu_power > 20: # set waiting condition gpu_power, gpu_memory = gpu_info() i = i % 5 symbol = 'monitoring: ' + '>' * i + ' ' * (10 - i - 1) + '|' gpu_power_str = 'gpu power:%d W |' % gpu_power gpu_memory_str = 'gpu memory:%d MiB |' % gpu_memory sys.stdout.write('\r' + gpu_memory_str + ' ' + gpu_power_str + ' ' + symbol) sys.stdout.flush() time.sleep(interval) i += 1 print('\n' + cmd) os.system(cmd) if __name__ == '__main__': narrow_setup()
直接運行腳本:
python narrow_setup.py
就可以監(jiān)聽nvidia-smi中的信息,以伺機觸發(fā)python腳本~
運行結果如下:
等待機會中... 如果gpu顯存和功耗低于某個值時,就會觸發(fā)python腳本。
以上就是GPU排隊腳本實現一旦空閑就觸發(fā)python腳本實現示例的詳細內容,更多關于GPU排隊腳本實現空閑觸發(fā)python腳本的資料請關注腳本之家其它相關文章!
相關文章
Windows系統(tǒng)下實現pycharm運行.sh文件(本地運行和打開服務器終端)
PyCharm是Python開發(fā)的高效率IDE,但是很多時候需要同時開發(fā)Bash(shell)腳本,下面這篇文章主要給大家介紹了關于Windows系統(tǒng)下實現pycharm運行.sh文件(本地運行和打開服務器終端)的相關資料,需要的朋友可以參考下2022-09-09python數據分析之聚類分析(cluster analysis)
聚類分析本身不是一個特定的算法,而是要解決的一般任務。它可以通過各種算法來實現,這些算法在理解群集的構成以及如何有效地找到它們方面存在顯著差異。這篇文章主要介紹了python數據分析之聚類分析(cluster analysis),需要的朋友可以參考下2021-11-11對Python3中的print函數以及與python2的對比分析
下面小編就為大家分享一篇對Python3中的print函數以及與python2的對比分析,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2018-05-05python 使用while循環(huán)輸出*組成的菱形實例
這篇文章主要介紹了python 使用while循環(huán)輸出*組成的菱形實例,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2020-04-04Django用戶認證系統(tǒng) Web請求中的認證解析
這篇文章主要介紹了Django用戶認證系統(tǒng) Web請求中的認證解析,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下2019-08-08