快捷導(dǎo)航

Python實(shí)現(xiàn)提高運(yùn)行速度的技巧分享

更新時(shí)間：2023年06月13日 08:53:07 作者：0思必得0

這篇文章主要為大家詳細(xì)介紹了Python實(shí)現(xiàn)提高運(yùn)行速度的相關(guān)技巧，文中的示例代碼講解詳細(xì)，具有一定的參考價(jià)值，感興趣的小伙伴可以跟隨小編一起了解一下

提高Python運(yùn)行速度(大方向)

現(xiàn)在我們已經(jīng)知曉如何計(jì)算Python代碼的運(yùn)行時(shí)間了，接下來就是要想辦法提高Python運(yùn)行速度。一般要提高Python代碼的運(yùn)行速度遵循以下幾點(diǎn)：

1.嘗試通過多線程運(yùn)行

多線程（multithreading），是指從軟件或者硬件上實(shí)現(xiàn)多個(gè)線程并發(fā)執(zhí)行的技術(shù)。具有多線程能力的計(jì)算機(jī)因有硬件支持而能夠在同一時(shí)間執(zhí)行多于一個(gè)線程，進(jìn)而提升整體處理性能。

在一個(gè)程序中，這些獨(dú)立運(yùn)行的程序片段叫作“線程”（Thread），利用它編程的概念就叫作“多線程處理”。利用多線程技術(shù)可以顯著提高某些特定的代碼運(yùn)行速度。

現(xiàn)在一般普通的計(jì)算機(jī)硬件都支持多線程技術(shù)，如果一個(gè)程序任務(wù)可以分解成多線程形式，那么運(yùn)行速度將會(huì)得到極大的提升。
在以后的教程中將會(huì)介紹這種技術(shù)。

2.優(yōu)化循環(huán)處理

循環(huán)處理是編寫代碼時(shí)經(jīng)常遇到的情況，由于大循環(huán)一般會(huì)運(yùn)行上成千上萬次以上，于是在循環(huán)結(jié)構(gòu)中，每一個(gè)小小的代碼片段進(jìn)行優(yōu)化處理后都將會(huì)大大提高代碼的運(yùn)行速度。

后面將會(huì)詳細(xì)介紹一些比較實(shí)用且常見的優(yōu)化小技巧。

3.使用內(nèi)置模塊、函數(shù)和數(shù)據(jù)類型

Python內(nèi)置的模塊和函數(shù)是在安裝Python時(shí)已經(jīng)定義和安裝好的，不僅導(dǎo)入方便，而且運(yùn)行速度要比個(gè)人編寫的代碼快很多。

速度對(duì)比_內(nèi)置模塊

from math import factorial
from time import time
from timeit import timeit
def slow(n=100):
    if n == 0 or n == 1:
        return 1
    else:
        return n * slow(n - 1)
def fast():
factorial(100)
b1 = time()
timeit(slow, number=10_0000)
e1 = time()
print(f'函數(shù) slow 運(yùn)行 10 萬次的時(shí)間為：{e1 - b1}')
b2 = time()
timeit(fast, number=10_0000)
e2 = time()
print(f'函數(shù) fast 運(yùn)行 10 萬次的時(shí)間為：{e2 - b2}')

函數(shù) slow 運(yùn)行 10 萬次的時(shí)間為：1.9230999946594238
函數(shù) fast 運(yùn)行 10 萬次的時(shí)間為：0.1594223976135254

速度對(duì)比_內(nèi)置函數(shù)

from mdTools import ftDecTimeIt  # 小編自己編寫的一個(gè)計(jì)時(shí)裝飾器
@ftDecTimeIt(100_0000)
def slow():
    new_list = []
    word_list = ["i", "am", "a", "bad", "boy"]
    for word in word_list:
        new_list.append(word.capitalize())
@ftDecTimeIt(100_0000)
def fast():
    word_list = ["i", "am", "a", "bad", "boy"]
new_list = list(map(str.capitalize, word_list))
slow()
fast()

函數(shù) slow 運(yùn)行 1000000 次的總耗時(shí)為：0.9304 秒
函數(shù) fast 運(yùn)行 1000000 次的總耗時(shí)為：0.8292 秒

速度對(duì)比_內(nèi)置方法

from mdTools import ftDecTimeIt
@ftDecTimeIt(100_0000)
def slow():
    new_list = ""
    word_list = ["i", "am", "a", "bad", "boy"]
    for word in word_list:
        new_list += word.capitalize()
@ftDecTimeIt(100_0000)
def fast():
    word_list = ["i", "am", "a", "bad", "boy"]
new_list = ''.join(word_list)
slow()
fast()

函數(shù) slow 運(yùn)行 1000000 次的總耗時(shí)為：1.0097 秒
函數(shù) fast 運(yùn)行 1000000 次的總耗時(shí)為：0.2878 秒

4.使用較新的Python版本

Python版本是在不停迭代更新的，每次更新都會(huì)包含優(yōu)化內(nèi)容，這其中不但會(huì)優(yōu)化內(nèi)置函數(shù)、內(nèi)置方法、更新模塊，增加新的語法、模塊等，還會(huì)優(yōu)化運(yùn)行速度，截止目前，最新的Python11某些方便運(yùn)行速度相較于舊版本更是提升30%左右。

5.使用lru_cache緩存數(shù)據(jù)

當(dāng)你可以把需要計(jì)算出來的數(shù)據(jù)保存下來的時(shí)候，千萬不要重復(fù)的去計(jì)算它。如果你有一個(gè)經(jīng)常需要使用的函數(shù)，而且返回的是可預(yù)測(cè)的結(jié)果，最好是能將其緩存到內(nèi)存中。后續(xù)的函數(shù)調(diào)用如果是一樣的，將立即返回結(jié)果。

Python本地庫functools中的裝飾器：@functools.lru_cache，它就能夠緩存函數(shù)最近的調(diào)用，當(dāng)緩存的值在特定時(shí)間內(nèi)保持不變的時(shí)候這個(gè)非常好用，比如遞歸調(diào)用問題。

速度對(duì)比_緩存數(shù)據(jù)

from functools import lru_cache
from time import time
from timeit import timeit
def slow(n=10):
    if n == 1:
        return 1
    if n == 2:
        return 2
    else:
        return slow(n-2) + slow(n-1)
@lru_cache()
def fast(n=10):
    if n == 1:
        return 1
    if n == 2:
        return 2
    else:
        return slow(n - 2) + slow(n - 1)
b1 = time()
timeit(slow, number=10_0000)
e1 = time()
print(f'函數(shù) slow 運(yùn)行 10 萬次的時(shí)間為：{e1 - b1}')
b2 = time()
timeit(fast, number=10_0000)
e2 = time()
print(f'函數(shù) fast 運(yùn)行 10 萬次的時(shí)間為：{e2 - b2}')

函數(shù) slow 運(yùn)行 10 萬次的時(shí)間為：1.344538927078247
函數(shù) fast 運(yùn)行 10 萬次的時(shí)間為：0.007016420364379883

6.使用專門的第三方庫

們都知道，專業(yè)的人做專業(yè)的事，因?yàn)樗麄兺纫话闳烁私?，也更有?jīng)驗(yàn)，處理起來也更加得心應(yīng)手。同樣的，在Python編程中，如果有專門的庫，那么處理起來也事半功倍，而且效率也高。

速度對(duì)比_numba庫

numba中提供了jit裝飾器，它可以將其裝飾的函數(shù)JIT編譯成機(jī)器碼函數(shù)，并返回一個(gè)可在Python中調(diào)用機(jī)器碼的包裝對(duì)象。

from mdTools import ftDecTimeIt
from numba import jit
@ftDecTimeIt(1)
def slow(x=1, y=1_0000_0000):
    s = 0
    for i in range(x, y):
        s += i
return s
@ftDecTimeIt(1)
@jit
def fast(x=1, y=1_0000_0000):
    s = 0
    for i in range(x, y):
        s += i
return s
slow()
fast()

函數(shù) slow 運(yùn)行 1 次的總耗時(shí)為：5.2450 秒
函數(shù) fast 運(yùn)行 1 次的總耗時(shí)為：0.2750 秒

速度對(duì)比_numpy庫

果你要處理非常龐大的數(shù)據(jù)，并且希望能高效的對(duì)它們進(jìn)行計(jì)算，那么numpy庫是一個(gè)非常好的選擇。numpy在一些關(guān)鍵代碼上使用了C來代替，比原生Python更快處理數(shù)組，也能更高效的存儲(chǔ)數(shù)據(jù)。

使用numpy也能更方便也更快的創(chuàng)建出大數(shù)據(jù)。讓我們來看下面的例子：

from mdTools import ftDecTimeIt
import numpy as np
array = np.random.random(1_0000_0000)
@ftDecTimeIt(1)
def slow():
sum(array)
@ftDecTimeIt(1)
def fast():
np.sum(array)
slow()
fast()