優化Python腳本運行時間的一種方式

一、使用多線程/多進程

Python中的GIL(全局解釋器鎖)限制了線程的並行執行,但是多線程/多進程會在多核CPU上提高程序的並行性能。可以通過Python自帶的threading或multiprocessing庫來實現。以下是一個簡單的使用multiprocessing庫的例子:

import multiprocessing

def worker(num):
    print('Worker: %s' % num)
    return

if __name__ == '__main__':
    jobs = []
    for i in range(5):
        p = multiprocessing.Process(target=worker, args=(i,))
        jobs.append(p)
        p.start()

上面的代碼創建了5個進程,每個進程都會執行worker函數。可以看到,多進程的執行速度比單進程要快。

二、使用緩存

Python中的緩存可以減少程序運行時重複計算的情況。比如,可以將經常用到的計算結果保存到一個字典中,每次需要用到時就直接從字典中取值。

cache_dict = {}

def fib(n):
    if n in cache_dict:
        return cache_dict[n]
    if n < 2:
        return n
    res = fib(n-1) + fib(n-2)
    cache_dict[n] = res
    return res

在上面的代碼中,我們定義了一個cache_dict字典,用於保存已經計算過的Fibonacci數列項。每次計算Fibonacci數列的第 n 項時,都會先檢查該項是否在cache_dict中,如果在,則直接返回對應的值;否則計算並保存到cache_dict中。這樣可以減少程序運行時的計算量,提高程序運行效率。

三、使用裝飾器

對於需要頻繁調用的函數,可以使用裝飾器來緩存計算結果,避免重複計算。示例代碼如下:

def cache(func):
    cache_dict = {}

    def wrapped(n):
        if n not in cache_dict:
            cache_dict[n] = func(n)
        return cache_dict[n]

    return wrapped

@cache
def fib(n):
    if n < 2:
        return n
    return fib(n-1) + fib(n-2)

在上面的代碼中,定義了一個cache裝飾器,它會將函數的計算結果保存到一個名為cache_dict的字典中。每次調用函數時,首先檢查cache_dict中是否已經有了對應的結果,如果有則直接返回結果,否則執行函數計算,並將結果保存到cache_dict中。

四、使用NumPy和Pandas優化數組操作

Python本身的列表操作效率不如NumPy和Pandas等專業的數值計算庫。如果需要進行大量的矩陣或數組運算,建議使用NumPy和Pandas。比如,以下是一個使用NumPy計算矩陣乘法的示例:

import numpy as np

a = np.random.rand(1000, 1000)
b = np.random.rand(1000, 1000)

c = np.dot(a, b)

上面的代碼中,我們通過np.random.rand生成了兩個1000×1000的隨機數矩陣a和b。然後使用np.dot函數計算矩陣乘積c。使用NumPy進行數組操作的效率要比使用Python列表高出很多。

五、使用numba優化代碼

numba是一種可以將Python代碼JIT編譯成本機機器碼的工具,能夠顯著提高代碼的計算速度。以下是一個簡單的使用numba的示例:

from numba import jit

@jit(nopython=True)
def calc_sum(n):
    s = 0
    for i in range(n):
        s += i
    return s

result = calc_sum(1000000)

上面的代碼定義了一個calc_sum函數,用於計算1~n的整數之和。使用@jit裝飾器將該函數轉化為JIT編譯後的代碼。可以看到,使用numba可以極大地提高程序的計算速度。

六、總結

本文介紹了多線程/多進程、緩存、裝飾器、NumPy/Pandas以及numba等方式可以優化Python腳本的運行時間。在實際開發中,可以結合具體場景選擇適合的優化方案。

原創文章,作者:小藍,如若轉載,請註明出處:https://www.506064.com/zh-hant/n/246238.html

(0)
打賞 微信掃一掃 微信掃一掃 支付寶掃一掃 支付寶掃一掃
小藍的頭像小藍
上一篇 2024-12-12 13:13
下一篇 2024-12-12 13:14

相關推薦

  • Python中引入上一級目錄中函數

    Python中經常需要調用其他文件夾中的模塊或函數,其中一個常見的操作是引入上一級目錄中的函數。在此,我們將從多個角度詳細解釋如何在Python中引入上一級目錄的函數。 一、加入環…

    編程 2025-04-29
  • 如何查看Anaconda中Python路徑

    對Anaconda中Python路徑即conda環境的查看進行詳細的闡述。 一、使用命令行查看 1、在Windows系統中,可以使用命令提示符(cmd)或者Anaconda Pro…

    編程 2025-04-29
  • Python列表中負數的個數

    Python列表是一個有序的集合,可以存儲多個不同類型的元素。而負數是指小於0的整數。在Python列表中,我們想要找到負數的個數,可以通過以下幾個方面進行實現。 一、使用循環遍歷…

    編程 2025-04-29
  • Python計算陽曆日期對應周幾

    本文介紹如何通過Python計算任意陽曆日期對應周幾。 一、獲取日期 獲取日期可以通過Python內置的模塊datetime實現,示例代碼如下: from datetime imp…

    編程 2025-04-29
  • Python周杰倫代碼用法介紹

    本文將從多個方面對Python周杰倫代碼進行詳細的闡述。 一、代碼介紹 from urllib.request import urlopen from bs4 import Bea…

    編程 2025-04-29
  • 蝴蝶優化算法Python版

    蝴蝶優化算法是一種基於仿生學的優化算法,模仿自然界中的蝴蝶進行搜索。它可以應用於多個領域的優化問題,包括數學優化、工程問題、機器學習等。本文將從多個方面對蝴蝶優化算法Python版…

    編程 2025-04-29
  • Python字典去重複工具

    使用Python語言編寫字典去重複工具,可幫助用戶快速去重複。 一、字典去重複工具的需求 在使用Python編寫程序時,我們經常需要處理數據文件,其中包含了大量的重複數據。為了方便…

    編程 2025-04-29
  • Python清華鏡像下載

    Python清華鏡像是一個高質量的Python開發資源鏡像站,提供了Python及其相關的開發工具、框架和文檔的下載服務。本文將從以下幾個方面對Python清華鏡像下載進行詳細的闡…

    編程 2025-04-29
  • Python程序需要編譯才能執行

    Python 被廣泛應用於數據分析、人工智能、科學計算等領域,它的靈活性和簡單易學的性質使得越來越多的人喜歡使用 Python 進行編程。然而,在 Python 中程序執行的方式不…

    編程 2025-04-29
  • python強行終止程序快捷鍵

    本文將從多個方面對python強行終止程序快捷鍵進行詳細闡述,並提供相應代碼示例。 一、Ctrl+C快捷鍵 Ctrl+C快捷鍵是在終端中經常用來強行終止運行的程序。當你在終端中運行…

    編程 2025-04-29

發表回復

登錄後才能評論