Python 性能優(yōu)化技巧總結(jié)
1.使用測(cè)量工具，量化性能才能改進(jìn)性能，常用的timeit和memory_profiler，此外還有profile、cProfile、hotshot等，memory_profiler用了psutil，所以不能跟蹤cpython的擴(kuò)展；
2.用C來解決費(fèi)時(shí)的處理，c是效率的代名詞，也是python用來解決效率問題的主要途徑，甚至有時(shí)候我都覺得python是c的完美搭檔。常用的是Cython，直接把py代碼c化然后又能像使用py包一樣使用，其次是ctypes，效率最最高的存在，最后還有CPython和cffi都是屌屌的存在；
3.優(yōu)化算法，所有語言通病，算法的提升我覺得是在所有提升之上的，但也是最難的，好在現(xiàn)在大部分常用的算法都已經(jīng)封包，除非自己給自己挖坑，所以弄懂標(biāo)準(zhǔn)庫里的數(shù)據(jù)結(jié)構(gòu)和常用api是如何實(shí)現(xiàn)的很重要；
4.2里的實(shí)現(xiàn)有人做了更高效的包用以替換python中常見的一些實(shí)現(xiàn)，如果瓶頸在stringio、pickle、profile這類上的可以考慮替換為c的版本；
5.數(shù)據(jù)結(jié)構(gòu)盡量使用元組tuple，特別是數(shù)據(jù)量大的時(shí)候，實(shí)在不行l(wèi)ist也可以，盡量不要用class，如果一定要用可以加slot，效率再不夠就只能結(jié)合2來加速了；
6.延遲加載，import不是一定要寫在一頁的開始，哪里都可以，越碎片越能把包的加載延遲甚至不被加載；
7.用multiprocessing來實(shí)現(xiàn)多線程，可以跳出GIL的限制；
8.python處理循環(huán)很爛，解釋性語言就這樣，跟其它編譯型語言比就是蝸牛，所以減少循環(huán)次數(shù)和嵌套次數(shù)能顯著提升性能，當(dāng)然了使用pypy就沒有這個(gè)問題了；
9.使用加速器，很喜歡psyco的使用方式，如果用2.7-的版本那么不失為一個(gè)懶人的選擇，現(xiàn)在已經(jīng)不再維護(hù)，創(chuàng)始人去了pypy，pypy是用Python實(shí)現(xiàn)的python，底層轉(zhuǎn)為平臺(tái)依賴的c、.net、java的中間語言，方式非常聰明，大愛，但是缺點(diǎn)是庫的支持還不完善，我的項(xiàng)目基本都能支持，解決幾個(gè)小問題即可，如果性能瓶頸在循環(huán)和內(nèi)存上可以試試，最大的好處是不需要更改一句代碼和做另外的設(shè)置，沒有任何侵入。
參考資料：
Python 代碼性能優(yōu)化技巧： https://www.ibm.com/developerworks/cn/linux/l-cn-python-optim/
Python性能優(yōu)化技巧： http://kuanghy.github.io/2016/09/26/python-optimize
相關(guān)文章
在當(dāng)今的人工智能領(lǐng)域,大型語言模型（LLM）如GPT、BERT等已經(jīng)成為了研究和應(yīng)用的熱點(diǎn),但其訓(xùn)練和部署成本高昂,且在不同領(lǐng)域或任務(wù)間的遷移能力有限,因此,如何有效地實(shí)現(xiàn)LLM的模型遷移,成為了一個(gè)重要的研究方向,本文將深入探討如何使用Python實(shí)現(xiàn)LLM的模型遷2025-02-02
這篇文章主要介紹了Python hashlib和hmac模塊使用方法解析,文中通過示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下2020-12-12
解決項(xiàng)目pycharm能運(yùn)行,在終端卻無法運(yùn)行的問題
今天小編就為大家分享一篇解決項(xiàng)目pycharm能運(yùn)行,在終端卻無法運(yùn)行的問題，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過來看看吧2019-01-01
DRF之請(qǐng)求與響應(yīng)的實(shí)現(xiàn)
本文主要介紹了DRF請(qǐng)求與響應(yīng)的實(shí)現(xiàn)，文中通過示例代碼介紹的非常詳細(xì)，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2021-07-07
softmax及python實(shí)現(xiàn)過程解析
這篇文章主要介紹了softmax及python實(shí)現(xiàn)過程解析,文中通過示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下2019-09-09
這篇文章主要介紹了python中print輸出有空格的解決方案,具有很好的參考價(jià)值,希望對(duì)大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2024-02-02
Django如何實(shí)現(xiàn)密碼錯(cuò)誤報(bào)錯(cuò)提醒
這篇文章主要介紹了Django如何實(shí)現(xiàn)密碼錯(cuò)誤報(bào)錯(cuò)提醒,文中通過示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值2020-09-09
這篇文章主要介紹了Python簡(jiǎn)單讀寫Xls格式文檔的方法,結(jié)合實(shí)例形式分析了Python中xlrd和xlwt模塊的安裝及針對(duì)xls格式文檔的相關(guān)讀寫操作實(shí)現(xiàn)技巧,需要的朋友可以參考下2018-08-08
python+pytest接口自動(dòng)化之日志管理模塊loguru簡(jiǎn)介
python中有一個(gè)用起來非常簡(jiǎn)便的第三方日志管理模塊--loguru，不僅可以避免logging的繁瑣配置，而且可以很簡(jiǎn)單地避免在logging中多進(jìn)程多線程記錄日志時(shí)出現(xiàn)的問題，甚至還可以自定義控制臺(tái)輸出的日志顏色，接下來我們來學(xué)習(xí)怎么使用loguru模塊進(jìn)行日志管理2022-05-05
python3 BeautifulSoup模塊使用字典的方法抓取a標(biāo)簽內(nèi)的數(shù)據(jù)示例
這篇文章主要介紹了python3 BeautifulSoup模塊使用字典的方法抓取a標(biāo)簽內(nèi)的數(shù)據(jù),結(jié)合實(shí)例形式Fenix了python3 BeautifulSoup模塊進(jìn)行數(shù)據(jù)的抓取相關(guān)操作技巧,需要的朋友可以參考下2019-11-11