解決django中orm效率低的方法

這篇文章將為大家詳細(xì)講解有關(guān)解決django中orm效率低的方法，小編覺得挺實(shí)用的，因此分享給大家做個參考，希望大家閱讀完這篇文章后可以有所收獲。

一，利用標(biāo)準(zhǔn)數(shù)據(jù)庫優(yōu)化技術(shù)

傳統(tǒng)數(shù)據(jù)庫優(yōu)化技術(shù)博大精深，不同的數(shù)據(jù)庫有不同的優(yōu)化技巧，但重心還是有規(guī)則的。在這里算是題外話，挑兩點(diǎn)通用的說說：

索引，給關(guān)鍵的字段添加索引，性能能更上一層樓，如給表的關(guān)聯(lián)字段，搜索頻率高的字段加上索引等。Django建立實(shí)體的時候，支持給字段添加索引，具體參考Django.db.models.Field.db_index。按照經(jīng)驗(yàn)，Django建立實(shí)體之前應(yīng)該早想好表的結(jié)構(gòu)，盡量想到后面的擴(kuò)展性，避免后面的表的結(jié)構(gòu)變得面目全非。

使用適當(dāng)字段類型，本來varchar就搞定的字段，就別要text類型，小細(xì)節(jié)別不關(guān)緊要，后頭數(shù)據(jù)量一上去，愈來愈多的數(shù)據(jù)，小字段很可能是大問題。

二 ，了解Django的QuerySets

了解Django的QuerySets對象，對優(yōu)化簡單程序有至關(guān)重要的作用。QuerySets是有緩存的，一旦取出來，它就會在內(nèi)存里呆上一段時間，盡量重用它。

# 了解緩存屬性：
>>> entry = Entry.objects.get(id=1)
>>> entry.blog   # 博客實(shí)體第一次取出，是要訪問數(shù)據(jù)庫的
>>> entry.blog   # 第二次再用，那它就是緩存里的實(shí)體了，不再訪問數(shù)據(jù)庫
>>> entry = Entry.objects.get(id=1)
>>> entry.authors.all()   # 第一次all函數(shù)會查詢數(shù)據(jù)庫
>>> entry.authors.all()   # 第二次all函數(shù)還會查詢數(shù)據(jù)庫

all，count exists是調(diào)用函數(shù)（需要連接數(shù)據(jù)庫處理結(jié)果的），注意在模板template里的代碼，模板里不允許括號，但如果使用此類的調(diào)用函數(shù)，一樣去連接數(shù)據(jù)庫的，能用緩存的數(shù)據(jù)就別連接到數(shù)據(jù)庫去處理結(jié)果。還要注意的是，自定義的實(shí)體屬性，如果調(diào)用函數(shù)的，記得自己加上緩存策略。

利用好模板的with標(biāo)簽：

模板中多次使用的變量，要用with標(biāo)簽，把它看成變量的緩存行為吧。

使用QuerySets的iterator()： 　　

通常QuerySets先調(diào)用iterator再緩存起來，當(dāng)獲取大量的實(shí)體列表而僅使用一次時，緩存行為會耗費(fèi)寶貴的內(nèi)存，這時iterator()能幫到你，iterator()只調(diào)用iterator而省 去了緩存步驟，顯著減少內(nèi)存占用率，具體參考相關(guān)文檔。

三， 數(shù)據(jù)庫的工作就交給數(shù)據(jù)庫本身計算，別用Python處理

使用 filter and exclude 過濾不需要的記錄，這兩個是最常用語句，相當(dāng)是SQL的where

同一實(shí)體里使用F()表達(dá)式過濾其他字段

使用annotate對數(shù)據(jù)庫做聚合運(yùn)算

不要用python語言對以上類型數(shù)據(jù)過濾篩選，同樣的結(jié)果，python處理復(fù)雜度要高，而且效率不高， 白白浪費(fèi)內(nèi)存

使用QuerySet.extra() extra雖然擴(kuò)展性不太好，但功能很強(qiáng)大，如果實(shí)體里需要需要增加額外屬性，不得已時，通過extra來實(shí)現(xiàn)，也是個好辦法

使用原生的SQL語句 如果發(fā)現(xiàn)Django的ORM已經(jīng)實(shí)現(xiàn)不了你的需求，而extra也無濟(jì)于事的時候，那就用原生SQL語句

四，如果需要就一次性取出你所需要的數(shù)據(jù)

單一動作（如：同一個頁面）需要多次連接數(shù)據(jù)庫時，最好一次性取出所有需要的數(shù)據(jù)，減少連接數(shù)據(jù)庫次數(shù)。此類需求推薦使用QuerySet.select_related() 和 prefetch_related()

相反，別取出你不需要的東西，模版templates里往往只需要實(shí)體的某幾個字段而不是全部，這時QuerySet.values() 和 values_list()，對你有用，它們只取你需要的字段，返回字典dict和列表list類型的東西，在模版里夠用即可，這可減少內(nèi)存損耗，提高性能

同樣QuerySet.defer()和only()對提高性能也有很大的幫助，一個實(shí)體里可能有不少的字段，有些字段包含很多元數(shù)據(jù)，比如博客的正文，很多字符組成，Django獲取實(shí)體時（取出實(shí)體過程中會進(jìn)行一些python類型轉(zhuǎn)換工作），我們可以延遲大量元數(shù)據(jù)字段的處理，只處理需要的關(guān)鍵字段，這時QuerySet.defer()就派上用場了，在函數(shù)里傳入需要延時處理的字段即可；而only()和defer()是相反功能

使用QuerySet.count()代替len(queryset),雖然這兩個處理得出的結(jié)果是一樣的，但前者性能優(yōu)秀很多。同理判斷記錄存在時，QuerySet.exists()比if queryset實(shí)在強(qiáng)得太多了

五，懂減少數(shù)據(jù)庫的連接數(shù)

使用 QuerySet.update() 和 delete()，這兩個函數(shù)是能批處理多條記錄的，適當(dāng)使用它們事半功倍；如果可以，別一條條數(shù)據(jù)去update delete處理。

對于一次性取出來的關(guān)聯(lián)記錄，獲取外鍵的時候，直接取關(guān)聯(lián)表的屬性，而不是取關(guān)聯(lián)屬性，如：

entry.blog.id
優(yōu)于
entry.blog__id# 善于使用批量插入記錄，如：Entry.objects.bulk_create([
    Entry(headline="Python 3.0 Released"),
    Entry(headline="Python 3.1 Planned")
])
優(yōu)于
Entry.objects.create(headline="Python 3.0 Released")
Entry.objects.create(headline="Python 3.1 Planned")# 前者只連接一次數(shù)據(jù)庫，而后者連接兩次
# 還有相似的動作需要注意的，如：多對多的關(guān)系，my_band.members.add(me, my_friend)
優(yōu)于
my_band.members.add(me)
my_band.members.add(my_friend)

關(guān)于解決django中orm效率低的方法就分享到這里了，希望以上內(nèi)容可以對大家有一定的幫助，可以學(xué)到更多知識。如果覺得文章不錯，可以把它分享出去讓更多的人看到。