国产xxxx99真实实拍_久久不雅视频_高清韩国a级特黄毛片_嗯老师别我我受不了了小说

資訊專欄INFORMATION COLUMN

Django數(shù)據(jù)庫連接丟失問題

legendaryedu / 1225人閱讀

摘要:已知此過長需要非常長時(shí)間,那么最終保存數(shù)據(jù)庫就最好先調(diào)用防止連接丟失題外話實(shí)際上所述情況最好從根本上解決處理慢的問題,也可以換作異步處理,從根本上解決問題。

問題

在Django中使用mysql偶爾會(huì)出現(xiàn)數(shù)據(jù)庫連接丟失的情況,錯(cuò)誤通常有如下兩種

1. `OperationalError: (2006, "MySQL server has gone away")`  
1. `OperationalError: (2013, "Lost connection to MySQL server during query")`  

查詢mysql全局變量SHOW GLOBAL VARIABLES;可以看到wait_timeout,此變量表示連接空閑時(shí)間。如果客戶端使用一個(gè)連接查詢多次數(shù)據(jù)庫,如果連續(xù)查詢則沒有問題,如果查詢幾次后停頓超過wait_timeout后再次查詢就會(huì)出現(xiàn)數(shù)據(jù)庫連接丟失。

復(fù)現(xiàn)

下面用Django復(fù)現(xiàn)下次問題:

將mysql的wait_timeout設(shè)置為10秒,然后進(jìn)入django shell模擬查詢(以下錯(cuò)誤信息只保留了部分)

In[1]:import time
In[2]:from django.contrib.auth.models import User
In[3]:list(User.objects.filter(id=1))
Out[3]:[]
In[4]:time.sleep(15) # 模擬比較慢的代碼(其中沒有查詢數(shù)據(jù)庫的代碼),或者空閑什么都不操作一段時(shí)間,此時(shí)間要比`wait_timeout`大一些
list(User.objects.filter(id=1))
Traceback (most recent call last):

  File "", line 1, in 
    list(User.objects.filter(id=1))

  File "/usr/lib/python3.6/site-packages/pymysql/connections.py", line 1037, in _read_bytes
    CR.CR_SERVER_LOST, "Lost connection to MySQL server during query")
django.db.utils.OperationalError: (2013, "Lost connection to MySQL server during query")
尋求

那么以上問題就基本說明了是空閑時(shí)間過長導(dǎo)致的錯(cuò)誤。
django為了減少不必要的數(shù)據(jù)庫連接、關(guān)閉,復(fù)用了數(shù)據(jù)庫連接,當(dāng)開始一個(gè)請求后建立一個(gè)連接池存放連接,之后此次請求都復(fù)用一個(gè)連接。那猜測就是django保存連接的比wait_timeout長了,如果保存時(shí)間短一些就可以重新建立連接避免此錯(cuò)誤了。
沒錯(cuò),官方文檔也已經(jīng)說明了此問題,設(shè)置數(shù)據(jù)庫 CONN_MAX_AGE參數(shù),示例:

DATABASES = {
    "default": {
            "ENGINE": "django.db.backends.mysql",
            "NAME": "",
            "USER": "",
            "PASSWORD": "",
            "HOST": "",
            "CONN_MAX_AGE": 9  # 比wait_timeout小一些
    }
}

當(dāng)我們測試后卻發(fā)現(xiàn),事情并非想想中那么簡單。為何錯(cuò)誤依舊出現(xiàn)?這一切的背后, 是人性的扭曲還是道德的淪喪?敬請收看下節(jié)《突破》。

突破

對django源碼中CONN_MAX_AGE進(jìn)行了一番搜索,順藤摸瓜發(fā)現(xiàn)了django關(guān)閉失效連接的方法django.db.close_old_connections()

# Register an event to reset transaction state and close connections past
# their lifetime.
def close_old_connections(**kwargs):
    for conn in connections.all():
        conn.close_if_unusable_or_obsolete()

signals.request_started.connect(close_old_connections)
signals.request_finished.connect(close_old_connections)

重點(diǎn)在最后兩行,通過signal實(shí)現(xiàn)特定事件時(shí)執(zhí)行此方法,兩個(gè)特定事件顧名思義是請求開始和請求結(jié)束。而我們報(bào)錯(cuò)的是在一次請求中,所以此法通常無效,僅僅是實(shí)現(xiàn)每個(gè)請求關(guān)閉并重新建立連接。

解決

復(fù)現(xiàn)問題的django shell不要關(guān)閉,繼續(xù)執(zhí)行如下代碼:

In[5]:from django.db import close_old_connections
In[6]:close_old_connections()
In[7]:list(User.objects.filter(id=1))
Out[7]: []

調(diào)用django.db.close_old_connections后再次查詢就沒有錯(cuò)誤了。
那么我們要避免此錯(cuò)誤就要執(zhí)行每個(gè)數(shù)據(jù)庫查詢前調(diào)用django.db.close_old_connections方法。

一般情況不會(huì)出現(xiàn)此類問題,因?yàn)橐粋€(gè)請求中不間斷進(jìn)行數(shù)據(jù)庫查詢,無需每個(gè)請求調(diào)用此方法,杞人憂天。

有時(shí)候一個(gè)請求中數(shù)據(jù)量較大,會(huì)查詢數(shù)據(jù)庫后進(jìn)行一段時(shí)間其他(不涉及數(shù)據(jù)庫)處理,比如先查詢一些數(shù)據(jù),然后將數(shù)據(jù)處理、生成excel、保存文件并生成url。已知此過長需要非常長時(shí)間,那么最終url保存數(shù)據(jù)庫就最好先調(diào)用django.db.close_old_connections防止連接丟失

題外話
實(shí)際上②所述情況最好從根本上解決處理慢的問題,也可以換作異步處理,從根本上解決問題。

文章版權(quán)歸作者所有,未經(jīng)允許請勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。

轉(zhuǎn)載請注明本文地址:http://specialneedsforspecialkids.com/yun/42875.html

相關(guān)文章

  • django數(shù)據(jù)庫自動(dòng)重連

    摘要:簡介數(shù)據(jù)庫連接超過導(dǎo)致連接丟失時(shí)自動(dòng)重新連接數(shù)據(jù)庫安裝注意僅支持,使使用需要先安裝包并在所在目錄的增加如下代碼使用添加到的省略其他配置其他問題事務(wù)或者其他非自動(dòng)提交情況下將不會(huì)自動(dòng)重連,否則可能導(dǎo)致連接丟失前的寫入沒有被丟棄 簡介 Django數(shù)據(jù)庫連接超過wait_timeout導(dǎo)致連接丟失時(shí)自動(dòng)重新連接數(shù)據(jù)庫 https://github.com/zhanghaofe... 安裝 ...

    yzzz 評(píng)論0 收藏0
  • Django-緩存

    摘要:自帶了一個(gè)健壯的緩存系統(tǒng)來保存動(dòng)態(tài)頁面,避免每次請求都重新計(jì)算。緩存中的和方法是很常見的。盡量放在第一個(gè)繼承的類設(shè)置過期時(shí)間根據(jù)自己需求加緩存。目前這個(gè)緩存使用的是內(nèi)存。 概述:對于中等流量的網(wǎng)站來說,盡可能的減少開銷是非常必要的。緩存數(shù)據(jù)就是為了保存那些需要很多計(jì)算資源的結(jié)果,這樣的話就不必在下次重復(fù)消耗計(jì)算資源。獲取數(shù)據(jù)的數(shù)據(jù)的時(shí)候就是去緩存中拿,拿到了直接返回,沒拿到就去數(shù)據(jù)庫中...

    aervon 評(píng)論0 收藏0

發(fā)表評(píng)論

0條評(píng)論

最新活動(dòng)
閱讀需要支付1元查看
<