58到家數(shù)據(jù)庫30條軍規(guī)整理分享

  • 原文地址
  • 作者: 58沈劍
  • 軍規(guī)適用場景:并發(fā)量大、數(shù)據(jù)量大的互聯(lián)網(wǎng)業(yè)務(wù)
  • 軍規(guī):介紹內(nèi)容
  • 解讀:講解原因,解讀比軍規(guī)更重要
一、基礎(chǔ)規(guī)范

(1)必須使用InnoDB存儲引擎
 解讀:支持事務(wù)、行級鎖、并發(fā)性能更好、CPU及內(nèi)存緩存頁優(yōu)化使得資源利用率更高

(2)必須使用UTF8字符集[mysql 5.5.3之后支持UTF8MB4[應(yīng)該優(yōu)先使用], 支持存放表情符(存放表情符不會亂碼)]
 解讀:萬國碼,無需轉(zhuǎn)碼,無亂碼風(fēng)險.
 阿里云上RDS服務(wù)如果要從utf8升級到utf8mb4,需要重啟實例.
 自搭的Mysql實例可以完成在線轉(zhuǎn)換, 而不需要重啟實例.

(3)數(shù)據(jù)表、數(shù)據(jù)字段必須加入中文注釋
 解讀:N年后誰tm知道這個r1,r2,r3字段是干嘛的

(4)禁止使用存儲過程、視圖、觸發(fā)器、Event
 解讀:高并發(fā)大數(shù)據(jù)的互聯(lián)網(wǎng)業(yè)務(wù),架構(gòu)設(shè)計思路是“解放數(shù)據(jù)庫CPU,將計算轉(zhuǎn)移到服務(wù)層”,并發(fā)量大的情況下,這些功能很可能將數(shù)據(jù)庫拖死,業(yè)務(wù)邏輯放到服務(wù)層具備更好的擴展性,能夠輕易實現(xiàn)“增機器就加性能”。數(shù)據(jù)庫擅長存儲與索引,CPU計算還是上移吧

(5)禁止存儲大文件或者大照片
 解讀:為何要讓數(shù)據(jù)庫做它不擅長的事情?大文件和照片存儲在文件系統(tǒng),數(shù)據(jù)庫里存URI多好

二、命名規(guī)范

(6)只允許使用內(nèi)網(wǎng)域名,而不是ip連接數(shù)據(jù)庫
解讀:不只是數(shù)據(jù)庫,緩存/服務(wù)都要使用內(nèi)網(wǎng)域名連接.方便機器遷移/平滑升級/運維管理... 
(7)線上環(huán)境、開發(fā)環(huán)境、測試環(huán)境數(shù)據(jù)庫內(nèi)網(wǎng)域名遵循命名規(guī)范
  業(yè)務(wù)名稱:xxx
  線上環(huán)境:dj.xxx.db
  開發(fā)環(huán)境:dj.xxx.rdb
  測試環(huán)境:dj.xxx.tdb
  從庫在名稱后加-s標識,備庫在名稱后加-ss標識
  線上從庫:dj.xxx-s.db
  線上備庫:dj.xxx-sss.db

(8)庫名、表名、字段名:小寫,下劃線風(fēng)格,不超過32個字符,必須見名知意,禁止拼音英文混用

(9)表名t_xxx,非唯一索引名idx_xxx,唯一索引名uniq_xxx

三、表設(shè)計規(guī)范

(10)單實例表數(shù)目必須小于500

(11)單表列數(shù)目必須小于30

(12)表必須有主鍵,例如自增主鍵
 解讀:
  a)主鍵遞增,數(shù)據(jù)行寫入可以提高插入性能,可以避免page分裂,減少表碎片提升空間和內(nèi)存的使用
  b)主鍵要選擇較短的數(shù)據(jù)類型, Innodb引擎普通索引都會保存主鍵的值,較短的數(shù)據(jù)類型可以有效的減少索引的磁盤空間,提高索引的緩存效率
  c) 無主鍵的表刪除,在row模式的主從架構(gòu),會導(dǎo)致備庫夯住

(13)禁止使用外鍵,如果有外鍵完整性約束,需要應(yīng)用程序控制
 解讀:外鍵會導(dǎo)致表與表之間耦合,update與delete操作都會涉及相關(guān)聯(lián)的表,十分影響sql 的性能,甚至?xí)斐伤梨i。高并發(fā)情況下容易造成數(shù)據(jù)庫性能,大數(shù)據(jù)高并發(fā)業(yè)務(wù)場景數(shù)據(jù)庫使用以性能優(yōu)先

四、字段設(shè)計規(guī)范

(14)必須把字段定義為NOT NULL并且提供默認值
解讀:
  a)null的列使索引/索引統(tǒng)計/值比較都更加復(fù)雜,對MySQL來說更難優(yōu)化
  b)null 這種類型MySQL內(nèi)部需要進行特殊處理,增加數(shù)據(jù)庫處理記錄的復(fù)雜性;同等條件下,表中有較多空字段的時候,數(shù)據(jù)庫的處理性能會降低很多
  c)null值需要更多的存儲空,無論是表還是索引中每行中的null的列都需要額外的空間來標識
  d)對null 的處理時候,只能采用is null或is not null,而不能采用=、in、<、<>、!=、not in這些操作符號。如:where name!=’shenjian’,如果存在name為null值的記錄,查詢結(jié)果就不會包含name為null值的記錄

(15)禁止使用TEXT、BLOB類型
 解讀:會浪費更多的磁盤和內(nèi)存空間,非必要的大量的大字段查詢會淘汰掉熱數(shù)據(jù),導(dǎo)致內(nèi)存命中率急劇降低,影響數(shù)據(jù)庫性能. [text必要情況下可以使用, 比如富文本, 帖子等.]

(16)禁止使用小數(shù)存儲貨幣
 解讀:使用整數(shù)吧,小數(shù)容易導(dǎo)致錢對不上. [單位用分, 乘以100或1000倍]

(17)必須使用varchar(20)存儲手機號
 解讀:
  a)涉及到區(qū)號或者國家代號,可能出現(xiàn)+-()
  b)手機號會去做數(shù)學(xué)運算么?
  c)varchar可以支持模糊查詢,例如:like“138%”

(18)禁止使用ENUM,可使用TINYINT代替
 解讀:
  a)增加新的ENUM值要做DDL操作
  b)ENUM的內(nèi)部實際存儲就是整數(shù),你以為自己定義的是字符串?

五、索引設(shè)計規(guī)范

(19)單表索引建議控制在5個以內(nèi)
 解讀:只要索引更新頻率不高, 有必要就可以加索引.mysql索引設(shè)計
(20)單索引字段數(shù)不允許超過5個
 解讀:字段超過5個時,實際已經(jīng)起不到有效過濾數(shù)據(jù)的作用了

(21)禁止在更新十分頻繁、區(qū)分度不高的屬性上建立索引
 解讀:
  a)更新會變更B+樹,更新頻繁的字段建立索引會大大降低數(shù)據(jù)庫性能
  b)“性別”這種區(qū)分度不大的屬性,建立索引是沒有什么意義的,不能有效過濾數(shù)據(jù),性能與全表掃描類似

(22)建立組合索引,必須把區(qū)分度高的字段放在前面
 解讀:能夠更加有效的過濾數(shù)據(jù)

六、SQL使用規(guī)范

(23)*禁止使用SELECT ,只獲取必要的字段,需要顯示說明列屬性
 解讀:
  a)讀取不需要的列會增加CPU、IO、NET消耗
  b)不能有效的利用覆蓋索引
  c)使用SELECT *容易在增加或者刪除字段后出現(xiàn)程序BUG

(24)禁止使用INSERT INTO t_xxx VALUES(xxx),必須顯示指定插入的列屬性
解讀:容易在增加或者刪除字段后出現(xiàn)程序BUG

(25)禁止使用屬性隱式轉(zhuǎn)換
 解讀:SELECT uid FROM t_user WHERE phone=13812345678 會導(dǎo)致全表掃描,而不能命中phone索引,猜猜為什么?(這個線上問題不止出現(xiàn)過一次)[int數(shù)據(jù)類型優(yōu)先級高于varchar, 此查詢數(shù)據(jù)庫會把列phone轉(zhuǎn)換為int類型, 因此會把所有該列的值轉(zhuǎn)換為int, 因此只能通過全盤掃描操作][正確寫法: phone = '13812345678']

(26)禁止在WHERE條件的屬性上使用函數(shù)或者表達式
 解讀:SELECT uid FROM t_user WHERE from_unixtime(day)>='2017-02-15' 會導(dǎo)致全表掃描
正確的寫法是:SELECT uid FROM t_user WHERE day>= unix_timestamp('2017-02-15 00:00:00')[屬性計算不能命中索引, 需要使用值計算]

(27)禁止負向查詢,以及%開頭的模糊查詢
 解讀:
  a)負向查詢條件:NOT、!=、<>、!<、!>、NOT IN、NOT LIKE等,會導(dǎo)致全表掃描
  b)%開頭的模糊查詢,會導(dǎo)致全表掃描

(28)禁止大表使用JOIN查詢,禁止大表使用子查詢
 解讀:會產(chǎn)生臨時表,消耗較多內(nèi)存與CPU,極大影響數(shù)據(jù)庫性能.[一對多, 分兩次查詢. 多對多,分頁, IN, 如果實在搞不定, 只能一頁for多次查詢(例如20次), 至少這個CPU耗在服務(wù)層, 可以隨時加機器擴展]

(29)禁止使用OR條件,必須改為IN查詢
 解讀:舊版本Mysql的OR查詢是不能命中索引的,即使能命中索引,為何要讓數(shù)據(jù)庫耗費更多的CPU幫助實施查詢優(yōu)化呢?

(30)應(yīng)用程序必須捕獲SQL異常,并有相應(yīng)處理

  • 對于狀態(tài)/類型字段, 如果值域是非常有限的, 有沒有什么特殊的緣由, 建議用整型.
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。

友情鏈接更多精彩內(nèi)容