MySQL數(shù)據(jù)庫(kù)
(一)建表規(guī)約
1.【強(qiáng)制】表達(dá)是與否概念的字段,必須使用is_xxx的方式命名,數(shù)據(jù)類型是unsignedtinyint(1表示是,0表示否)
。說(shuō)明:任何字段如果為非負(fù)數(shù),必須是unsigned。正例:表達(dá)邏輯刪除的字段名is_deleted,1表示刪除,0表示未刪除。
2.【強(qiáng)制】表名、字段名必須使用小寫(xiě)字母或數(shù)字,禁止出現(xiàn)數(shù)字開(kāi)頭,禁止兩個(gè)下劃線中間只出現(xiàn)數(shù)字。
數(shù)據(jù)庫(kù)字段名的修改代價(jià)很大,因?yàn)闊o(wú)法進(jìn)行預(yù)發(fā)布,所以字段名稱需要慎重考慮。
說(shuō)明:MySQL在Windows下不區(qū)分大小寫(xiě),但在Linux下默認(rèn)是區(qū)分大小寫(xiě)。
因此,數(shù)據(jù)庫(kù)名、表名、字段名,都不允許出現(xiàn)任何大寫(xiě)字母,避免節(jié)外生枝。
正例:aliyun_admin,rdc_config,level3_name
反例:AliyunAdmin,rdcConfig,level_3_name
3.【強(qiáng)制】表名不使用復(fù)數(shù)名詞。說(shuō)明:表名應(yīng)該僅僅表示表里面的實(shí)體內(nèi)容,不應(yīng)該表示實(shí)體數(shù)量,對(duì)應(yīng)于DO類名也是單數(shù)形式,符合表達(dá)習(xí)慣。
4.【強(qiáng)制】禁用保留字,如desc、range、match、delayed等,請(qǐng)參考MySQL官方保留字。
5.【強(qiáng)制】主鍵索引名為pk_字段名;唯一索引名為uk_字段名;普通索引名則為idx_字段名。
說(shuō)明:pk_ 即primary key;uk_ 即uniquekey;idx_ 即index的簡(jiǎn)稱。
6.【強(qiáng)制】小數(shù)類型為decimal,禁止使用float和double。
說(shuō)明:float和double在存儲(chǔ)的時(shí)候,存在精度損失的問(wèn)題,很可能在值的比較時(shí),得到不正確的結(jié)果。
如果存儲(chǔ)的數(shù)據(jù)范圍超過(guò)decimal的范圍,建議將數(shù)據(jù)拆成整數(shù)和小數(shù)分開(kāi)存儲(chǔ)。
7.【強(qiáng)制】如果存儲(chǔ)的字符串長(zhǎng)度幾乎相等,使用char定長(zhǎng)字符串類型。
8.【強(qiáng)制】varchar是可變長(zhǎng)字符串,不預(yù)先分配存儲(chǔ)空間,長(zhǎng)度不要超過(guò)5000,如果存儲(chǔ)長(zhǎng)度大于此值,定義字段類型為text,獨(dú)立出來(lái)一張表,用主鍵來(lái)對(duì)應(yīng),避免影響其它字段索引效率。
9.【強(qiáng)制】表必備三字段:id, gmt_create, gmt_modified。
說(shuō)明:其中id必為主鍵,類型為unsigned bigint、單表時(shí)自增、步長(zhǎng)為1。
gmt_create, gmt_modified的類型均為date_time類型,前者現(xiàn)在時(shí)表示主動(dòng)創(chuàng)建,后者過(guò)去分詞表示被動(dòng)更新。
10.【推薦】表的命名最好是加上“業(yè)務(wù)名稱_表的作用”。正例:alipay_task/ force_project/ trade_config
11.【推薦】庫(kù)名與應(yīng)用名稱盡量一致。
12.【推薦】如果修改字段含義或?qū)ψ侄伪硎镜臓顟B(tài)追加時(shí),需要及時(shí)更新字段注釋。
13.【推薦】字段允許適當(dāng)冗余,以提高查詢性能,但必須考慮數(shù)據(jù)一致。
冗余字段應(yīng)遵循:
1)不是頻繁修改的字段。
2)不是varchar超長(zhǎng)字段,更不能是text字段。
正例:商品類目名稱使用頻率高,字段長(zhǎng)度短,名稱基本一成不變,可在相關(guān)聯(lián)的表中冗余存儲(chǔ)類目名稱,避免關(guān)聯(lián)查詢。
14.【推薦】單表行數(shù)超過(guò)500萬(wàn)行或者單表容量超過(guò)2GB,才推薦進(jìn)行分庫(kù)分表。
說(shuō)明:如果預(yù)計(jì)三年后的數(shù)據(jù)量根本達(dá)不到這個(gè)級(jí)別,請(qǐng)不要在創(chuàng)建表時(shí)就分庫(kù)分表。
15.【參考】合適的字符存儲(chǔ)長(zhǎng)度,不但節(jié)約數(shù)據(jù)庫(kù)表空間、節(jié)約索引存儲(chǔ),更重要的是提升檢索速度。
正例:如下表,其中無(wú)符號(hào)值可以避免誤存負(fù)數(shù),且擴(kuò)大了表示范圍。
對(duì)象年齡區(qū)間類型字節(jié)表示范圍
人150歲之內(nèi)unsigned tinyint1無(wú)符號(hào)值:0到255
龜數(shù)百歲unsigned smallint2無(wú)符號(hào)值:0到65535
恐龍化石數(shù)千萬(wàn)年unsigned int4無(wú)符號(hào)值:0到約42.9億
太陽(yáng)約50億年unsigned bigint8無(wú)符號(hào)值:0到約10的19次方
(二)索引規(guī)約
1.【強(qiáng)制】業(yè)務(wù)上具有唯一特性的字段,即使是多個(gè)字段的組合,也必須建成唯一索引。
說(shuō)明:不要以為唯一索引影響了insert速度,這個(gè)速度損耗可以忽略,但提高查找速度是明顯的;
另外,即使在應(yīng)用層做了非常完善的校驗(yàn)控制,只要沒(méi)有唯一索引,根據(jù)墨菲定律,必然有臟數(shù)據(jù)產(chǎn)生。
2.【強(qiáng)制】超過(guò)三個(gè)表禁止join。需要join的字段,數(shù)據(jù)類型必須絕對(duì)一致;
多表關(guān)聯(lián)查詢時(shí),保證被關(guān)聯(lián)的字段需要有索引。說(shuō)明:即使雙表join也要注意表索引、SQL性能。
3.【強(qiáng)制】在varchar字段上建立索引時(shí),必須指定索引長(zhǎng)度,沒(méi)必要對(duì)全字段建立索引,根據(jù)實(shí)際文本區(qū)分度決定索引長(zhǎng)度即可。
說(shuō)明:索引的長(zhǎng)度與區(qū)分度是一對(duì)矛盾體,一般對(duì)字符串類型數(shù)據(jù),長(zhǎng)度為20的索引,區(qū)分度會(huì)高達(dá)90%以上,可以使用count(distinctleft(列名, 索引長(zhǎng)度))/count()的區(qū)分度來(lái)確定。
4.【強(qiáng)制】頁(yè)面搜索嚴(yán)禁左模糊或者全模糊,如果需要請(qǐng)走搜索引擎來(lái)解決。
說(shuō)明:索引文件具有B-Tree的最左前綴匹配特性,如果左邊的值未確定,那么無(wú)法使用此索引。
5.【推薦】如果有orderby的場(chǎng)景,請(qǐng)注意利用索引的有序性。
orderby最后的字段是組合索引的一部分,并且放在索引組合順序的最后,避免出現(xiàn)file_sort的情況,影響查詢性能。
正例:wherea=? andb=? orderbyc;索引:a_b_c
反例:索引中有范圍查找,那么索引有序性無(wú)法利用,如:WHEREa>10 ORDERBYb;索引a_b無(wú)法排序。
6.【推薦】利用覆蓋索引來(lái)進(jìn)行查詢操作,避免回表。
說(shuō)明:如果一本書(shū)需要知道第11章是什么標(biāo)題,會(huì)翻開(kāi)第11章對(duì)應(yīng)的那一頁(yè)嗎?目錄瀏覽一下就好,這個(gè)目錄就是起到覆蓋索引的作用。
正例:能夠建立索引的種類:主鍵索引、唯一索引、普通索引,而覆蓋索引是一種查詢的一種效果,用explain的結(jié)果,extra列會(huì)出現(xiàn):usingindex。
7.【推薦】利用延遲關(guān)聯(lián)或者子查詢優(yōu)化超多分頁(yè)場(chǎng)景。
說(shuō)明:MySQL并不是跳過(guò)offset行,而是取offset+N行,然后返回放棄前offset行,返回N行,
那當(dāng)offset特別大的時(shí)候,效率就非常的低下,要么控制返回的總頁(yè)數(shù),要么對(duì)超過(guò)特定閾值的頁(yè)數(shù)進(jìn)行SQL改寫(xiě)。
正例:先快速定位需要獲取的id段,然后再關(guān)聯(lián):SELECT a. FROM 表1 a, (select id from 表1 where 條件LIMIT 100000,20 ) b where a.id=b.id
8.【推薦】SQL性能優(yōu)化的目標(biāo):至少要達(dá)到range級(jí)別,要求是ref級(jí)別,如果可以是consts最好。
說(shuō)明:
1)consts單表中最多只有一個(gè)匹配行(主鍵或者唯一索引),在優(yōu)化階段即可讀取到數(shù)據(jù)。
2)ref指的是使用普通的索引(normalindex)。
3)range對(duì)索引進(jìn)行范圍檢索。
反例:explain表的結(jié)果,type=index,索引物理文件全掃描,速度非常慢,這個(gè)index級(jí)別比較range還低,與全表掃描是小巫見(jiàn)大巫。
9.【推薦】建組合索引的時(shí)候,區(qū)分度最高的在最左邊。正例:如果wherea=? andb=? ,a列的幾乎接近于唯一值,那么只需要單建idx_a索引即可。
說(shuō)明:存在非等號(hào)和等號(hào)混合判斷條件時(shí),在建索引時(shí),請(qǐng)把等號(hào)條件的列前置。
如:wherea>? andb=? 那么即使a的區(qū)分度更高,也必須把b放在索引的最前列。
10.【推薦】防止因字段類型不同造成的隱式轉(zhuǎn)換,導(dǎo)致索引失效。
11.【參考】創(chuàng)建索引時(shí)避免有如下極端誤解:
1)寧濫勿缺。認(rèn)為一個(gè)查詢就需要建一個(gè)索引。
2)寧缺勿濫。認(rèn)為索引會(huì)消耗空間、嚴(yán)重拖慢更新和新增速度。
3)抵制惟一索引。認(rèn)為業(yè)務(wù)的惟一性一律需要在應(yīng)用層通過(guò)“先查后插”方式解決。
(三)SQL語(yǔ)句
1.【強(qiáng)制】不要使用count(列名)或count(常量)來(lái)替代count(),count()是SQL92定義的標(biāo)準(zhǔn)統(tǒng)計(jì)行數(shù)的語(yǔ)法,跟數(shù)據(jù)庫(kù)無(wú)關(guān),跟NULL和非NULL無(wú)關(guān)。
說(shuō)明:count(*)會(huì)統(tǒng)計(jì)值為NULL的行,而count(列名)不會(huì)統(tǒng)計(jì)此列為NULL值的行。
2.【強(qiáng)制】count(distinctcol)計(jì)算該列除NULL之外的不重復(fù)行數(shù),注意count(distinctcol1, col2)如果其中一列全為NULL,那么即使另一列有不同的值,也返回為0。
3.【強(qiáng)制】當(dāng)某一列的值全是NULL時(shí),count(col)的返回結(jié)果為0,但sum(col)的返回結(jié)果為NULL,因此使用sum()時(shí)需注意NPE問(wèn)題。
正例:可以使用如下方式來(lái)避免sum的NPE問(wèn)題:SELECTIF(ISNULL(SUM(g)),0,SUM(g))FROMtable;
4.【強(qiáng)制】使用ISNULL()來(lái)判斷是否為NULL值。
說(shuō)明:NULL與任何值的直接比較都為NULL。
1)NULL<>NULL的返回結(jié)果是NULL,而不是false。
2)NULL=NULL的返回結(jié)果是NULL,而不是true。
3)NULL<>1的返回結(jié)果是NULL,而不是true。
5.【強(qiáng)制】在代碼中寫(xiě)分頁(yè)查詢邏輯時(shí),若count為0應(yīng)直接返回,避免執(zhí)行后面的分頁(yè)語(yǔ)句。
6.【強(qiáng)制】不得使用外鍵與級(jí)聯(lián),一切外鍵概念必須在應(yīng)用層解決。
說(shuō)明:以學(xué)生和成績(jī)的關(guān)系為例,學(xué)生表中的student_id是主鍵,那么成績(jī)表中的student_id則為外鍵。
如果更新學(xué)生表中的student_id,同時(shí)觸發(fā)成績(jī)表中的student_id更新,即為級(jí)聯(lián)更新。
外鍵與級(jí)聯(lián)更新適用于單機(jī)低并發(fā),不適合分布式、高并發(fā)集群;
級(jí)聯(lián)更新是強(qiáng)阻塞,存在數(shù)據(jù)庫(kù)更新風(fēng)暴的風(fēng)險(xiǎn);外鍵影響數(shù)據(jù)庫(kù)的插入速度。
7.【強(qiáng)制】禁止使用存儲(chǔ)過(guò)程,存儲(chǔ)過(guò)程難以調(diào)試和擴(kuò)展,更沒(méi)有移植性。
8.【強(qiáng)制】數(shù)據(jù)訂正時(shí),刪除和修改記錄時(shí),要先select,避免出現(xiàn)誤刪除,確認(rèn)無(wú)誤才能執(zhí)行更新語(yǔ)句。
9.【推薦】in操作能避免則避免,若實(shí)在避免不了,需要仔細(xì)評(píng)估in后邊的集合元素?cái)?shù)量,控制在1000個(gè)之內(nèi)。
10.【參考】如果有全球化需要,所有的字符存儲(chǔ)與表示,均以u(píng)tf-8編碼,注意字符統(tǒng)計(jì)函數(shù)的區(qū)別。
說(shuō)明:
SELECT LENGTH(“輕松工作”);返回為12
SELECT CHARACTER_LENGTH(“輕松工作”);返回為4
如果需要存儲(chǔ)表情,那么選擇utfmb4來(lái)進(jìn)行存儲(chǔ),注意它與utf-8編碼的區(qū)別。
11.【參考】TRUNCATETABLE比DELETE速度快,且使用的系統(tǒng)和事務(wù)日志資源少,
但TRUNCATE無(wú)事務(wù)且不觸發(fā)trigger,有可能造成事故,故不建議在開(kāi)發(fā)代碼中使用此語(yǔ)句。
說(shuō)明:
TRUNCATETABLE在功能上與不帶WHERE子句的DELETE語(yǔ)句相同。
(四)ORM映射
1.【強(qiáng)制】在表查詢中,一律不要使用* 作為查詢的字段列表,需要哪些字段必須明確寫(xiě)明。
說(shuō)明:
1)增加查詢分析器解析成本。
2)增減字段容易與resultMap配置不一致。
2.【強(qiáng)制】POJO類的布爾屬性不能加is,而數(shù)據(jù)庫(kù)字段必須加is_,要求在resultMap中進(jìn)行字段與屬性之間的映射。
說(shuō)明:參見(jiàn)定義POJO類以及數(shù)據(jù)庫(kù)字段定義規(guī)定,在<resultMap>中增加映射,是必須的。
在MyBatis Generator生成的代碼中,需要進(jìn)行對(duì)應(yīng)的修改。
3.【強(qiáng)制】不要用resultClass當(dāng)返回參數(shù),即使所有類屬性名與數(shù)據(jù)庫(kù)字段一一對(duì)應(yīng),也需要定義;
反過(guò)來(lái),每一個(gè)表也必然有一個(gè)與之對(duì)應(yīng)。說(shuō)明:配置映射關(guān)系,使字段與DO類解耦,方便維護(hù)。
4.【強(qiáng)制】sql.xml配置參數(shù)使用:#{},#param# 不要使用${} 此種方式容易出現(xiàn)SQL注入。
5.【強(qiáng)制】iBATIS自帶的queryForList(StringstatementName,intstart,intsize)不推薦使用。
說(shuō)明:其實(shí)現(xiàn)方式是在數(shù)據(jù)庫(kù)取到statementName對(duì)應(yīng)的SQL語(yǔ)句的所有記錄,再通過(guò)subList取start,size的子集合。
正例:Map<String, Object> map = new HashMap<String, Object>(); map.put(“start”, start); map.put(“size”, size);
6.【強(qiáng)制】不允許直接拿HashMap與Hashtable作為查詢結(jié)果集的輸出。
說(shuō)明:resultClass=”Hashtable”,會(huì)置入字段名和屬性值,但是值的類型不可控。
7.【強(qiáng)制】更新數(shù)據(jù)表記錄時(shí),必須同時(shí)更新記錄對(duì)應(yīng)的gmt_modified字段值為當(dāng)前時(shí)間。
8.【推薦】不要寫(xiě)一個(gè)大而全的數(shù)據(jù)更新接口。
傳入為POJO類,不管是不是自己的目標(biāo)更新字段,都進(jìn)行update table set c1=value1,c2=value2,c3=value3;
這是不對(duì)的。執(zhí)行SQL時(shí),不要更新無(wú)改動(dòng)的字段,一是易出錯(cuò);二是效率低;三是增加binlog存儲(chǔ)。
9.【參考】@Transactional事務(wù)不要濫用。事務(wù)會(huì)影響數(shù)據(jù)庫(kù)的QPS,另外使用事務(wù)的地方需要考慮各方面的回滾方案,包括緩存回滾、搜索引擎回滾、消息補(bǔ)償、統(tǒng)計(jì)修正等。
10.【參考】<isEqual>中的compareValue是與屬性值對(duì)比的常量,一般是數(shù)字,表示相等時(shí)帶上此條件;
<isNotEmpty>表示不為空且不為null時(shí)執(zhí)行;<isNotNull>表示不為null值時(shí)執(zhí)行