一.diff的前提
對(duì)該需求的設(shè)計(jì)實(shí)現(xiàn)了解
對(duì)業(yè)務(wù)需求的了解
對(duì)系統(tǒng)結(jié)構(gòu)、數(shù)據(jù)流完整的了解
二.diff代碼時(shí)候至少要做到以下幾件事
查看需求的功能是否實(shí)現(xiàn)
查看變更對(duì)整個(gè)系統(tǒng)的影響點(diǎn),補(bǔ)充checklist
根據(jù)變更,追述到入口點(diǎn)(Dubbo, http, 頁面),進(jìn)行回歸測試覆蓋變更代碼邏輯
發(fā)現(xiàn)業(yè)務(wù)漏洞
三.diff中關(guān)注的內(nèi)容
業(yè)務(wù)是否如實(shí)在代碼中實(shí)現(xiàn)(不管對(duì)錯(cuò)),改多了、改少了?是否符合設(shè)計(jì);邏輯是否都是完整閉合的(即,能按照完整流程圖實(shí)施,考慮所有異常分支)
diff時(shí)要進(jìn)入業(yè)務(wù),不要深入代碼,要多想else是否缺了,如果沒有else的時(shí)候要考慮是否漏了業(yè)務(wù)
某個(gè)時(shí)間點(diǎn)的task是否有沖突?需要考慮數(shù)據(jù)量等問題
線上是什么樣子的架構(gòu)?
發(fā)布被diff的代碼時(shí)候是否會(huì)異常?
日志、業(yè)務(wù)監(jiān)控的添加是否完整
監(jiān)控:失敗、成功是否都有監(jiān)控,在這個(gè)業(yè)務(wù)上次數(shù)和時(shí)間我們更關(guān)注那個(gè)?
日志是否需要單獨(dú)打印?是否需要打印,打印的級(jí)別。
四.代碼層面
代碼的基本規(guī)范是否滿足(視個(gè)人能力及代碼水平而定)比如:日志規(guī)范、db鏈接、前端調(diào)用的域名
代碼對(duì)異常、超時(shí)相關(guān)的處理,是否輸出相關(guān)日志
代碼中長出現(xiàn)不好驗(yàn)證的測試點(diǎn),如:線程是否回收了?鏈接是否因?yàn)閿?shù)據(jù)量過大會(huì)釋放?
新寫代碼是否重復(fù)造輪,是否有必要重寫,比如:已有的qunar相關(guān)類庫實(shí)現(xiàn)相同功能
對(duì)事務(wù)的處理
通過方法的調(diào)用關(guān)系找到最終的用戶,其他的方法調(diào)用,要找到誰在使用?sql改了,有哪些查詢受影響?
五.DB設(shè)計(jì)是否合理
字段、索引的設(shè)計(jì)(觀察屬性)
新舊數(shù)據(jù)的處理、兼容
大表的查詢,是否走了索引,這樣加索引是否正確
數(shù)據(jù)庫的表結(jié)構(gòu)能承受多大的數(shù)據(jù)庫?
六.配置相關(guān)測試
對(duì)dubbo、qmq、qschedule、qconfig的配置,超時(shí)相關(guān)
qzz版本是否變更
線上環(huán)境是否修改?
beta的配置是否使用的線上地址?
七.對(duì)系統(tǒng)結(jié)構(gòu)的測試
緩存有效性:將緩存服務(wù)器清楚掉的處理
容災(zāi)
外部系統(tǒng)調(diào)用常見處理:超時(shí)、異常、retry次數(shù)
被調(diào)用的外部接口是否可用?該接口wiki地址?
八.對(duì)于無法測試執(zhí)行的中間數(shù)據(jù),如何添加測試方法
九.關(guān)注beta和線上的區(qū)別
賬戶是否在線上可以使用
接口是否可以使用(包括圖片和接口)
db地址是否為ip,禁止用機(jī)器名
前端接口外網(wǎng)應(yīng)用禁止使用ip
十.diff要產(chǎn)出的東西
測試范圍/checklist(更改的每一個(gè)方法都要追溯到最終的業(yè)務(wù)調(diào)用,去驗(yàn)證業(yè)務(wù);每個(gè)數(shù)據(jù)都要追溯到源頭和最終使用)
違反規(guī)范的bug(sonar靜態(tài)代碼檢查的)
系統(tǒng)改進(jìn)建議
明確測試方法/測試手段
diff過程中可以進(jìn)行測試執(zhí)行,也許diff完成時(shí),項(xiàng)目測試也執(zhí)行完成了。