早上大群產(chǎn)品反饋線上數(shù)據(jù)加載有問題，只展示短視頻沒有展示影評(píng)。排查了我們這邊推薦接口返回?cái)?shù)據(jù)正常，經(jīng)排查是另一個(gè)業(yè)務(wù)方的接口出了問題。這次的問題都是由于公司的上線不規(guī)范導(dǎo)致的，每次功能上線了也不通知下服務(wù)提供方，包括這個(gè)接口預(yù)計(jì)會(huì)有多大的流量都應(yīng)該提前通知的。像這次，接口一上線qps就有1000+，而我們一開始整個(gè)服務(wù)的qps也就1500左右，到了晚上高峰時(shí)期qps有1500了，00點(diǎn)后發(fā)現(xiàn)qps高達(dá)4000+，這已經(jīng)超出了我們服務(wù)的承受范圍，要不是做完我們臨時(shí)加了3臺(tái)機(jī)器，估計(jì)就會(huì)影響到別的關(guān)鍵服務(wù)了，到時(shí)候就通報(bào)批評(píng)了。這個(gè)功能調(diào)用調(diào)用了很多服務(wù)方的接口，按照平時(shí)的接口請(qǐng)求量可能就部署兩臺(tái)機(jī)器也就夠了，流量突增，又沒有增加機(jī)器來擴(kuò)展服務(wù)，服務(wù)處理能力沒達(dá)到這個(gè)量級(jí)的qps的處理能力，于是就出問題了。而這個(gè)服務(wù)又不是核心功能，而我們可能把很多接口都是通過一個(gè)服務(wù)提供的，導(dǎo)致影響到核心服務(wù)。之前我們也反饋過了，上線之前通知下各個(gè)業(yè)務(wù)方，這樣業(yè)務(wù)有所心里準(zhǔn)備，流量大就臨時(shí)加機(jī)器啥的，也不至于現(xiàn)在出這個(gè)線上問題。我們組就打算以后提供的接口都加上限流，這樣就也不擔(dān)心功能突然上線，影響到核心服務(wù)。之前沒意識(shí)到限流的重要性，這次發(fā)現(xiàn)還是蠻重要的。