前后端分離已成為互聯(lián)網(wǎng)項目開發(fā)的業(yè)界標準使用方式,通過Nginx+Tomcat的方式(也可以中間加一個Node.js)有效的進行解耦,并且前后端分離會為以后的大型分布式架構(gòu)、彈性計算架構(gòu)、微服務(wù)架構(gòu)、多端化服務(wù)(多種客戶端,例如:瀏覽器,車載終端,安卓,IOS等等)打下堅實的基礎(chǔ)。這個步驟是系統(tǒng)架構(gòu)從猿進化成人的必經(jīng)之路。核心思想是前端HTML頁面通過Ajax調(diào)用后端的restuful api接口并使用json數(shù)據(jù)進行交互。
在互聯(lián)網(wǎng)架構(gòu)中,名詞解釋:
Web服務(wù)器:一般指像Nginx,Apache這類的服務(wù)器,他們一般只能解析靜態(tài)資源。
應(yīng)用服務(wù)器:一般指像Tomcat,Jetty,Resin這類的服務(wù)器可以解析動態(tài)資源也可以解析靜態(tài)資源,但解析靜態(tài)資源的能力沒有web服務(wù)器好。
一般都是只有web服務(wù)器才能被外網(wǎng)訪問,應(yīng)用服務(wù)器只能內(nèi)網(wǎng)訪問。
一、開發(fā)人員分離
以前的JavaWeb項目大多數(shù)都是Java程序員又當?shù)之攱?,又搞前端,又搞后端。隨著時代的發(fā)展,漸漸的許多大中小公司開始把前后端的界限分的越來越明確,前端工程師只管前端的事情,后端工程師只管后端的事情。正所謂術(shù)業(yè)有專攻,一個人如果什么都會,那么他畢竟什么都不精。大中型公司需要專業(yè)人才,小公司需要全才,但是對于個人職業(yè)發(fā)展來說,小編建議是分開。
1、對于后端Java工程師:
把精力放在Java基礎(chǔ),設(shè)計模式,JVM原理,spring+springmvc原理及源碼,Linux,mysql事務(wù)隔離與鎖機制,MongoDB,HTTP/TCP,多線程,分布式架構(gòu),彈性計算架構(gòu),微服務(wù)架構(gòu),Java性能優(yōu)化,以及相關(guān)的項目管理等等。
后端追求的是:三高(高并發(fā),高可用,高性能),安全,存儲,業(yè)務(wù)等等。
2、對于前端工程師:
把精力放在HTML5,CSS3,jquery,angularjs,bootstrap,reactjs,vuejs,webpack,less/sass,gulp,Node.js,Google V8引擎,Javascript多線程,模塊化,面向切面編程,設(shè)計模式,瀏覽器兼容性,性能優(yōu)化等等。
前端追求的是:頁面表現(xiàn),速度流暢,兼容性,用戶體驗等等。
術(shù)業(yè)有專攻,這樣你的核心競爭力才會越來越高,正所謂你往生活中投入什么,生活就會反饋給你什么。并且兩端的發(fā)展都越來越高深,你想什么都會,那你畢竟什么都不精。通過將Team分成前后端Team,讓兩邊的工程師更加專注各自的領(lǐng)域,獨立治理,然后構(gòu)建出一個全棧式的精益求精的team。
二、原始人時代(各種耦合)
幾曾何時,我們的JavaWeb項目都是使用了若干后臺框架,springmvc/struts + spring + spring jdbc/hibernate/mybatis 等等。
大多數(shù)項目在Java后端都是分了三層,控制層,業(yè)務(wù)層,持久層??刂茖迂撠熃邮諈?shù),調(diào)用相關(guān)業(yè)務(wù)層,封裝數(shù)據(jù),以及路由&渲染到JSP頁面。然后JSP頁面上使用各種標簽或者手寫Java表達式將后臺的數(shù)據(jù)展現(xiàn)出來,玩的是MVC那套思路。
先看這種情況:需求定完了,代碼寫完了,測試測完了,然后發(fā)布,需要用maven或者eclipse等工具把代碼打成一個war包,然后把這個war包發(fā)布到你的生產(chǎn)環(huán)境下的web容器里,發(fā)布完了之后,啟動WEB容器,開始提供服務(wù),通過配置域名,DNS等等相關(guān),網(wǎng)站就可以訪問了(假設(shè)你是個網(wǎng)站)。那我們來看,前后端代碼是不是全都在那個war包里?包括js,CSS,圖片,各種第三方的庫,接下來在瀏覽器中輸入網(wǎng)站域名(www.xxx.com)-->?瀏覽器在通過域名通過DNS服務(wù)器找到服務(wù)器外網(wǎng)IP-->?將HTTP請求發(fā)送到服務(wù)器-->?在TCP 3次握手之后(HTTP下面是TCP/IP)-->?通過TCP協(xié)議開始傳輸數(shù)據(jù)-->?服務(wù)器得到請求后-->?開始提供服務(wù)-->?接收參數(shù)-->?之后返回應(yīng)答給瀏覽器-->?瀏覽器再通過content-type來解析返回的內(nèi)容呈現(xiàn)給用戶。
假設(shè)首頁中有100張圖片,此時,用戶的看似一次HTTP請求,其實并不是一次,用戶在第一次訪問的時候,瀏覽器中不會有緩存,100張圖片,瀏覽器要連著請求100次HTTP請求,服務(wù)器接收這些請求,都需要耗費內(nèi)存去創(chuàng)建socket來玩TCP傳輸。重點來了,這樣的話,服務(wù)器的壓力會非常大,因為頁面中的所有請求都是只請求到這臺服務(wù)器上,如果1個人還好,如果10000個人并發(fā)訪問呢,那服務(wù)器能扛住多少個TCP連接?帶寬有多大?服務(wù)器的內(nèi)存有多大?硬盤是高性能的嗎?能抗住多少IO?WEB服務(wù)器分的內(nèi)存有多大?會不會宕機?
這就是為什么越是大中型的web應(yīng)用,他們越是要解耦。理論上可以把數(shù)據(jù)庫+應(yīng)用服務(wù)+消息隊列+緩存+用戶上傳的文件+日志+等等都扔在一臺服務(wù)器上,這也不用玩什么服務(wù)治理,也不用做什么性能監(jiān)控,什么報警機制等等,就亂成一鍋粥好了。但是這樣就好像是把雞蛋都放在一個籃子里,隱患非常大。如果因為一個子應(yīng)用的內(nèi)存不穩(wěn)定導(dǎo)致整個服務(wù)器內(nèi)存溢出而hung住,那整個網(wǎng)站就掛掉了。如果出意外掛掉,而恰好這時你們的業(yè)務(wù)又處于井噴式發(fā)展高峰期,業(yè)務(wù)成功被技術(shù)卡住,很可能會流失大量用戶,后果不堪設(shè)想。
此外,應(yīng)用全部都耦合在一起,相當于一個巨石,當服務(wù)端負載能力不足時,一般會使用負載均衡的方式,將服務(wù)器做成集群,這樣其實你是在水平擴展一塊塊巨石,性能加速度會越來越低,要知道,本身負載就低的功能or模塊是沒有必要水平擴展的,在本文中的例子就是性能瓶頸不在前端,那干嘛要水平擴展前端呢?還有發(fā)版部署上線的時候,明明只改了后端的代碼,為什么要前端也跟著發(fā)布呢?
正常的互聯(lián)網(wǎng)架構(gòu),是都要拆開的,web服務(wù)器集群,應(yīng)用服務(wù)器集群+文件服務(wù)器集群+數(shù)據(jù)庫服務(wù)器集群+消息隊列集群+緩存集群等等。
三、JSP的痛點
以前的JavaWeb項目大多數(shù)使用JSP作為頁面層展示數(shù)據(jù)給用戶,因為流量不高,因此也沒有那么苛刻的性能要求,但現(xiàn)在是大數(shù)據(jù)時代,對于互聯(lián)網(wǎng)項目的性能要求是越來越高,因此原始的前后端耦合在一起的架構(gòu)模式已經(jīng)逐漸不能滿足我們,因此我們需要需找一種解耦的方式,來大幅度提升我們的負載能力。
動態(tài)資源和靜態(tài)資源全部耦合在一起,服務(wù)器壓力大,因為服務(wù)器會收到各種HTTP請求,例如CSS的HTTP請求,js的,圖片的等等。一旦服務(wù)器出現(xiàn)狀況,前后臺一起玩完,用戶體驗極差。
UI出好設(shè)計圖后,前端工程師只負責將設(shè)計圖切成HTML,需要由Java工程師來將HTML套成JSP頁面,出錯率較高(因為頁面中經(jīng)常會出現(xiàn)大量的js代碼),修改問題時需要雙方協(xié)同開發(fā),效率低下。JSP必須要在支持Java的web服務(wù)器里運行(例如Tomcat,Jetty,Resin等),無法使用Nginx等(Nginx據(jù)說單實例HTTP并發(fā)高達5w,這個優(yōu)勢要用上),性能提不上來。第一次請求JSP,必須要在web服務(wù)器中編譯成Servlet,第一次運行會較慢。每次請求JSP都是訪問Servlet再用輸出流輸出的HTML頁面,效率沒有直接使用HTML高。
JSP內(nèi)有較多標簽和表達式,前端工程師在修改頁面時會捉襟見肘,遇到很多痛點。如果JSP中的內(nèi)容很多,頁面響應(yīng)會很慢,因為是同步加載。需要前端工程師使用Java的ide(例如eclipse),以及需要配置各種后端的開發(fā)環(huán)境,你們有考慮過前端工程師的感受嗎。
基于上述的一些痛點,我們應(yīng)該把整個項目的開發(fā)權(quán)重往前移,實現(xiàn)前后端真正的解耦!
四、開發(fā)模式
以前老的方式是:
產(chǎn)品經(jīng)歷/領(lǐng)導(dǎo)/客戶提出需求
-->UI做出設(shè)計圖
-->前端工程師做HTML頁面
-->后端工程師將HTML頁面套成JSP頁面(前后端強依賴,后端必須要等前端的HTML做好才能套JSP。如果HTML發(fā)生變更,就更痛了,開發(fā)效率低)
-->集成出現(xiàn)問題
-->前端返工
-->后端返工
-->二次集成
-->集成成功
-->交付
新的方式是:
產(chǎn)品經(jīng)歷/領(lǐng)導(dǎo)/客戶提出需求
-->UI做出設(shè)計圖
-->前后端約定接口&數(shù)據(jù)&參數(shù)
-->前后端并行開發(fā)(無強依賴,可前后端并行開發(fā),如果需求變更,只要接口&參數(shù)不變,就不用兩邊都修改代碼,開發(fā)效率高)
-->前后端集成
-->前端頁面調(diào)整
-->集成成功
-->交付
五、請求方式
以前老的方式是:
客戶端請求
-->服務(wù)端的Servlet或controller接收請求(后端控制路由與渲染頁面,整個項目開發(fā)的權(quán)重大部分在后端)
-->調(diào)用service,dao代碼完成業(yè)務(wù)邏輯
-->返回JSP
-->JSP展現(xiàn)一些動態(tài)的代碼
新的方式是:
-->瀏覽器發(fā)送請求
-->直接到達HTML頁面(前端控制路由與渲染頁面,整個項目開發(fā)的權(quán)重前移)
-->HTML頁面負責調(diào)用服務(wù)端接口產(chǎn)生數(shù)據(jù)(通過Ajax等等,后臺返回json格式數(shù)據(jù),json數(shù)據(jù)格式因為簡潔高效而取代xml)
-->填充HTML,展現(xiàn)動態(tài)效果,在頁面上進行解析并操作DOM。
總結(jié)一下新的方式的請求步驟:
大量并發(fā)瀏覽器請求--->web服務(wù)器集群(Nginx)--->應(yīng)用服務(wù)器集群(Tomcat)--->文件/數(shù)據(jù)庫/緩存/消息隊列服務(wù)器集群
同時又可以玩分模塊,還可以按業(yè)務(wù)拆成一個個的小集群,為后面的架構(gòu)升級做準備。
六、前后端分離的優(yōu)勢
●?可以實現(xiàn)真正的前后端解耦,前端服務(wù)器使用Nginx。前端/WEB服務(wù)器放的是CSS,js,圖片等等一系列靜態(tài)資源(甚至你還可以CSS,js,圖片等資源放到特定的文件服務(wù)器,例如阿里云的oss,并使用CDN加速),前端服務(wù)器負責控制頁面引用&跳轉(zhuǎn)&路由,前端頁面異步調(diào)用后端的接口,后端/應(yīng)用服務(wù)器使用Tomcat(把Tomcat想象成一個數(shù)據(jù)提供者),加快整體響應(yīng)速度。(這里需要使用一些前端工程化的框架比如Node.js,react,router,react,redux,webpack,發(fā)現(xiàn)bug,可以快速定位是誰的問題,不會出現(xiàn)互相踢皮球的現(xiàn)象。)頁面邏輯,跳轉(zhuǎn)錯誤,瀏覽器兼容性問題,腳本錯誤,頁面樣式等問題,全部由前端工程師來負責。接口數(shù)據(jù)出錯,數(shù)據(jù)沒有提交成功,應(yīng)答超時等問題,全部由后端工程師來解決。雙方互不干擾,前端與后端是相親相愛的一家人。
●在大并發(fā)情況下,我可以同時水平擴展前后端服務(wù)器,比如淘寶的一個首頁就需要2000+臺前端服務(wù)器做集群來抗住日均多少億+的日均pv。(阿里的技術(shù)峰會上,聽說他們的web容器都是自己寫的,就算單實例抗10萬HTTP并發(fā),2000臺是2億HTTP并發(fā),并且他們還可以根據(jù)預(yù)知洪峰來無限拓展,很恐怖,就一個首頁。。。)
●減少后端服務(wù)器的并發(fā)/負載壓力。除了接口以外的其他所有HTTP請求全部轉(zhuǎn)移到前端Nginx上,接口的請求調(diào)用Tomcat,參考Nginx反向代理Tomcat。且除了第一次頁面請求外,瀏覽器會大量調(diào)用本地緩存。
即使后端服務(wù)暫時超時或者宕機了,前端頁面也會正常訪問,只不過數(shù)據(jù)刷不出來而已。
●?如果需要有微信相關(guān)的輕應(yīng)用,那樣你的接口完全可以共用,如果也有app相關(guān)的服務(wù),那么只要通過一些代碼重構(gòu),也可以大量復(fù)用接口,提升效率。
●?(多端應(yīng)用)頁面顯示的東西再多也不怕,因為是異步加載。
●?Nginx支持頁面熱部署,不用重啟服務(wù)器,前端升級更無縫。
●增加代碼的維護性&易讀性(前后端耦在一起的代碼讀起來相當費勁)。
●提升開發(fā)效率,因為可以前后端并行開發(fā),而不是像以前的強依賴。
●?在Nginx中部署證書,外網(wǎng)使用HTTPs訪問,并且只開放443和80端口,其他端口一律關(guān)閉(防止黑客端口掃描),內(nèi)網(wǎng)使用HTTP,性能和安全都有保障。
●?前端大量的組件代碼得以復(fù)用,組件化,提升開發(fā)效率,抽出來!
七、注意事項
●?在開需求會議的時候,前后端工程師必須全部參加,并且需要制定好接口文檔,后端工程師要寫好測試用例(2個維度),不要讓前端工程師充當你的專職測試,推薦使用chrome的插件postman或soapui或jmeter,service層的測試用例拿Junit寫。ps:前端也可以玩單元測試嗎?
●?上述的接口并不是Java里的interface,說白了調(diào)用接口就是調(diào)用你controler里的方法。
●?加重了前端團隊的工作量,減輕了后端團隊的工作量,提高了性能和可擴展性。
●?我們需要一些前端的框架來解決類似于頁面嵌套,分頁,頁面跳轉(zhuǎn)控制等功能。(上面提到的那些前端框架)。
●?如果你的項目很小,或者是一個單純的內(nèi)網(wǎng)項目,那你大可放心,不用任何架構(gòu)而言,但是如果你的項目是外網(wǎng)項目,呵呵噠。
●?以前還有人在使用類似于velocity/freemarker等模板框架來生成靜態(tài)頁面,仁者見仁智者見智。
●?這篇文章主要的目的是說JSP在大型外網(wǎng)Java web項目中被淘汰掉,可沒說JSP可以完全不學,對于一些學生朋友來說,JSP/Servlet等相關(guān)的Java web基礎(chǔ)還是要掌握牢的,不然你以為springmvc這種框架是基于什么來寫的?
●?如果頁面上有一些權(quán)限等等相關(guān)的校驗,那么這些相關(guān)的數(shù)據(jù)也可以通過Ajax從接口里拿。
●?對于既可以前端做也可以后端做的邏輯,我建議是放到前端,為什么?因為你的邏輯需要計算資源進行計算,如果放到后端去run邏輯,則會消耗帶寬&內(nèi)存&cpu等等計算資源,你要記住一點就是服務(wù)端的計算資源是有限的,而如果放到前端,使用的是客戶端的計算資源,這樣你的服務(wù)端負載就會下降(高并發(fā)場景)。類似于數(shù)據(jù)校驗這種,前后端都需要做!
●?前端需要有機制應(yīng)對后端請求超時以及后端服務(wù)宕機的情況,友好的展示給用戶。
八、擴展閱讀
其實對于js,CSS,圖片這類的靜態(tài)資源可以考慮放到類似于阿里云的oss這類文件服務(wù)器上(如果是普通的服務(wù)器&操作系統(tǒng),存儲在到達pb級的文件后,或者單個文件夾內(nèi)的文件數(shù)量達到3-5萬,io會有很嚴重的性能問題),再在oss上配CDN(全國子節(jié)點加速),這樣你頁面打開的速度像飛一樣, 無論你在全國的哪個地方,并且你的Nginx的負載會進一步降低。
如果你要玩輕量級微服務(wù)架構(gòu),要使用Node.js做網(wǎng)關(guān),用Node.js的好處還有利于seo優(yōu)化,因為Nginx只是向瀏覽器返回頁面靜態(tài)資源,而國內(nèi)的搜索引擎爬蟲只會抓取靜態(tài)數(shù)據(jù),不會解析頁面中的js,這使得應(yīng)用得不到良好的搜索引擎支持。同時因為Nginx不會進行頁面的組裝渲染,需要把靜態(tài)頁面返回到瀏覽器,然后完成渲染工作,這加重了瀏覽器的渲染負擔。瀏覽器發(fā)起的請求經(jīng)過Nginx進行分發(fā),URL請求統(tǒng)一分發(fā)到Node.js,在Node.js中進行頁面組裝渲染;API請求則直接發(fā)送到后端服務(wù)器,完成響應(yīng)。
如果遇到跨域問題,Spring4的CORS可以完美解決,但一般使用Nginx反向代理都不會有跨域問題,除非你把前端服務(wù)和后端服務(wù)分成兩個域名。JSONP的方式也被淘汰掉了。
如果想玩多端應(yīng)用,注意要去掉Tomcat原生的session機制,要使用token機制,使用緩存(因為是分布式系統(tǒng)),做單點,對于toke機制的安全性問題,可以搜一下jwt。
前端項目中可以加入mock測試(構(gòu)造虛擬測試對象來模擬后端,可以獨立開發(fā)和測試),后端需要有詳細的測試用例,保證服務(wù)的可用性與穩(wěn)定性。
九、總結(jié)
前后端分離并非僅僅只是一種開發(fā)模式,而是一種架構(gòu)模式(前后端分離架構(gòu))。千萬不要以為只有在擼代碼的時候把前端和后端分開就是前后端分離了,需要區(qū)分前后端項目。前端項目與后端項目是兩個項目,放在兩個不同的服務(wù)器,需要獨立部署,兩個不同的工程,兩個不同的代碼庫,不同的開發(fā)人員。前后端工程師需要約定交互接口,實現(xiàn)并行開發(fā),開發(fā)結(jié)束后需要進行獨立部署,前端通過Ajax來調(diào)用HTTP請求調(diào)用后端的restful api。前端只需要關(guān)注頁面的樣式與動態(tài)數(shù)據(jù)的解析&渲染,而后端專注于具體業(yè)務(wù)邏輯。