Java高并發(fā)高性能分布式框架從無到有微服務架構設計

微服務架構模式(Microservice Architect Pattern)。近兩年在服務的瘋狂增長與云計算技術的進步,讓微服務架構受到重點關注

微服務架構是一種架構模式,它提倡將單一應用程序劃分成一組小的服務,服務之間互相協(xié)調、互相配合,為用戶提供最終價值。每個服務運行在其獨立的進程中,服務與服務間采用輕量級的通信機制互相溝通(通常是基于HTTP的RESTful API)。每個服務都圍繞著具體業(yè)務進行構建,并且能夠被獨立地部署到生產環(huán)境、類生產環(huán)境等。另外,應盡量避免統(tǒng)一的、集中式的服務管理機制,對具體的一個服務而言,應根據(jù)業(yè)務上下文,選擇合適的語言、工具對其進行構建。

微服務架構優(yōu)勢

首先簡單介紹了微服務(Microservices)的內涵及優(yōu)勢,微服務架構的本質,是用一些功能比較明確、業(yè)務比較精練的服務去解決更大、更實際的問題。微服務架構將服務拆分,分別采用相對獨立的服務對各方面進行管理,彼此之間使用統(tǒng)一的接口來進行交流,架構變得復雜,優(yōu)勢也很明顯:

復雜度可控:在將應用分解的同時,規(guī)避了原本復雜度無止境的積累。每一個微服務專注于單一功能,并通過定義良好的接口清晰表述服務邊界。由于體積小、復雜度低,每個微服務可由一個小規(guī)模開發(fā)團隊完全掌控,易于保持高可維護性和開發(fā)效率。

什么是微服務架構

微服務架構優(yōu)勢

獨立部署:由于微服務具備獨立的運行進程,所以每個微服務也可以獨立部署。當某個微服務發(fā)生變更時無需編譯、部署整個應用。由微服務組成的應用相當于具備一系列可并行的發(fā)布流程,使得發(fā)布更加高效,同時降低對生產環(huán)境所造成的風險,最終縮短應用交付周期。

技術選型靈活:微服務架構下,技術選型是去中心化的。每個團隊可以根據(jù)自身服務的需求和行業(yè)發(fā)展的現(xiàn)狀,自由選擇最適合的技術棧。由于每個微服務相對簡單,當需要對技術棧進行升級時所面臨的風險較低,甚至完全重構一個微服務也是可行的。

容錯:當某一組建發(fā)生故障時,在單一進程的傳統(tǒng)架構下,故障很有可能在進程內擴散,形成應用全局性的不可用。在微服務架構下,故障會被隔離在單個服務中。若設計良好,其他服務可通過重試、平穩(wěn)退化等機制實現(xiàn)應用層面的容錯。

擴展:單塊架構應用也可以實現(xiàn)橫向擴展,就是將整個應用完整的復制到不同的節(jié)點。當應用的不同組件在擴展需求上存在差異時,微服務架構便體現(xiàn)出其靈活性,因為每個服務可以根據(jù)實際需求獨立進行擴展。

互聯(lián)網(wǎng)高并發(fā)相關名詞

頁面瀏覽數(shù)(page views )

唯一身份瀏覽量(Unique PageViews)

獨立訪問者數(shù)量(unique visitors)

重復訪問者數(shù)量(repeat visitors)

每個訪問者的頁面瀏覽數(shù)(Page Views per user)

高并發(fā)

之前我將高并發(fā)的解決方法誤認為是線程或者是隊列可以解決,因為高并發(fā)的時候是有很多用戶在訪問,導致出現(xiàn)系統(tǒng)數(shù)據(jù)不正確、丟失數(shù)據(jù)現(xiàn)象,所以想到 的是用隊列解決,其實隊列解決的方式也可以處理,比如我們在競拍商品、轉發(fā)評論微博或者是秒殺商品等,同一時間訪問量特別大,隊列在此起到特別的作用,將 所有請求放入隊列,以毫秒計時單位,有序的進行,從而不會出現(xiàn)數(shù)據(jù)丟失系統(tǒng)數(shù)據(jù)不正確的情況。

經(jīng)過查資料,高并發(fā)的解決方法有倆種,一種是使用緩存、另一種是使用生成靜態(tài)頁面;還有就是從最基礎的地方優(yōu)化我們寫代碼減少不必要的資源浪費:(

1.不要頻繁的new對象,對于在整個應用中只需要存在一個實例的類使用單例模式.對于String的連接操作,使用StringBuffer或者StringBuilder.對于utility類型的類通過靜態(tài)方法來訪問。

避免使用錯誤的方式,如Exception可以控制方法推出,但是Exception要保留stacktrace消耗性能,除非必要不要使用 instanceof做條件判斷,盡量使用比的條件判斷方式.使用JAVA中效率高的類,比如ArrayList比Vector性能好。)

高并發(fā) - 需要解決的問題

一:應用緩存

二:HTTP緩存

三:多級緩存

四:池化

五:異步并發(fā)

六:擴容

七:隊列

高并發(fā)-應用緩存

堆緩存

使用Java堆內存來存儲緩存對象。使用堆緩存的好處是沒有序列化/反序列化,是最快的緩存。缺點也很明顯,當緩存的數(shù)據(jù)量很大時,GC(垃圾回收)暫停時間會變長,存儲容量受限于堆空間大小。一般通過軟引用/弱引用來存儲緩存對象,即當堆內存不足時,可以強制回收這部分內存釋放堆內存空間。一般使用堆緩存存儲較熱的數(shù)據(jù)。有

Guava Cache: 緩存和ConcurrentMap是非常相像的,但是它們也不完全一樣。最根本的區(qū)別就是,ConcurrentMap會持有所有添加的對象,直到被顯示的移除。而緩存為了限制其內存的使用,通常都會配置成可以自動的將對象移除。在某些情況下即使不自動移除對象也是非常有用的,如LoadingCache它會自動加載緩存對象。

Ehcache 3.x:是一種廣泛使用的開源Java分布式緩存。主要面向通用緩存,Java EE和輕量級容器。它具有內存和磁盤存儲,緩存加載器,緩存擴展,緩存異常處理程序,一個gzip緩存servlet過濾器,支持REST和SOAP api等特點。

MapDB: mapdb是一個內嵌的純java的數(shù)據(jù)庫,提供了并發(fā)的HashMap、TreeMap、Queue,可以基于堆外或者磁盤來存儲數(shù)據(jù)

高并發(fā)-應用緩存

堆外緩存

即緩存數(shù)據(jù)存儲在堆外內存,可以減少GC暫停時間(堆對象轉移到堆外,GC掃描和移動的對象變少),但是,讀取數(shù)據(jù)時需要序列化/反序列化,因此會比堆緩存要慢很多。有Ehcache 3.x、MapDB實現(xiàn)

磁盤緩存

即緩存數(shù)據(jù)存儲在磁道上,在JVM重啟時數(shù)據(jù)還存在的,而堆緩存/堆外緩存數(shù)據(jù)會丟失,需要重新加載。有Ehcache 3.x、MapDB實現(xiàn)

分布式緩存

進程內緩存和磁盤緩存,在多JVM實例的情況下,會存在兩個問題:

1、單機容量問題;

2、數(shù)據(jù)一致性問題(多臺JVM實例的緩存數(shù)據(jù)不一致怎么辦?),這個問題不用糾結,既然數(shù)據(jù)允許緩存,則表示允許一定時間內的不一致,因此可以設置緩存數(shù)據(jù)的過期時間來定期更新數(shù)據(jù);

3、緩存不命中時,需要回源到DB/服務請求多變問題:每個實例在緩存不命中的情況下都會回源到DB加載數(shù)據(jù),因此多實例后DB整體的訪問量變多了解決辦法是可以使用如一致性哈希分片算法。因此,這些情況可以考慮使用分布式緩存來解決。

可以使用ehcache –clustered(配合 Terracotta server) 實現(xiàn)JAVA進程間分布式緩存。最好的辦法是使用redis實現(xiàn)分布式緩存。

高并發(fā)- HTTP緩存

瀏覽器緩存是指當我們使用瀏覽器訪問一些網(wǎng)站頁面或者http服務時,根據(jù)服務端返回的緩存設置響應頭將響應內容緩存到瀏覽器,下次可以直接使用緩存內容或者僅需要去服務端驗證內容是否過期即可。這樣的好處可以減少瀏覽器和服務端之間來回傳輸?shù)臄?shù)據(jù)量,節(jié)省帶寬提升性能。

解決辦法:內容不需要動態(tài)(計算、渲染等)速度更快,內容越接近于用戶速度越快。像apache traffic server、squid、varnish、nginx等技術都可以來進行內容緩存。還有CDN就是用來加速用戶訪問的:


即用戶首先訪問到全國各地的CDN節(jié)點(使用如ATS、Squid實現(xiàn)),如果CDN沒命中,會回源到中央nginx集群,該集群如果沒有命中緩存(該集群的緩存不是必須的,要根據(jù)實際命中情況等決定),最后回源到后端應用集群。

高并發(fā)- 多級緩存(分布式緩存)

高并發(fā)-池化

在應用系統(tǒng)開發(fā)過程中,我們經(jīng)常會用到池化技術,如對象池、連接池、線程池等,通過池化來減少一些消耗,以提升性能。

對象池通過復用對象從而減少創(chuàng)建對象、垃圾回收 的開銷。但是,池化不能太大,太大會影響GC時的掃描時間。

連接池如數(shù)據(jù)庫連接池、Redis連接池、Http連接池,通過復用TCP連接減少創(chuàng)建和釋放連接的時間來提升性能。

線程池也是類似的,通過復用線程提升性能。也就是說池化的目的就是通過復用技術提升性能。

高并發(fā)-擴容

1、讀寫分離:當數(shù)據(jù)庫訪問量還不是很大的時候,我們可以適當增加服務器,數(shù)據(jù)庫主從復制的方式將讀寫分離

2、垂直分區(qū):當寫入操作一旦增加的時候,那么主從數(shù)據(jù)庫將花更多的時間的放在數(shù)據(jù)同步上,這個時候服務器也是不堪重負的;那么就有了數(shù)據(jù)的垂直分區(qū),數(shù)據(jù)的垂直分區(qū)思路是將寫入操作比較頻繁的數(shù)據(jù)表,如用戶表_user,或者訂單表_orders,那么我們就可以把這個兩個表分離出來,放在不同的服務器,如果這兩個表和其他表存在聯(lián)表查詢,那么就只能把原來的sql語句給拆分了,先查詢一個表,在查詢另一個,雖然說這個會消耗更過性能,但比起那種大量數(shù)據(jù)同步,負擔還是減輕了不少;

3、水平分區(qū):但是往往事情不盡人意,可能采取垂直分區(qū)能撐一段時間,由于網(wǎng)站太火了,訪問量又每日100w,一下子蹦到了1000w,這個時候可以采取數(shù)據(jù)的進行分離,我們可以根據(jù)user的Id不同進行分配,如采取%2、 形式,當然這種形式對以后的擴展有了很大的限制,當我由10個分區(qū)增加到20個的時候,所有的數(shù)據(jù)都得重新分區(qū),那么將是一個的很龐大的計算量;幾種常見的算法: 哈希算法:就是采用user_id%的方式; 范圍:可以根據(jù)user_id字符值范圍分區(qū),如1-1000為一區(qū),1001-2000則是另一個區(qū)等; 映射關系:就是將user_id存在的所對應的分區(qū)放在數(shù)據(jù)庫中保存,當用戶操作時先去查詢所在分區(qū),再進行操作.

大家可以點擊加入群:650385180【JAVA架構】里面有Java高級大牛直播講解知識點 走的就是高端路線 (如果你想跳槽換工作 但是技術又不夠 或者工作上遇到了瓶頸 我這里有一個JAVA的免費直播課程 講的是高端的知識點基礎不好的勿入喲 只要你有1-5年的開發(fā)經(jīng)驗可以加群找我要課堂鏈接 注意:是免費的 沒有開發(fā)經(jīng)驗勿入哦)

?著作權歸作者所有,轉載或內容合作請聯(lián)系作者
【社區(qū)內容提示】社區(qū)部分內容疑似由AI輔助生成,瀏覽時請結合常識與多方信息審慎甄別。
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發(fā)布,文章內容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務。

相關閱讀更多精彩內容

  • 1.有次去電視臺找我學姐,但是我不知道怎么走就打車,然后師父問我你知道電視臺怎么走嗎?我說你開車你不知道嗎?師父說...
    人天涯的夢閱讀 194評論 0 0
  • 你今天砰然心動了嗎?這句話或許會成為“整理控”的問候語。你聽過“砰然心動的人生整理魔術”課嗎?它的精髓是“五步驟整...
    優(yōu)質寫作俠閱讀 355評論 1 1
  • 剛剛看了下了有一個月的《分歧者》。再開始描述之前,首先澄清一下,這不是個新電影,只不過是國內剛上映而已。在美國14...
    WavePEACH閱讀 379評論 0 1

友情鏈接更多精彩內容