零拷貝技術(shù)主要包括mmap和sendfile，在RocketMQ、Kafka這類高性能消息隊列中間件中有應(yīng)用，在Netty這種高性能網(wǎng)絡(luò)通信框架中也有應(yīng)用。在Java里mma...
發(fā)簡信
IP屬地：浙江
-
理解Java中的零拷貝技術(shù)原理：MappedByteBuffer與FileChannel.transferTo
-
數(shù)據(jù)庫生成分布式id-采用號段法在簡單系統(tǒng)中，我們常常使用db的id自增方式來標識和保存數(shù)據(jù)，隨著系統(tǒng)的復(fù)雜，數(shù)據(jù)的增多，分庫分表成為了常見的方案，db自增已無法滿足要求。這時候全局唯一的id生成系統(tǒng)就派上...
-
3.dubbo源碼-ExtensionLoader擴展機制
ExtensionLoader的使用 Dubbo中隨處可見這樣的代碼： ExtensionLoader.getExtensionLoader(Transporter.clas...
-
數(shù)據(jù)中臺到底是什么？
阿里提出了“大中臺，小前臺”，其中臺事業(yè)部包括搜索事業(yè)部、共享業(yè)務(wù)平臺、數(shù)據(jù)技術(shù)及產(chǎn)品部，數(shù)據(jù)技術(shù)及產(chǎn)品部應(yīng)是數(shù)據(jù)中臺建設(shè)的核心部門。 那么，數(shù)據(jù)中臺到底是什么？具體包含哪些...
-
rocketMq-namesrv介紹系列 rocketMq概念介紹 rocketMq-namesrv介紹 rocketMq-Topic創(chuàng)建過程 rocketMq-producer介紹 rocketMq-cons...
-
rocketMq概念介紹系列 rocketMq概念介紹 rocketMq-namesrv介紹 rocketMq-Topic創(chuàng)建過程 rocketMq-producer介紹 rocketMq-cons...
-
rocketMq-Topic創(chuàng)建過程系列 rocketMq概念介紹 rocketMq-namesrv介紹 rocketMq-Topic創(chuàng)建過程 rocketMq-producer介紹 rocketMq-cons...
-
jvm誤區(qū)--動態(tài)對象年齡判定
虛擬機并不是永遠地要求對象的年齡必須達到了MaxTenuringThreshold才能晉升老年代，如果在Survivor空間中相同年齡所有對象大小的總和大于Survivor空...
-
dice?
Spring 配置管理
1.spring對眾多配置的管理 配置現(xiàn)在在我們的項目里面，是非常關(guān)鍵的一環(huán)。往往一些中間件，需要用戶，修改一些配置文件，才能正常使用。我們在日常開發(fā)中，一些數(shù)據(jù)庫地...
-
Spring 配置管理
1.spring對眾多配置的管理 配置現(xiàn)在在我們的項目里面，是非常關(guān)鍵的一環(huán)。往往一些中間件，需要用戶，修改一些配置文件，才能正常使用。我們在日常開發(fā)中，一些數(shù)據(jù)庫地...
-
當(dāng)當(dāng)分布式調(diào)度框架elastic-job-lite總結(jié)官方文檔 http://elasticjob.io/docs/elastic-job-lite/00-overview/ 產(chǎn)品介紹 elastic-job是當(dāng)當(dāng)開源的一款非...
-
答應(yīng)我，以后不要再寫這么low的PPT標題好嗎？還記得去年參加一個公司舉辦的優(yōu)秀員工評選比賽，比賽形式是每個人做一份年終總結(jié)PPT然后登臺演講，當(dāng)時看到了絕大部分PPT封面都是這樣的： 可能你已經(jīng)習(xí)慣了這樣的PPT標題，心...
-
Start JavaWeb Without Web.xmlServlet去除Web.xml 了解Tomcat的SPI機制 Tomcat容器在啟動時會掃描項目中META-INF/service下面的javax.servlet.Serv...
-
??
vue+element-ui el-tabs 標簽實現(xiàn)在同一頁面切換組件
注意：1、需要保障el-tabs組件里 v-model綁定的變量和 div里的is綁定的變量是同一個變量2、el-tab-pane 里的name 和script里的組件名稱是...
-
荒野鍵盤俠 ·官方明確說了mq的msgId不行的,文檔看仔細別誤導(dǎo)人
https://github.com/apache/rocketmq/blob/master/docs/cn/best_practice.md
RocketMQ無法避免消息重復(fù)（Exactly-Once），所以如果業(yè)務(wù)對消費重復(fù)非常敏感，務(wù)必要在業(yè)務(wù)層面進行去重處理?？梢越柚P(guān)系數(shù)據(jù)庫進行去重。首先需要確定消息的唯一鍵，可以是msgId，也可以是消息內(nèi)容中的唯一標識字段，例如訂單Id等。在消費之前判斷唯一鍵是否在關(guān)系數(shù)據(jù)庫中存在。如果不存在則插入，并消費，否則跳過。（實際過程要考慮原子性問題，判斷是否存在可以嘗試插入，如果報主鍵沖突，則插入失敗，直接跳過）
msgId一定是全局唯一標識符，但是實際使用中，可能會存在相同的消息有兩個不同msgId的情況（消費者主動重發(fā)、因客戶端重投機制導(dǎo)致的重復(fù)等），這種情況就需要使業(yè)務(wù)字段進行重復(fù)消費。秀man 評論自mq如何保證消息的冪等性
