消費組組（Consumer group）可以說是kafka很有亮點的一個設計。傳統(tǒng)的消息引擎處理模型主要有兩種，隊列模型，和發(fā)布-訂閱模型。 隊列模型：早期消息處理引擎就是按...
發(fā)簡信
IP屬地：廣東
-
詳細解析kafka之 kafka消費者組與重平衡機制
-
kafka實現(xiàn)無消息丟失與精確一次語義（exactly once）處理
在很多的流處理框架的介紹中，都會說kafka是一個可靠的數(shù)據源，并且推薦使用Kafka當作數(shù)據源來進行使用。這是因為與其他消息引擎系統(tǒng)相比，kafka提供了可靠的數(shù)據保存及備...
-
詳細解析kafka之kafka分區(qū)和副本
本篇主要介紹kafka的分區(qū)和副本，因為這兩者是有些關聯(lián)的，所以就放在一起來講了，后面順便會給出一些對應的配置以及具體的實現(xiàn)代碼，以供參考~ 1.kafka分區(qū)機制 分區(qū)機制...
-
分布式系統(tǒng)一致性問題與Raft算法（下）
上一篇講述了什么是分布式一致性問題，以及它難在哪里，liveness和satefy問題，和FLP impossibility定理。有興趣的童鞋可以看看分布式系統(tǒng)一致性問題與R...
-
分布式系統(tǒng)一致性問題與Raft算法（上）
最近在做MIT6.824的幾個實驗，真心覺得每一個做分布式相關開發(fā)的程序員都應該去刷一遍（裂墻推薦），肯定能夠提高自己的技術認知水平，同時也非常感謝MIT能夠把這么好的資源分...
-
Scala函數(shù)式編程（五） 函數(shù)式的錯誤處理
前情提要 Scala函數(shù)式編程指南（一） 函數(shù)式思想介紹 scala函數(shù)式編程（二） scala基礎語法介紹 Scala函數(shù)式編程（三） scala集合和函數(shù) Scala函數(shù)...
-
Scala函數(shù)式編程（四）函數(shù)式的數(shù)據結構 下
前情提要 Scala函數(shù)式編程指南（一） 函數(shù)式思想介紹 scala函數(shù)式編程（二） scala基礎語法介紹 Scala函數(shù)式編程（三） scala集合和函數(shù) Scala函數(shù)...
-
Scala函數(shù)式編程（四）函數(shù)式的數(shù)據結構 上
這次來說說函數(shù)式的數(shù)據結構是什么樣子的，本章會先用一個list來舉例子說明，最后給出一個Tree數(shù)據結構的練習，放在公眾號里面，練習里面給出了基本的結構，但代碼是空缺的需要補...
-
Python 深入淺出支持向量機（SVM）算法
相比于邏輯回歸，在很多情況下，SVM算法能夠對數(shù)據計算從而產生更好的精度。而傳統(tǒng)的SVM只能適用于二分類操作，不過卻可以通過核技巧（核函數(shù)），使得SVM可以應用于多分類的任務...
-
通俗地說邏輯回歸【Logistic regression】算法（二）sklearn邏輯回歸實戰(zhàn)
前情提要： 通俗地說邏輯回歸【Logistic regression】算法（一） 邏輯回歸模型原理介紹 上一篇主要介紹了邏輯回歸中，相對理論化的知識，這次主要是對上篇做一點點...
-
通俗地說邏輯回歸【Logistic regression】算法（一）
在說邏輯回歸前，還是得提一提他的兄弟，線性回歸。在某些地方，邏輯回歸算法和線性回歸算法是類似的。但它和線性回歸最大的不同在于，邏輯回歸是作用是分類的。 還記得之前說的嗎，線性...
-
通俗得說線性回歸算法（二）線性回歸實戰(zhàn)
前情提要：通俗得說線性回歸算法（一）線性回歸初步介紹 一.sklearn線性回歸詳解 1.1 線性回歸參數(shù) 介紹完線性回歸，那么我們來看看如何運用sklearn來調用線性回歸...
-
通俗得說線性回歸算法（一）線性回歸初步介紹
一.從線性回歸的故事說起 相信大家都聽過著名的博物學家，達爾文的大名，而今天這個故事的主人公就是他的表弟高爾頓。 高爾頓是一名生理學家，在1995年的時候，他研究了1078堆...
-
Scala函數(shù)式編程（三） scala集合和函數(shù)
前情提要： scala函數(shù)式編程（二） scala基礎語法介紹 scala函數(shù)式編程（二） scala基礎語法介紹 前面已經稍微介紹了scala的常用語法以及面向對象的一些簡...
-
scala函數(shù)式編程（二） scala基礎語法介紹上次我們介紹了函數(shù)式編程的好處，并使用scala寫了一個小小的例子幫助大家理解，從這里開始我將真正開始介紹scala編程的一些內容。 這里會先重點介紹scala的一些語法。當...
-
Windows上IDEA搭建最新Spark2.4.3源碼調試的開發(fā)環(huán)境
相信很多同學都想通過閱讀一些框架的源碼，來提高自己的代碼能力，但往往在第一步，搭建環(huán)境的時候就碰了壁。 本篇就來介紹下如何在Windows下，將最新版的Spark2.4.3編...
-
Python --深入淺出Apriori關聯(lián)分析算法（二） Apriori關聯(lián)規(guī)則實戰(zhàn)
上一篇我們講了關聯(lián)分析的幾個概念，支持度，置信度，提升度。以及如何利用Apriori算法高效地根據物品的支持度找出所有物品的頻繁項集。 Python --深入淺出Aprior...
-
深入淺出Apriori關聯(lián)分析算法（一）
在美國有這樣一家奇怪的超市，它將啤酒與尿布這樣兩個奇怪的東西放在一起進行銷售，并且最終讓啤酒與尿布這兩個看起來沒有關聯(lián)的東西的銷量雙雙增加。這家超市的名字叫做沃爾瑪。 你會不...
-
通俗地說決策樹算法（三）sklearn決策樹實戰(zhàn)
前情提要 通俗地說決策樹算法（一）基礎概念介紹 通俗地說決策樹算法（二）實例解析 上面兩篇介紹了那么多決策樹的知識，現(xiàn)在也是時候來實踐一下了。Python有一個著名的機器學習...
-
『代碼之外』用經濟學利息的角度看美債倒掛
總是寫技術文章，偶爾也想寫點別的。 今天來說說美國十年國債倒掛這件事，我會從經濟學中的利息的角度來解釋分析，讓你明白為什么會說美國國債倒掛是一種經濟衰退的信號。同時你也會明白...