阿里p7，精通java, 中間件，分布式系統(tǒng)開發(fā)和架構設計，豐富的java后端系統(tǒng)開發(fā)，設計和架構經驗，說句不要臉的話：踩過的坑比很多人走過的路還要多！我在坑外等你！簡書宣言：不求深奧，但求實用！
IP屬地：北京
-
死磕源碼系列 - HashMap
本篇涉及的HashMap的源碼都是一些我想講的, 沒涉及到的都是不想講或不會的, 純學習記錄. 數據結構 內部字段 構造函數 添加數據 數組擴容 查找數據 刪除數據 拓展問題...
-
ConcurrentHashMap解析
注：此文基于Android的ConcurrentHashMap講解ConcurrentHashMap之前，我先花點篇幅講解下CAS的機制思想，因為ConcurrentHash...
-
[轉] 探索 ConcurrentHashMap 高并發(fā)實現機制簡介 ConcurrentHashMap 是 Java concurrent 包的重要成員。本文將結合 Java 內存模型，來分析 ConcurrentHashMap 的 J...
-
Kafka源碼分析-Consumer（1）-設計原理
一.KafkaConsumer的使用例子： 消費者從Kafka服務端拉取消息，并交給業(yè)務邏輯進行處理。KafkaConsumer的API很友好，開發(fā)人員不用關心與Kafka服...
-
Kafka源碼分析-網絡層-1在享用了這么久kafka提供的各種福利后, 咱們也來精進一下,看看kafka的各部分實現,知其然也知一點所以然; 題目起得有點大,其實完全是臨時起意,希望能堅持下去; 本身其...
-
目前從事大數據開發(fā)工作，使用語言java、scala和python
-
一文通俗理解Spark架構、Spark部署方式、配屬配置優(yōu)先級、Spark處理所提交的application的流程、Spark共享變量、Spark監(jiān)聽，以及master、driver、worke...Spark是一種基于內存計算的計算引擎（通俗地說就是計算速度快），由于其可以將計算的中間結果存放在內存中，因此非常適合于迭代計算和交互式查詢。 一、Spark的四大核心組件和...
-
spark向kafka寫入數據(轉)
前言 在WeTest輿情項目中，需要對每天千萬級的游戲評論信息進行詞頻統(tǒng)計，在生產者一端，我們將數據按照每天的拉取時間存入了Kafka當中，而在消費者一端，我們利用了spar...
-
實力來自點點滴滴的積累，專注原創(chuàng)，分享大數據技術。
-
ELK是三個開源軟件的縮寫，分別表示：Elasticsearch , Logstash, Kibana , 它們都是開源軟件。新增了一個FileBeat，它是一個輕量級的日志收集處理工具(Agent)，Filebeat占用資源少，適合于在各個服務器上搜集日志后傳輸給Logstash，官方也推薦此工具。 Elasticsearch是個開源分布式搜索引擎，提供搜集、分析、存儲數據三大功能。它的特點有：分布式，零配置，自動發(fā)現，索引自動分片，索引副本機制，restful風格接口，多數據源，自動搜索負載等。 Logstash 主要是用來日志的搜集、分析、過濾日志的工具，支持大量的數據獲取方式。一般工作方式為c/s架構，client端安裝在需要收集日志的主機上，server端負責將收到的各節(jié)點日志進行過濾、修改等操作在一并發(fā)往elasticsearch上去。 Kibana 也是一個開源和免費的工具，Kibana可以為 Logstash 和 ElasticSearch 提供的日志分析友好的 Web 界面，可以幫助匯總、分析和搜索重要數據日志。 Filebeat隸屬于Beats。目前Beats包含四種工具： Packetbeat（搜集網絡流量數據） Topbeat（搜集系統(tǒng)、進程和文件系統(tǒng)級別的 CPU 和內存使用情況等數據） Filebeat（搜集文件數據） Winlogbeat（搜集 Windows 事件日志數據）
