ActiveMQ與Kafka分析筆記

activeMQ與kafka比較

前言

消息中間件的主要作用是:解耦、異步、削峰填谷
解耦:將接口調用依賴的兩個服務解耦,方便分布式部署。
異步:服務器之間的不同接口調用會降低服務器執行性能,即每個接口都要等待返回,采用MQ可以異步完成接口調用
削峰填谷:MQ可以保存消息,在服務器處理消息壓力大的時候存儲消息,在服務器壓力小的時候傾瀉,可以提升服務器利用率。

簡介

ActiveMQ簡介

activeMQ是一種開源的,實現了JMS1.1規范的,面向消息(MOM)的中間件,為應用程序提供高效的、 可擴展的、穩定的和安全的企業級消息通信

Kafka簡介

Kafka是分布式發布-訂閱消息系統。它最初由LinkedIn公司開發,之后成為Apache項目的一部分。Kafka是一個分布式的,可劃分的,冗余備份的持久性的日志服務。它主要用于處理活躍的流式數據。

特性

ActiveMQ特性

(1)事務
AMQ支持事務,在connection對象創建session的過程中可以選擇是否支持事務,在支持事務的session中,生產者發送消息的時候會transactionId。broker收到消息后判斷是否有transactionId,如果有就把message保存在transaction store中,等待commit或者rollback消息。
(2)在傳統項目中,如果消息的量級不大,選擇AMQ更優,AMQ擁有更好的系統支持能力,且安裝配置簡單,安裝和維護成本低。

kafka特性

(1)利用zk實現負載均衡和leader選舉,且支持高并發
(2)零拷貝技術,減少數據拷貝,提升性能。
(3)可進行持久化操作。將消息持久化到磁盤。
(4)分布式系統,易于向外擴展,無需停機,就可以橫向擴展。
(5)一個topic可以分為多個partition,每個partition是一個有序的隊列,partition物理上由多個segment組成,每個Segment存著message信息。
(6)支持批量發送,可以配置收集一定數量的消息然后再進行發送
(7)支持順序生產,順序消費:kafka生產者發消息的時候可以指定一個key,那么這個key對應的消息會發到相同的partition中,又因為partition是一個有序的隊列,所以只要單個consumer來消費這個partition中key對應的消息,就可以保證這批消息的順序。

特殊情況

kafka消息可能出現亂序的情況

生產者在發送消息的時候,若是異步發送給broker的,那么這個broker可能存在多個未確認的消息在同時發送的,也就是說,可能有三條有順序要求的消息(m1,m2,m3)在發送,然后會存在消息發送成功狀態未知的情況,有可能存在m1發送失敗,m2,m3發送成功,如果m1進行了重試,重新發送后成功了,這個時候消息順序就亂了(m2,m3,m1)。如果對于數據有嚴格順序要求的,發送的時候可以配置參數max.in.flight.requests.per.connection為1,表示在后一條消息發送之前,就已經知道前面消息是否發送成功的狀態。這樣就可以避免前一條發送失敗的情況下,后一條消息繼續發送,導致的順序錯亂。

兩者區別

(1)kafka是appendLog形式記錄消息的,而AMQ類似于傳統數據庫形式記錄消息,顯然kafka這種形式的消息記錄模式效率更高(磁盤追加寫的性能要遠高于隨機寫)。
(2)kafka可配置參數較多,對于熟練使用它的人來說,可以更靈活的處置。AMQ使用簡單,配置較少,開箱即用,但靈活性較低。
(3)AMQ是被動接收消息的,kafka是主動拉取式的
(4)前期使用的時候kafka不支持SSL,而AMQ支持,所以選擇AMQ的企業如果不想做改動也就不會選擇kafka。
(5)kafka支持批量發送,它會在本地收集到一批消息之后再發送,而AMQ的批量需要客戶端自己實現
(6)kafka在消息發送的時候可以選擇partition數目,而AMQ只能發送到一個broker,kafka的容錯能力比AMQ強
(7)kafka部署成本較高,維護要求比AMQ高
(8)AMQ社區不活躍,kafka社區活躍
(9)AMQ支持jdk1.6版本,有些老項目需要維護的還需要依賴它
(10)另外,AMQ歷史悠久,支持的工具比較多
(11)AMQ采用的是kahadb,Kafka采用的是levelDb

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 230,527評論 6 544
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 99,687評論 3 429
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事?!?“怎么了?”我有些...
    開封第一講書人閱讀 178,640評論 0 383
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 63,957評論 1 318
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 72,682評論 6 413
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 56,011評論 1 329
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 44,009評論 3 449
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 43,183評論 0 290
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 49,714評論 1 336
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 41,435評論 3 359
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 43,665評論 1 374
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 39,148評論 5 365
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 44,838評論 3 350
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 35,251評論 0 28
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 36,588評論 1 295
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 52,379評論 3 400
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 48,627評論 2 380

推薦閱讀更多精彩內容

  • Kafka史上最詳細原理總結分為上下兩部分,承上啟下 Kafka史上最詳細原理總結上 Kafka史上最詳細原理總結...
    小波同學閱讀 22,211評論 1 115
  • Kafka設計解析(六)- Kafka高性能架構之道 原創文章,轉載請務必將下面這段話置于文章開頭處。本文轉發自技...
    小小少年Boy閱讀 2,754評論 0 13
  • 一、前言,所謂消息隊列 一個消息系統負責將數據從一個應用傳遞到另外一個應用,應用只需關注于數據,無需關注數據在兩個...
    Megahorn閱讀 903評論 0 0
  • 一、入門1、簡介Kafka is a distributed,partitioned,replicated com...
    HxLiang閱讀 3,382評論 0 9
  • 一、Kafka簡介 Kafka (科技術語)。Kafka是一種高吞吐量的分布式發布訂閱消息系統,它可以處理消費者規...
    邊學邊記閱讀 1,766評論 0 14