kafka采用拉取模型,由消費(fèi)者自己記錄消費(fèi)狀態(tài),每個(gè)消費(fèi)者互相獨(dú)立地順序拉取每個(gè)分區(qū)的消息,消費(fèi)者可以按照任意的順序消費(fèi)消息。比如,消費(fèi)者可以重置到舊的偏移量,重新處理之前已經(jīng)消費(fèi)過(guò)的消息;或者直接跳到最近的位置,從當(dāng)前的時(shí)刻開(kāi)始消費(fèi)。查看全文>>
leader對(duì)于消息的寫入以及讀取是非常關(guān)鍵的,此時(shí)有兩個(gè)疑問(wèn):Kafka如何確定某個(gè)partition是leader、哪個(gè)partition是follower呢?某個(gè)leader崩潰了,如何快速確定另外一個(gè)leader呢?使用Kafka Eagle找到某個(gè)partition的leader,再找到leader所在的broker。在Linux中強(qiáng)制殺掉該Kafka的進(jìn)程,然后觀察leader的情況。查看全文>>
我們可以讓Kafka根據(jù)消費(fèi)組中的消費(fèi)者動(dòng)態(tài)地為topic分配要消費(fèi)的分區(qū)。但在某些時(shí)候,我們需要指定要消費(fèi)的分區(qū),這時(shí)候就要手動(dòng)消費(fèi)分區(qū)中的數(shù)據(jù),下面來(lái)看一下分區(qū)方法。查看全文>>
TiDB 具備如下眾多特性,其中兩大核心特性為:水平擴(kuò)展與高可用。大多數(shù)情況下,無(wú)需修改代碼即可從 MySQL 輕松遷移至 TiDB,分庫(kù)分表后的 MySQL 集群亦可通過(guò) TiDB 工具進(jìn)行實(shí)時(shí)遷移。查看全文>>
第一代數(shù)據(jù)庫(kù)系統(tǒng)是層次和網(wǎng)狀數(shù)據(jù)庫(kù)管理系統(tǒng),層次和網(wǎng)狀數(shù)據(jù)庫(kù)的代表產(chǎn)品是IBM公司在1969年研制出的層次模型數(shù)據(jù)庫(kù)管理系統(tǒng)。層次數(shù)據(jù)庫(kù)是數(shù)據(jù)庫(kù)系統(tǒng)的先驅(qū),而網(wǎng)狀數(shù)據(jù)庫(kù)則是數(shù)據(jù)庫(kù)概念、方法、技術(shù)的奠基。查看全文>>
為了方便將來(lái)進(jìn)行一鍵啟動(dòng)、關(guān)閉Kafka,我們可以編寫一個(gè)shell腳本來(lái)操作。將來(lái)只要執(zhí)行一次該腳本就可以快速啟動(dòng)/關(guān)閉Kafka。查看全文>>