kafka采用拉取模型,由消費者自己記錄消費狀態(tài),每個消費者互相獨立地順序拉取每個分區(qū)的消息,消費者可以按照任意的順序消費消息。比如,消費者可以重置到舊的偏移量,重新處理之前已經(jīng)消費過的消息;或者直接跳到最近的位置,從當(dāng)前的時刻開始消費。查看全文>>
leader對于消息的寫入以及讀取是非常關(guān)鍵的,此時有兩個疑問:Kafka如何確定某個partition是leader、哪個partition是follower呢?某個leader崩潰了,如何快速確定另外一個leader呢?使用Kafka Eagle找到某個partition的leader,再找到leader所在的broker。在Linux中強制殺掉該Kafka的進程,然后觀察leader的情況。查看全文>>
我們可以讓Kafka根據(jù)消費組中的消費者動態(tài)地為topic分配要消費的分區(qū)。但在某些時候,我們需要指定要消費的分區(qū),這時候就要手動消費分區(qū)中的數(shù)據(jù),下面來看一下分區(qū)方法。查看全文>>
TiDB 具備如下眾多特性,其中兩大核心特性為:水平擴展與高可用。大多數(shù)情況下,無需修改代碼即可從 MySQL 輕松遷移至 TiDB,分庫分表后的 MySQL 集群亦可通過 TiDB 工具進行實時遷移。查看全文>>
第一代數(shù)據(jù)庫系統(tǒng)是層次和網(wǎng)狀數(shù)據(jù)庫管理系統(tǒng),層次和網(wǎng)狀數(shù)據(jù)庫的代表產(chǎn)品是IBM公司在1969年研制出的層次模型數(shù)據(jù)庫管理系統(tǒng)。層次數(shù)據(jù)庫是數(shù)據(jù)庫系統(tǒng)的先驅(qū),而網(wǎng)狀數(shù)據(jù)庫則是數(shù)據(jù)庫概念、方法、技術(shù)的奠基。查看全文>>
為了方便將來進行一鍵啟動、關(guān)閉Kafka,我們可以編寫一個shell腳本來操作。將來只要執(zhí)行一次該腳本就可以快速啟動/關(guān)閉Kafka。查看全文>>