全部 新聞動態(tài) 技術文章 常見問題 技術問答

• • 

    Watch機制特點有哪些？Watch簡介

    在ZooKeeper中，引入了Watch機制來實現這種分布式的通知功能。ZooKeeper允許客戶端向服務端注冊一個Watch監(jiān)聽，當服務端的一些事件觸發(fā)了這個Watch，那么就會向指定客戶端發(fā)送一個事件通知，來實現分布式的通知功能。Watch機制在事件中有以下4個特點：查看全文>>

    技術文章2020-11-03 |黑馬程序員 |Watch機制的特點,Watch簡介
  • 

    Znode儲存結構是怎樣的？節(jié)點類型有哪幾種？

    Zookeeper的底層是一套數據儲存結構，其中的節(jié)點，我們稱之為znode。Zookeeper中數據存儲的結構和標準文件系統(tǒng)非常類似，擁有一個層次的命名空間，也是使用斜杠(/)進行分割，兩者都是采用樹形層次結構。不同的是，標準文件系統(tǒng)是由文件夾和文件來組成的樹，而Zookeeper是由什么來組成的樹呢?下面我們來看一下Zookeeper數據存儲結構查看全文>>

    技術文章2020-11-03 |黑馬程序員 |Znode的儲存結構和節(jié)點類型
  • 

    YARN資源管理框架的體系結構【大數據文章】

    YARN是一個通用的資源管理系統(tǒng)和調度平臺，它的基本設計思想是將MRv1(Hadoop1.0中的MapReduce)中的JobTracker拆分為兩個獨立的任務，這兩個任務分別是全局的資源管理器ResourceManager和每個應用程序特有的ApplicationMaster。其中，ResourceManager負責整個系統(tǒng)的資源管理和分配，而ApplicationMaster負責單個應用程序的管理。接下來，我們通過一張圖來描述YARN的體系結構，具體如圖1所示。查看全文>>

    技術文章2020-11-03 |黑馬程序員 |YARN資源管理框架的體系結構
  • 

    Zookeeper集群中的三種角色簡單介紹

    Zookeeper對外提供一個類似于文件系統(tǒng)的層次化的數據存儲服務，為了保證整個Zookeeper集群的容錯性和高性能，每一個Zookeeper集群都是由多臺服務器節(jié)點(Server)組成，這些節(jié)點通過復制保證各個服務器節(jié)點之間的數據一致。只要當這些服務器節(jié)點過半數節(jié)點可用，那么整個Zookeeper集群就可用。下面我們來學習Zookeeper的集群架構，如圖1所示。查看全文>>

    技術文章2020-11-03 |黑馬程序員 |Zookeeper集群的三種角色
  • 

    Spark的集群安裝部署【大數據技術文章】

    我們要規(guī)劃的Spark集群包含一臺Master節(jié)點和兩臺Slave節(jié)點。其中，主機名hadoop01是Master節(jié)點，hadoop02和hadoop03是Slave節(jié)點。 　　接下來，分步驟演示Spark集群的安裝與配置，具體如下。查看全文>>

    技術文章2020-10-29 |黑馬程序員 |Spark的集群安裝部署
  • 

    Spark有哪些特點，Spark的生態(tài)系統(tǒng)包含哪些組件？

    目前，Spark生態(tài)系統(tǒng)已經發(fā)展成為一個可應用于大規(guī)模數據處理的統(tǒng)一分析引擎，它是基于內存計算的大數據并行計算框架，適用于各種各樣的分布式平臺的系統(tǒng)。在Spark生態(tài)圈中包含了Spark SQL、Spark Streaming、GraphX、MLlib等組件，這些組件可以非常容易地把各種處理流程整合在一起，而這樣的整合，在實際的數據分析過程中是很有意義的。不僅如此，Spark的這種特性還大大減輕了原先需要對各種平臺分別管理的依賴負擔。下面，通過一張圖描述Spark的生態(tài)系統(tǒng)查看全文>>

    技術文章2020-10-28 |黑馬程序員 |Spark概述,Spar有哪些特點
  << < 1... 11 12 13 14 15 16 17 ...33 > >>