Sqoop是什么？Sqoop發(fā)展歷程簡介

　　Sqoop主要用于在Hadoop和關系數據庫或大型機之間傳輸數據，可以使用Sqoop工具將數據從關系數據庫管理系統導入(import)到Hadoop分布式文件系統中，或者將Hadoop中的數據轉換導出(export)到關系數據庫管理系統，其功能如圖1所示。

　　圖1 Sqoop功能

　　目前Sqoop主要分為Sqoop1和Sqoop2兩個版本，其中，版本號為1.4.x屬于Sqoop1，而版本號為1.99.x的屬于Sqoop2。這兩個版本開發(fā)時的定位方向不同，體系結構具有很大的差異，因此它們之間互不兼容。

　　Sqoop1功能結構簡單，部署方便，提供命令行操作方式，主要適用于系統服務管理人員進行簡單的數據遷移操作;Sqoop2功能完善、操作簡便，同時支持多種訪問模式(命令行操作、Web訪問、Rest API)，引入角色安全機制增加安全性等多種優(yōu)點，但是結構復雜，配置部署更加繁瑣。由于本書只用到Sqoop解決數據遷移問題，因此使用Sqoop1就可以完成基本的需求。




猜你喜歡：

怎樣在hadoop虛擬機上安裝和配置JDK?

Scala算術操作符重載怎樣使用？與Java語法的區(qū)別在哪

黑馬程序員大數據培訓課程