Apache HBase在10年前成為Apache的頂級(jí)項(xiàng)目，而Cloudera同時(shí)開始為它做貢獻(xiàn)（2010年）。在這段時(shí)間里，它已成為大數(shù)據(jù)中最大、最流行的開源工具之一，也是最流行的NoSQL數(shù)據(jù)庫(kù)之一。

Apache軟件基金會(huì)宣布Apache HBase十周年

HBase支持鍵值和寬列NoSQL數(shù)據(jù)庫(kù)，并且被廣泛的企業(yè)使用。Cloudera在生產(chǎn)中有500多個(gè)客戶，使用它的用例包括關(guān)鍵任務(wù)事務(wù)應(yīng)用程序、數(shù)據(jù)倉(cāng)庫(kù)、機(jī)器學(xué)習(xí)和數(shù)據(jù)工程。我們的客戶選擇HBase是因?yàn)樗哂袕椥裕承┛蛻裟軌蛟诙嗄陜?nèi)實(shí)現(xiàn)100％的應(yīng)用程序正常運(yùn)行時(shí)間）、穩(wěn)定性、性能以及較低的運(yùn)營(yíng)成本。 Cloudera客戶與Phoenix（這是基于HBase構(gòu)建的基于SQL的數(shù)據(jù)庫(kù)）以及有時(shí)與Apache Impala和/或Apache Hive（使其允許他們?cè)贖Base上運(yùn)行基于SQL的OLAP查詢）一起獨(dú)立部署它。

自2018年以來(lái)，我一直擔(dān)任Cloudera運(yùn)營(yíng)數(shù)據(jù)庫(kù)產(chǎn)品的產(chǎn)品經(jīng)理，并有機(jī)會(huì)與我們的許多客戶會(huì)面。客戶使用HBase的廣泛方式給我留下了深刻的印象。用例的廣度是如此之大，種類繁多，以至于無(wú)法進(jìn)行細(xì)分。經(jīng)過大量分析，我最終得到了一種簡(jiǎn)單的方法來(lái)對(duì)用例進(jìn)行分類-使用它來(lái)支持關(guān)鍵任務(wù)應(yīng)用程序的客戶和不使用它的客戶。關(guān)鍵任務(wù)應(yīng)用程序通常具有事務(wù)性，可幫助我們的客戶增加收入并/或提高運(yùn)營(yíng)效率。對(duì)于他們來(lái)說(shuō)，如果HBase崩潰，那么頂線和/或底線就會(huì)受到影響，在最壞的情況下，人們可能會(huì)喪命。

關(guān)鍵任務(wù)用例的示例：

• 一家醫(yī)療保健軟件供應(yīng)商使用HBase來(lái)驅(qū)動(dòng)數(shù)百種應(yīng)用程序。如果這些應(yīng)用程序失敗，則由于任何原因人們可能會(huì)死亡并且醫(yī)療保健費(fèi)用會(huì)增加。該客戶已將HBase部署在7000多個(gè)節(jié)點(diǎn)上，這些節(jié)點(diǎn)具有70 PB以上的數(shù)據(jù)。
• 手機(jī)制造商使用HBase在6000多個(gè)節(jié)點(diǎn)上啟用語(yǔ)音助手和許多其他用例
• 一家金融媒體公司使用HBase為平臺(tái)的各個(gè)部分提供動(dòng)力，并使交易者和其他人能夠了解有關(guān)1200多個(gè)節(jié)點(diǎn)上的股價(jià)變動(dòng)、趨勢(shì)等的相關(guān)情況。
• 市場(chǎng)領(lǐng)先的電子郵件營(yíng)銷平臺(tái)在約1000個(gè)節(jié)點(diǎn)上運(yùn)行HBase
• 一家保險(xiǎn)提供商在約1000個(gè)節(jié)點(diǎn)上使用HBase來(lái)存儲(chǔ)所有索賠信息，并在整個(gè)生命周期中使用它來(lái)管理這些索賠
• 圖書館服務(wù)提供商在400多個(gè)節(jié)點(diǎn)上使用HBase來(lái)支持全球的館際互借
• 一家全球配電公司在400多個(gè)節(jié)點(diǎn)上使用HBase來(lái)獲取7百萬(wàn)個(gè)智能電表中的讀數(shù)，并為配電網(wǎng)絡(luò)，電費(fèi)賬單應(yīng)用執(zhí)行維修團(tuán)隊(duì)的自動(dòng)部署，并推動(dòng)機(jī)器學(xué)習(xí)模型的持續(xù)培訓(xùn)
• 印尼最大的電信公司Telkomsel，擁有超過1億7千萬(wàn)客戶，將其整個(gè)CRM應(yīng)用程序從舊版MPP數(shù)據(jù)庫(kù)遷移到HBase和Impala，并能夠針對(duì)所有用戶的呼叫記錄、配置文件、充值，所有CRM查詢實(shí)現(xiàn)亞秒級(jí)的響應(yīng)時(shí)間，Impala查詢HBase的好處是確保可通過JDBC訪問與ANSI SQL兼容的接口，以最大程度地減少CRM更改。

非關(guān)鍵任務(wù)用例的示例：

• 個(gè)人護(hù)理產(chǎn)品制造商使用HBase來(lái)管理其所有產(chǎn)品品牌和營(yíng)銷材料
• 半導(dǎo)體制造商使用HBase存儲(chǔ)其產(chǎn)品中的日志文件，并將其提取到其他系統(tǒng)中進(jìn)行分析
• 電信提供商使用HBase為Hive存儲(chǔ)其尺寸表

HBase與其他NoSQL產(chǎn)品的不同之處在于它在整個(gè)開放源代碼，大數(shù)據(jù)生態(tài)系統(tǒng)中的集成，使客戶能夠享受端到端的體驗(yàn)。他們可以將其用于需要邊緣數(shù)據(jù)的應(yīng)用程序或需要大規(guī)模交付AI/ML模型的應(yīng)用程序或其任意組合。

我在Cloudera上遇到的最有趣的支持通知單之一是，當(dāng)HBase客戶提交了高優(yōu)先級(jí)的通知單時(shí)，表明他們的關(guān)鍵任務(wù)部署已停止。他們與我們互動(dòng)已有一年多了，我甚至都不知道他們是重要的客戶。在這種情況下，我才得知他們已經(jīng)部署了1000個(gè)節(jié)點(diǎn)來(lái)為HBase上的全渠道營(yíng)銷平臺(tái)提供動(dòng)力。問題的根源是他們?cè)谑录l(fā)生前9個(gè)月對(duì)配置設(shè)置進(jìn)行了一些有問題的更改。當(dāng)他們最終重新啟動(dòng)時(shí)，有問題的配置設(shè)置生效，導(dǎo)致他們向Cloudera尋求幫助！

Cloudera對(duì)HBase十分關(guān)心，并擁有15個(gè)項(xiàng)目的提交者和PMC成員。我們還進(jìn)行了投資，以使用類似PaaS和dbPaaS的形式在公共云上提供它。

多年來(lái)的HBase經(jīng)驗(yàn)

鑒于我們對(duì)該項(xiàng)目的長(zhǎng)期承諾和歷史，我們希望與Cloudera團(tuán)隊(duì)分享與該項(xiàng)目相關(guān)的一些經(jīng)驗(yàn)和故事。

“幾年前，我參加了一個(gè)針對(duì)Apache Hadoop的技術(shù)會(huì)議。一個(gè)傍晚，我正回到自己的房間，碰巧看到一群我認(rèn)識(shí)為長(zhǎng)期客戶的人擠在桌子旁。現(xiàn)在，這些人是一個(gè)非常有能力的團(tuán)隊(duì)，我與他們一起工作了很多年。我蜿蜒而過，打算簡(jiǎn)短地打個(gè)招呼，并在漫長(zhǎng)的一天后繼續(xù)前進(jìn)。事實(shí)證明，他們的其中一個(gè)系統(tǒng)出現(xiàn)了生產(chǎn)中斷，并且正在設(shè)法解決該問題。我坐下，拿出筆記本電腦，在接下來(lái)的幾個(gè)小時(shí)里和他們一起閑逛，同時(shí)我們分析了問題并解決了所發(fā)現(xiàn)的問題。支持關(guān)鍵任務(wù)應(yīng)用有時(shí)需要英雄，但有時(shí)您還會(huì)發(fā)現(xiàn)一些羽毛。”

——高級(jí)工程師

“對(duì)于許多企業(yè)而言，能夠擴(kuò)展并仍然滿足其關(guān)鍵任務(wù)系統(tǒng)的低延遲要求絕對(duì)至關(guān)重要。如果您回顧檔案，我們的客戶將很難達(dá)到如此艱難的標(biāo)準(zhǔn)。HBase具有使?jié)M足這些期望變得容易的要素，尤其是通過最小化觸發(fā)下一個(gè)最佳操作的時(shí)間。”

——首席解決方案架構(gòu)師

“三年前，我是Cloudera的一名新加入的工程經(jīng)理。我曾經(jīng)了解過公司的開源活動(dòng)，從高中開始就一直是GNU Linux的用戶，但是使用開源和成為開源的一部分卻完全不同。

作為公司的新成員，我必須了解團(tuán)隊(duì)的工作，因此我獲得了一些分配給自己的支持通知單，并開始進(jìn)行工作。我只知道兩件事，我是一名Java開發(fā)人員多年，因此我必須能夠做到這一點(diǎn)，而Hortonworks是我們最具挑戰(zhàn)性的競(jìng)爭(zhēng)對(duì)手，這意味著與他們合作可能會(huì)很有趣。

然后事情就發(fā)生了，在我第一次使用Apache HBase票證時(shí)，我遇到了Hortonworks HBase團(tuán)隊(duì)負(fù)責(zé)人Josh Elser，他向我展示了執(zhí)行newby任務(wù)可能比預(yù)期的要難（HBase團(tuán)隊(duì)擁有質(zhì)量標(biāo)準(zhǔn)）您的競(jìng)爭(zhēng)對(duì)手可以成為您在開源社區(qū)中的最佳合作伙伴。最后，他承諾我的改變。

在過去三年中，許多事情發(fā)生了變化。Cloudera和Hortonworks合并，我們現(xiàn)在在同一家公司工作，但Apache和HBase相同。我花了有限的時(shí)間來(lái)編寫代碼，但看到了它的功能，看到了它如何用于我不知道的服務(wù)，并且看到了它如何使全世界的人們一起工作。它使公司、大洲和文化之間的人們聯(lián)系起來(lái)。”

——工程經(jīng)理

“HBase和Phoenix很容易學(xué)習(xí)。Data Hub使啟動(dòng)變得容易，現(xiàn)在正期待Cloudera Operational Database將HBase帶入下一個(gè)十年。”

——技術(shù)客戶成功經(jīng)理

“在過去的9年中，我從第一線開始就致力于HBase的開發(fā)，并且看到了客戶從POC到大型、關(guān)鍵任務(wù)平臺(tái)如何使用HBase的演變。這段時(shí)間最引人注目的時(shí)刻是在Cloudera和Hortonworks合并之前，兩家公司的團(tuán)隊(duì)共同努力以改善一項(xiàng)關(guān)鍵產(chǎn)品功能的功能。最終，該作品在HBaseCon上展示，并獲得了HBase的兩個(gè)最大用戶的高度認(rèn)可。此功能可為全球超過2B移動(dòng)設(shè)備使用的關(guān)鍵功能提供支持。”

——高級(jí)工程師

“HBase過去十年來(lái)的另一個(gè)偉大時(shí)刻，是在2015年HBaseCon上，來(lái)自Google的Carter Page公開認(rèn)可了HBase如何發(fā)展成為一個(gè)非常堅(jiān)實(shí)的項(xiàng)目。”

——高級(jí)工程師

“我很高興參加幾乎所有的HBaseCon（并在其中一些會(huì)議上發(fā)言）。這是我最喜歡的三個(gè)HBaseCon記憶：（1）HBase的多樣性：HBase 2.0公告不僅強(qiáng)調(diào)了已發(fā)貨的JIRA數(shù)量，而且強(qiáng)調(diào)了美國(guó)以外的HBase提交者和PMC成員的數(shù)量，還有一位女士領(lǐng)導(dǎo)HBase PMC ；（2）HBase的發(fā)展勢(shì)頭：Facebook宣布他們將自定義分支移至Apache HBase的100％上游；以及（3）HBase的墊腳石：在一個(gè)HBaseCon上，彭博社的一名開發(fā)人員進(jìn)行了只讀副本的演講，然后發(fā)表了兩個(gè)HBaseCons ，一位蘋果開發(fā)人員就在生產(chǎn)中使用只讀副本發(fā)表了HBaseCon主題演講。”

——高級(jí)系統(tǒng)工程師

在Cloudera，我們繼續(xù)看到該項(xiàng)目的光明前景，并希望它能夠發(fā)展為以PaaS類和dbPaaS形式在云中以及在具有私有云的數(shù)據(jù)中心中構(gòu)建的下一代應(yīng)用程序提供支持。

關(guān)于Cloudera

在 Cloudera，我們相信數(shù)據(jù)可以使今天的不可能，在明天成為可能。我們使人們能夠?qū)?fù)雜的數(shù)據(jù)轉(zhuǎn)換為清晰而可行的洞察力。Cloudera 為任何地方的任何數(shù)據(jù)從邊緣到人工智能提供企業(yè)數(shù)據(jù)云平臺(tái)服務(wù)。在開源社區(qū)不懈創(chuàng)新的支持下， Cloudera推動(dòng)了全球最大型企業(yè)的數(shù)字化轉(zhuǎn)型歷程。了解更多，請(qǐng)聯(lián)系。

慧都大數(shù)據(jù)專業(yè)團(tuán)隊(duì)為企業(yè)提供Cloudera大數(shù)據(jù)平臺(tái)搭建，免費(fèi)業(yè)務(wù)咨詢，定制開發(fā)等完整服務(wù)，快速、輕松、低成本將任何Hadoop集群從試用階段轉(zhuǎn)移到生產(chǎn)階段。

歡迎撥打慧都熱線023-68661681或咨詢慧都在線客服，我們有專業(yè)的大數(shù)據(jù)團(tuán)隊(duì)，為您提供免費(fèi)大數(shù)據(jù)相關(guān)業(yè)務(wù)咨詢！