華為承辦首屆亞洲Apache HBase技術大會
本次大會著重分享了HBase 2.0相關的規(guī)劃及關鍵特性,HBase 2.0計劃于2017年底正式發(fā)布,目前關閉問題數(shù)超過4400個,關鍵特性和改進點包括:新版本的Region分配管理器,更多利用堆外內存來減少數(shù)據(jù)讀寫過程中的數(shù)據(jù)復制次數(shù)以及優(yōu)化垃圾回收問題,利用在內存中預先進行HFile Compaction的機制來減少寫IO放大,利用RegionServer Group來更好的支持多租戶場景以及新的異步客戶端。和1.x版本相比,即將面世的2.0版本在時延穩(wěn)定性、吞吐量、并發(fā)度、平均故障修復時間MTTR等方面,都會有明顯提升。
在本次大會中,主辦方華為有4名演講者分享了與HBase相關行業(yè)的應用創(chuàng)新以及多租戶、容災備份方面的最新觀點。在HBase行業(yè)應用結合創(chuàng)新方面,涉及以下兩方面的內容分享:針對使用HBase作為結構化數(shù)據(jù)存儲所提供的輕量級Client SDK CTBase, 以降低HBase的使用門檻;基于HBase實現(xiàn)的分布式位圖索引方案Tagram,主要用于存儲用戶畫像標簽數(shù)據(jù),提供ms級別的任意標簽組合條件的Ad-hoc查詢能力。
華為公司自HBase項目初始就對其持續(xù)關注,并在2010年開始進行規(guī)模投入,先后經歷了從0.20到1.3的多個主要版本,和HBase社區(qū)共同親歷了HBase不斷發(fā)展和壯大的歷程。一直以來,華為公司都積極參與到HBase開源社區(qū)的貢獻中,先后為該社區(qū)培養(yǎng)了2名PMC成員以及4名HBase Committer成員。在HBase與行業(yè)應用結合方面,華為也做了大量創(chuàng)新工作,以降低HBase使用者的門檻。目前,華為公司擁有自己的HBase企業(yè)發(fā)行版本,是華為企業(yè)版大數(shù)據(jù)平臺FusionInsight HD中的一個關鍵組件,已經在海內外擁有了大量的企業(yè)用戶,涉及到金融、運營商、公共安全、交通、電力、能源、制造等多個行業(yè),共部署了數(shù)萬個節(jié)點。
今年下半年,華為將在華為公有云上推出CloudTable服務,提供即開即用,按使用付費的HBase云化服務。該服務將作為華為公有云大數(shù)據(jù)解決方案的一個重要組成部分,提供企業(yè)級的數(shù)據(jù)安全防護能力、多租戶彈性計算等能力,進一步降低用戶使用HBase的門檻和成本。