到目前為止，大多數(shù)CIO已經(jīng)注意到大數(shù)據(jù)技術的發(fā)展前景以及將給企業(yè)業(yè)務帶來的全面變革。但殘酷的現(xiàn)實無法回避，Hadoop集群在創(chuàng)建、維護及維護等各個方面都難于打理，由此帶來的資金及時間壓力令企業(yè)疲于應對。基于這些理由，Hadoop的全面推廣似乎必定會胎死腹中。然而VMware公司此番攜宏偉構想而來，意欲將Hadoop集群納入虛擬化技術的覆蓋范疇之中。技術烽火的連城燃起令步入云時代的設想不再只是空談。

“Hadoop從客觀角度來說已經(jīng)成為大數(shù)據(jù)處理的統(tǒng)一標準，”VMware公司云應用程序平臺產(chǎn)品管理高級主管Fausto Ibarra認為?！暗孒adoop真正為企業(yè)效力，最大的挑戰(zhàn)在于如何說服財務部門為Hadoop的部署及維護劃撥如此龐大的前期經(jīng)費。而我們目前所做的努力正是圍繞這一難題，旨在最大程度簡化Hadoop集群在部署、配置及管理方面的需求，讓大數(shù)據(jù)‘走入尋常百姓家’?！?BR>
開源項目Serengeti ：虛擬對象直指Hadoop

VMware公司日前高調(diào)公布名為Serengeti的全新開源項目，其設計目的旨在打造一套“一鍵式”部署工具包，借以將Hadoop集群及通用Hadoop組件轉化成與VMware 平臺上的Apache Pig及Apache Hive相類似的高可用性功能。VMware公司作為項目帶頭人，還努力與Cloudera、Greenplum、Hortonworks、IBM以及MapR等多家Hadoop發(fā)行版供應商聯(lián)手，希望能讓Serengeti項目獲得顛覆性使用效能及一鳴驚人的市場反響。

目前，Hadoop的主要部署環(huán)境仍然局限于物理基礎設施。這類部署工作往往需要耗時數(shù)天、數(shù)周乃至數(shù)月，而且一旦基礎設施規(guī)模需求過大，IT部門將不得不為獲取必要的硬件及在節(jié)點上安裝發(fā)行版而勞神費力;再加上配置過程的繁瑣及Hadoop組件的復雜性，整個處理周期將很難加以準確規(guī)劃。另外，一旦群體規(guī)模與企業(yè)需求有所偏差，那么整套工作必須要原樣再來一遍，幾乎沒人愿意承受這種二次投入帶來的巨大風險。

“在Serengeti的幫助下，我們能夠在十分鐘以內(nèi)快速部署Hadoop集群，而且不用學習任何額外的新知識，”Ibarra解釋稱?！按蠹彝耆梢噪S意選擇適合自己的Hadoop發(fā)行版，而且不必購置任何新增硬件——只要能運行vSphere的設備都可以滿足Serengeti的需要。與此同時，新項目也不會對管理員提出更多新要求，只要能在vSphere上實現(xiàn)的操作，都可以通過同樣的技能及方式在Serengeti中完成?！?BR>
“Hadoop要想成為企業(yè)IT領域廣泛認同且全民使用的主流基礎設施，首先必須要在技術需求及操作技能方面做到徹底親民，”研究機構OVUM公司首席分析師Tony Baer告訴我們?！按笠?guī)模大數(shù)據(jù)集群天然擁有資源密集屬性，因此虛擬化技術的介入只是時間問題，在這一點上Hadoop別無選擇。VMware公司所參與的Apache Hadoop項目以及最新的Serengeti Apache項目是兩項關鍵性舉措，發(fā)展戰(zhàn)略比較靈活的云供應商必須以此為契機，嘗試以實驗或正式啟用的角度進軍Hadoop?！?BR>
讓Hadoop準備好迎接虛擬化

除了Serengeti項目，Ibarra還宣稱VMware公司已經(jīng)在與Apache Hadoop社區(qū)共同協(xié)作，希望對Hadoop分布式文件系統(tǒng)(簡稱HDFS)以及Hadoop MapReduce項目做出調(diào)整，以使其進一步“準備好迎接虛擬化”。這些改動會使橫跨多套虛擬基礎設施之間的數(shù)據(jù)及計算工作得到大幅優(yōu)化，并使企業(yè)用戶獲得更具彈性、安全性及高可用性的Hadoop集群處理能力。

VMware公司同時也在對于今年二月推出的開源項目Spring進行調(diào)整，希望能為Apache Hadoop帶來更多提升空間。在內(nèi)置了Spring Java應用程序框架之后，Spring for Hadoop將允許企業(yè)開發(fā)人員輕松創(chuàng)建分布式處理解決方案。Ibarra指出，此次更新將賦予Spring開發(fā)人員更強的應用程序開發(fā)能力，并能使應用開發(fā)成果與Hbase數(shù)據(jù)庫、Cascading庫以及Hadoop安全性相協(xié)調(diào)。

“在一系列更新工作的輔助下，Hadoop已經(jīng)準備好登上歷史舞臺了，它注定會成為下一場表演的核心角色，”Ibarra總結道?！癏adoop集群的整備工作將史無前例地簡單：只需配置一套新的數(shù)據(jù)庫或服務器，你就邁進了大數(shù)據(jù)時代的門檻?！?