Pivotal劉偉光：顛覆行業(yè) 用互聯(lián)網(wǎng)思維打造企業(yè)級(jí)基礎(chǔ)平臺(tái)

近日，在Pivotal溝通會(huì)上，Pivotal大中華區(qū)總經(jīng)理劉偉光介紹了Pivotal的整體戰(zhàn)略、產(chǎn)品情況以及在中國(guó)的運(yùn)營(yíng)情況。

Pivotal大中華區(qū)總經(jīng)理劉偉光

首先給大家普及一下Pivotal的背景，它是去年4月份，由EMC、VMware、Ge共同投資成立了Pivotal公司，由Winodws之父、前VMware CEO Paul Maritz掌舵，致力于為企業(yè)級(jí)用戶(hù)打造企業(yè)級(jí)云平臺(tái)和大數(shù)據(jù)平臺(tái)。自此，Pivotal就成為EMC公司在第三平臺(tái)趨勢(shì)下的重要布局。

會(huì)上，劉偉光表示隨著用戶(hù)規(guī)模和用戶(hù)應(yīng)用空前豐富，使得企業(yè)的IT基礎(chǔ)平臺(tái)需要適應(yīng)全新的環(huán)境，企業(yè)IT發(fā)展在經(jīng)歷了第一和第二平臺(tái)之后，現(xiàn)在正在逐漸向第三平臺(tái)發(fā)展。

劉偉光講到：“沒(méi)有任何一個(gè)單獨(dú)的大數(shù)據(jù)產(chǎn)品能夠勝任企業(yè)的大數(shù)據(jù)處理挑戰(zhàn)。”他表示Pivotal公司是將原有EMC和VMware的一些優(yōu)良的軟件資產(chǎn)進(jìn)行整合，整合之后構(gòu)建了一個(gè)全新的整合的基礎(chǔ)架構(gòu)平臺(tái)，重要產(chǎn)品包括數(shù)據(jù)分析：GreenPlum數(shù)據(jù)倉(cāng)庫(kù)、Hadoop、內(nèi)存計(jì)算GemFire等；應(yīng)用開(kāi)發(fā)：Spring中間件、MySQL Dev等；云自動(dòng)化：Cloud Foundry軟件。Pivotal通過(guò)對(duì)這些重要產(chǎn)品整合打造出全新的基礎(chǔ)架構(gòu)平臺(tái)----Pivotal One，涵蓋了數(shù)據(jù)支撐平臺(tái)、應(yīng)用支撐平臺(tái)、云支撐平臺(tái)以及專(zhuān)業(yè)服務(wù)?！癙ivotal有一個(gè)很大的使命就是把很多在互聯(lián)網(wǎng)行業(yè)當(dāng)中優(yōu)秀的組合與傳統(tǒng)企業(yè)所需要的技術(shù)進(jìn)行集成，為企業(yè)級(jí)用戶(hù)提供企業(yè)級(jí)云平臺(tái)和大數(shù)據(jù)平臺(tái)。這里面涵蓋了EMC、VMware和Pivotal各自的拳頭技術(shù)，我們真的要打造一個(gè)全新平臺(tái)，不僅針對(duì)原有的存儲(chǔ)市場(chǎng)，還針對(duì)我們的友商市場(chǎng)，顛覆整個(gè)行業(yè)?！眲ス獗硎尽?/p>

據(jù)了解，Pivotal在中國(guó)非常重要的一個(gè)客戶(hù)就是12306，鐵道部通過(guò)Pivotal的內(nèi)存計(jì)算產(chǎn)品 GemFire來(lái)解決高峰時(shí)期訂票和余票查詢(xún)的瓶頸。劉偉光表示：“12306在春節(jié)高峰時(shí)期應(yīng)該是世界上單點(diǎn)訪問(wèn)量、并發(fā)量最高的，它的訪問(wèn)瓶頸、性能壓力一直困擾著鐵道部。Pivotal的技術(shù)將所有計(jì)算任務(wù)平均分配到每一臺(tái)X86服務(wù)器上，而不像過(guò)去將所有計(jì)算資源都集中在某幾臺(tái)大型Unix服務(wù)器上，通過(guò)低成本的硬件來(lái)為用戶(hù)提供最高性能和用戶(hù)體驗(yàn)?！被仡^是不是應(yīng)該讓12306的技術(shù)出來(lái)聊聊呢？ 

接下來(lái)劉偉光解釋了具體產(chǎn)品之間的流動(dòng)性。我們從左到右看這個(gè)圖，最左邊是可能產(chǎn)生的數(shù)據(jù)源，從互聯(lián)網(wǎng)、從網(wǎng)端、從各種各樣的地方產(chǎn)生的數(shù)據(jù)源，送到后臺(tái)的大數(shù)據(jù)處理平臺(tái)，我們提供的SpringXD，可以提供統(tǒng)一的數(shù)據(jù)管理、統(tǒng)一的數(shù)據(jù)轉(zhuǎn)換，可以統(tǒng)一的送到后臺(tái)的數(shù)據(jù)源。也可能你需要的是高性能的計(jì)算能力，可以迅速的送到這里進(jìn)行計(jì)算，計(jì)算完的結(jié)果可以直接傳送到數(shù)據(jù)庫(kù)當(dāng)中去做歸檔。如果這個(gè)計(jì)算結(jié)果沒(méi)那么重要，也可以轉(zhuǎn)到Hadoop上去，所以可以有很多種選擇。

當(dāng)記者問(wèn)及GemFire和Hadoop之間是通過(guò)哪些技術(shù)來(lái)實(shí)現(xiàn)的？以及這些數(shù)據(jù)從一個(gè)地方轉(zhuǎn)移到另外一個(gè)地方，數(shù)據(jù)的轉(zhuǎn)移有沒(méi)有一些數(shù)據(jù)保護(hù)之類(lèi)的措施？

劉偉光表示：“當(dāng)客戶(hù)在實(shí)行整個(gè)大數(shù)據(jù)系統(tǒng)構(gòu)建的時(shí)候，先期采用了相對(duì)獨(dú)立的產(chǎn)品，比如Greenplum產(chǎn)品，或者GemFire產(chǎn)品，比如以GemFire為例，它有很多接口來(lái)實(shí)現(xiàn)數(shù)據(jù)的持久化，可以放到數(shù)據(jù)庫(kù)里，當(dāng)我的GemFire數(shù)據(jù)庫(kù)啟動(dòng)的時(shí)候，可以把這些數(shù)據(jù)全部從這里加載。我這個(gè)數(shù)據(jù)是熱點(diǎn)數(shù)據(jù)，用GemFire來(lái)處理這些數(shù)據(jù)存在哪里，其實(shí)是可以放在GemFireXD上，只不過(guò)我需要通過(guò)GemFire進(jìn)行規(guī)則的定制，它們之間訪問(wèn)的接口都是可以實(shí)現(xiàn)的。

至于用GemFire去訪問(wèn)Hadoop上的數(shù)據(jù)，用一些什么樣的協(xié)議去實(shí)現(xiàn)呢？可以用GemFire的這種方式，這就是我們GemFireXD，通過(guò)GemFire的方式去訪問(wèn)，數(shù)據(jù)可以直接通過(guò)JDBC的方式去訪問(wèn)，GemFire是非常靈活的產(chǎn)品，可以實(shí)現(xiàn)數(shù)據(jù)的交互，也可以通過(guò)JAVA的程序去實(shí)現(xiàn)，方式可以更加靈活，可以直接調(diào)用第三方數(shù)據(jù)訪問(wèn)的接口，沒(méi)有什么嚴(yán)格的限制?！?/blockquote>

Pivotal這款產(chǎn)品的定位和現(xiàn)在很流行的HANA或者最近Oracle出的數(shù)據(jù)庫(kù)軟件，這些東西它們是在一個(gè)層面上的東西嗎？它的優(yōu)勢(shì)在哪里？

GemFire是基于開(kāi)放平臺(tái)的標(biāo)準(zhǔn)產(chǎn)品，跟很多廠家的產(chǎn)品定位是不太一樣的，因?yàn)樵谡麄€(gè)云計(jì)算時(shí)代來(lái)臨的時(shí)候，我們一直在講要做開(kāi)放、要做標(biāo)準(zhǔn)，從開(kāi)放的特點(diǎn)來(lái)看，比如SAP的HANA，最重要的定位在HANA出現(xiàn)的時(shí)候，首先要服務(wù)于他們?cè)械暮芏嗫蛻?hù)。我們的產(chǎn)品是通過(guò)接口來(lái)實(shí)現(xiàn)廣泛的途徑。到目前為止，除了像12306的案例以外，在國(guó)內(nèi)我們有很多其他行業(yè)，包括政府行業(yè)、金融行業(yè)，很多行業(yè)都有成功推廣的經(jīng)驗(yàn)，甚至在制造業(yè)也有成功的經(jīng)驗(yàn)。

在產(chǎn)品技術(shù)的實(shí)現(xiàn)上，這個(gè)產(chǎn)品在剛剛出現(xiàn)的時(shí)候，它的定位就是要做快速的數(shù)據(jù)的及時(shí)處理，并且對(duì)于一些特定狀況能夠做出及時(shí)反應(yīng)，因?yàn)檫@是證券行業(yè)很重要的特性。在云計(jì)算包括大數(shù)據(jù)市場(chǎng)不斷發(fā)展、不斷推廣的時(shí)候，對(duì)于快速的數(shù)據(jù)處理方面也有類(lèi)似的需求在產(chǎn)生，所以我們這個(gè)產(chǎn)品，特別是流式數(shù)據(jù)處理及時(shí)性方面，特點(diǎn)是非常強(qiáng)的。

關(guān)于大數(shù)據(jù)最新趨勢(shì)，Pivotal 有哪些獨(dú)特的觀察？認(rèn)同怎樣的大數(shù)據(jù)經(jīng)濟(jì)模式？

劉偉光：大數(shù)據(jù)最新的趨勢(shì)來(lái)看，Pivotal有如下的一些觀點(diǎn)。

• Pivotal認(rèn)為沒(méi)有單一的大數(shù)據(jù)產(chǎn)品能夠滿(mǎn)足互聯(lián)網(wǎng)時(shí)代的傳統(tǒng)企業(yè)的大數(shù)據(jù)需求。無(wú)論是Hadoop變得越來(lái)越像分布式數(shù)據(jù)庫(kù)還是傳統(tǒng)的數(shù)據(jù)庫(kù)技術(shù)變得越來(lái)越像Hadoop類(lèi)型的分布式處理框架。而只有通過(guò)組合這些單獨(dú)的產(chǎn)品，形成新型企業(yè)的完整的大數(shù)據(jù)處理架構(gòu)，才有可能應(yīng)對(duì)大數(shù)據(jù)帶來(lái)的挑戰(zhàn)

• 云與大數(shù)據(jù)將會(huì)結(jié)合得越來(lái)越緊密。單獨(dú)的大數(shù)據(jù)環(huán)境已經(jīng)逐漸顯現(xiàn)出其不足之處，如缺乏足夠的彈性，無(wú)法支撐快速的迭代開(kāi)發(fā)，高成本的大規(guī)模集群的管理維護(hù)，功能變得越來(lái)越復(fù)雜的同時(shí)，需要的技能越來(lái)越多，要求越來(lái)越高。而這些正是云架構(gòu)擅長(zhǎng)的領(lǐng)域，大數(shù)據(jù)與PaaS的結(jié)合是未來(lái)大數(shù)據(jù)升華的唯一途經(jīng)。認(rèn)同APP+DATA+ANALYTIC構(gòu)成的完整閉環(huán)才能夠全面應(yīng)對(duì)互聯(lián)網(wǎng)化帶來(lái)的挑戰(zhàn)，缺一不可，并發(fā)揮出傳統(tǒng)企業(yè)的數(shù)據(jù)價(jià)值。

Pivotal如何定義快數(shù)據(jù)？在快數(shù)據(jù)方面，Pivotal有哪些技術(shù)和解決方案？

劉偉光：快數(shù)據(jù)即能夠以超低時(shí)延和超高并發(fā)的方式來(lái)處理各種類(lèi)型的數(shù)據(jù)，天下武功，唯快不破?？鞌?shù)據(jù)方面，Pivotal有分布式內(nèi)存網(wǎng)格技術(shù)Gemfire(12306的案例)，分布式內(nèi)存數(shù)據(jù)庫(kù)技術(shù)SQLFire以及業(yè)界唯一能夠在Hadoop上運(yùn)行高性能OLTP類(lèi)型應(yīng)用的分布式內(nèi)存技術(shù)GemfireXD。

GemfireXD目前已經(jīng)在幾個(gè)對(duì)于并發(fā)和時(shí)延要求極端苛刻的金融客戶(hù)中通過(guò)了嚴(yán)格的考驗(yàn)，是我們最新的大數(shù)據(jù)解決方案之一。

Pivotal是使用SQL+Hadoop作為大數(shù)據(jù)解決方案，在這方面哪些最新進(jìn)展？

劉偉光：我們的SQL on Hadoop方案有了更完善的模塊，Pivotal HAWQ技術(shù)已經(jīng)是業(yè)界唯一的純SQL on Hadoop方案，性能包括SQL的支撐能力業(yè)界第一。

同時(shí)，我們發(fā)布了OLTP on Hadoop的方案 Pivotal Gemfire XD，該方案是對(duì)整個(gè)Pivotal的大數(shù)據(jù)體系的有益補(bǔ)充，它使得客戶(hù)不光能在Hadoop上做高性能的MPP級(jí)別的復(fù)雜SQL分析，還能在Hadoop平臺(tái)中，也是業(yè)界唯一的廠商，能夠做OLTP級(jí)別的數(shù)據(jù)訪問(wèn)支持，并不僅僅是簡(jiǎn)單的HBase這種KV級(jí)別的數(shù)據(jù)查詢(xún)。

相比其他做大數(shù)據(jù)的廠商（如HP、甲骨文等），Pivotal大數(shù)據(jù)套件有哪些優(yōu)勢(shì)？

劉偉光：優(yōu)勢(shì)有3點(diǎn)：第一，統(tǒng)一定價(jià)模型，整合大數(shù)據(jù)產(chǎn)品，簡(jiǎn)化企業(yè)的選擇和流程；第二，流動(dòng)許可證模型，保證客戶(hù)的大數(shù)據(jù)技術(shù)投資與靈活的部署，從容應(yīng)對(duì)未知的大數(shù)據(jù)挑戰(zhàn)；第三，套件里的每一款產(chǎn)品都是業(yè)界領(lǐng)先的技術(shù)，擁有眾多的成熟國(guó)內(nèi)外頂級(jí)客戶(hù)案例，遍布各行各業(yè)，同時(shí)這些產(chǎn)品之間還能夠無(wú)縫的數(shù)據(jù)集成，自由流動(dòng)。

Pivotal大數(shù)據(jù)套件的技術(shù)架構(gòu)，對(duì)給底層以及上層用戶(hù)操作界面帶來(lái)怎樣的價(jià)值？

劉偉光：大數(shù)據(jù)套件的技術(shù)架構(gòu)涵蓋了數(shù)據(jù)處理領(lǐng)域所有的需求。

關(guān)系型數(shù)據(jù)庫(kù),NoSQL,流計(jì)算，SQL on Hadoop, OLAP on Hadoop, OLTP on Hadoop，cache緩存，In-Memory DB, In-Memory DataGrid，非關(guān)系型數(shù)據(jù)庫(kù)，等等。

并且這些模塊之間的數(shù)據(jù)是互聯(lián)互通，自由流動(dòng)，可以任意搭配來(lái)構(gòu)建靈活的企業(yè)級(jí)第三平臺(tái)數(shù)據(jù)架構(gòu)。

對(duì)于底層用戶(hù)來(lái)說(shuō)，互操作性以及標(biāo)準(zhǔn)SQL的支持使得應(yīng)用開(kāi)發(fā)和維護(hù)人員更容易上手，學(xué)習(xí)曲線降低。使得項(xiàng)目和應(yīng)用投產(chǎn)的周期縮短，風(fēng)險(xiǎn)降低。

對(duì)于上層用戶(hù)來(lái)說(shuō)，大數(shù)據(jù)套件完善友好的界面以及豐富的操作接口可以使得沒(méi)有任何經(jīng)驗(yàn)的數(shù)據(jù)分析和使用人員也能很快的進(jìn)入狀態(tài)，專(zhuān)注于業(yè)務(wù)和邏輯的分析應(yīng)用。

---

免費(fèi)訂閱“CSDN云計(jì)算”微信公眾號(hào)，實(shí)時(shí)掌握第一手云中消息！

CSDN作為國(guó)內(nèi)最專(zhuān)業(yè)的云計(jì)算服務(wù)平臺(tái)，提供云計(jì)算、大數(shù)據(jù)、虛擬化、數(shù)據(jù)中心、OpenStack、CloudStack、Hadoop、Spark、機(jī)器學(xué)習(xí)、智能算法等相關(guān)云計(jì)算觀點(diǎn)，云計(jì)算技術(shù)，云計(jì)算平臺(tái)，云計(jì)算實(shí)踐，云計(jì)算產(chǎn)業(yè)資訊等服務(wù)。

生活不易，碼農(nóng)辛苦
如果您覺(jué)得本網(wǎng)站對(duì)您的學(xué)習(xí)有所幫助,可以手機(jī)掃描二維碼進(jìn)行捐贈(zèng)