您當前位置：首頁 > 互聯(lián)網(wǎng) > 云計算核心技術(shù)架構(gòu)論壇：技術(shù)描繪計算的創(chuàng)新和發(fā)展

云計算核心技術(shù)架構(gòu)論壇：技術(shù)描繪計算的創(chuàng)新和發(fā)展

來源：程序員人生發(fā)布時間：2014-09-18 07:57:18 閱讀次數(shù)：3010次

【CSDN現(xiàn)場報道】第六屆中國云計算大會于2014年5月20-23日在北京國家會議中心拉開帷幕。本次會議以技術(shù)、應(yīng)用、創(chuàng)新、標準、國際交流為方向，共設(shè)置了近20個分論壇，特邀了十大院士與百余位企業(yè)一線實踐者，共同技術(shù)把脈云計算及大數(shù)據(jù)發(fā)展趨勢，深入探討云計算大數(shù)據(jù)在生產(chǎn)環(huán)境中的核心技術(shù)、實踐經(jīng)驗、革新方向與國際標準等。

2014年5月23日，第六屆中國云計算大會“云計算核心技術(shù)架構(gòu)論壇”如期召開，杭州華三通信云計算業(yè)務(wù)部總監(jiān)吳健，百度基礎(chǔ)架構(gòu)部高級總監(jiān)劉煬，網(wǎng)宿云分發(fā)平臺高級架構(gòu)師劉瑜，微軟亞太研發(fā)集團中國云計算創(chuàng)新中心資深總監(jiān)王楓，北京航空航天大學(xué)計算機學(xué)院中德聯(lián)合軟件研究所副所長兼總工劉軼，中國移動研究院云計算系統(tǒng)部技術(shù)經(jīng)理、高級工程師張志宏，華中科技大學(xué)計算機學(xué)院副院長、武漢光電國家實驗室信息存儲與光顯示功能實驗室主任馮丹，搜狐PaaS云平臺架構(gòu)師張宇欣，IBM大中華地區(qū)云計算架構(gòu)師技術(shù)負責人王攀，亞馬遜AWS首席云技術(shù)顧問方國偉，UnitedStack公司創(chuàng)始人&CEO程輝出席了本個分論壇并就云計算核心技術(shù)架構(gòu)做了深度分享。

主持人：網(wǎng)易杭州研究院副院長汪源 & 人氣爆棚的現(xiàn)場

云計算核心技術(shù)架構(gòu)論壇在網(wǎng)易杭州研究院副院長汪源的主持下開啟，汪源首先介紹了本論壇參與分享的嘉賓。

上午場：09:05-11:05

杭州華三通信云計算業(yè)務(wù)部總監(jiān) 吳健

首先進行分享的是杭州華三通信云計算業(yè)務(wù)部總監(jiān)吳健，他的演講主題是“云網(wǎng)融合新架構(gòu)”。他首先分享了從虛擬化到云架構(gòu)的演變，分別實現(xiàn)了自動化流程、融合架構(gòu)、自服務(wù)等功能。

吳健還表示，在使用了OpenStack的模塊化架構(gòu)后，整個云的擴展性得到了巨大的提升，其中VM規(guī)模>100萬，Server>20000臺，多租戶虛擬網(wǎng)絡(luò)>16M用戶。隨后他結(jié)合了H3C的實踐經(jīng)驗，分享了全虛擬化、全融合后帶來的優(yōu)勢：軟件定義網(wǎng)絡(luò)可面向應(yīng)用進行網(wǎng)絡(luò)訪問策略的靈活控制；軟件定義存儲采用標準化硬件，通過分布式控制架構(gòu)，極大提升存儲的可靠性、擴展性、易用性；H3C全虛擬化、全融合架構(gòu)，可實現(xiàn)存儲與計算虛擬化融合，服務(wù)器即是計算，也是存儲，按需擴展。

百度基礎(chǔ)架構(gòu)部高級總監(jiān) 劉煬

百度基礎(chǔ)架構(gòu)部高級總監(jiān)劉煬分享了名為“百度云計算架構(gòu)”的主題。大數(shù)據(jù)時代，百度的基礎(chǔ)架構(gòu)需要應(yīng)對過20億用戶帶來的挑戰(zhàn)。在容量上，總計近千PB，每日新增800TB，每日處理50PB；時效性上，峰值實時數(shù)據(jù)處理能力50GB/s，毫秒-秒級響應(yīng)時間。多樣性：內(nèi)容上有網(wǎng)頁、廣告、日志、UGC；類型上有文本、圖片、視頻；形式上有結(jié)構(gòu)化、半結(jié)構(gòu)化、非結(jié)構(gòu)化。

在基礎(chǔ)設(shè)施建設(shè)&創(chuàng)新章節(jié)，劉煬提到，百度是國內(nèi)首個整機柜部署的公司，高效部署，提升交付效率10倍；訂制服務(wù)器，可以明顯的降低TCO，異構(gòu)服務(wù)器每瓦特的計算能力提升34倍；同時，百度還是業(yè)內(nèi)最大的大規(guī)模部署自研萬兆交換機，接入成本下降83%。在ARM應(yīng)用上，百度是全球首個 ARM架構(gòu)服務(wù)器端規(guī)模化應(yīng)用，存儲密度提升70%。在SSD使用上，百度還是全球首家客戶自主研發(fā)及規(guī)模應(yīng)用，相對傳統(tǒng)PCIE Flash性能提升3倍，成本降低50%。期間，劉煬還分享了百度在能源節(jié)省上做的努力――年均PUE 1.32，最佳PUE 1.16。

宿云分發(fā)平臺高級架構(gòu)師劉瑜

網(wǎng)宿云分發(fā)平臺高級架構(gòu)師劉瑜帶來了名為“構(gòu)建開放的智能云分發(fā)平臺”的主題演講，他首先分享了“標準通用、隨處可用”就是云這個概念，隨后他為我們詳細的分享了網(wǎng)宿的CDN平臺。

網(wǎng)宿CDN平臺云化改造主要是包括兩個部分――用云做分發(fā)和為云做分發(fā)。用云做分發(fā)包括基礎(chǔ)架構(gòu)的虛擬化、平臺和功能的模塊化、以及各模塊之間接口的標準化等。其實網(wǎng)宿之前內(nèi)部已經(jīng)有很多標準化接口，內(nèi)部的客服、運維管理人員也在使用這些標準化接口，并為這些接口提供了可視化的管理界面；而為云做分發(fā)的部分是指隨著服務(wù)的云平臺越來越多，發(fā)現(xiàn)一些內(nèi)部的標準化接口和可視化管理界面也是云平臺非常需要的，所以逐漸開放這些接口，去幫助客戶提升配置、更改、維護的效率。

隨后劉瑜更為我們分享了網(wǎng)宿CDN的DDoS防范，網(wǎng)宿云分發(fā)平臺的安全防護體系相當于是在客戶、源站、外圍建立一道堅固的保護墻，有效隱藏了源站。攻擊者只能訪問到CDN邊緣節(jié)點，無法對客戶源站進行直接攻擊。保護墻除了保護源站不受到DDos攻擊外，還屏蔽了源站可能存在的其他安全漏洞，消除了被攻擊者利用這些漏洞攻擊的隱患。

微軟亞太研發(fā)集團中國云計算創(chuàng)新中心資深總監(jiān) 王楓

微軟亞太研發(fā)集團中國云計算創(chuàng)新中心資深總監(jiān)王楓的主題演講為“微軟Windows Azure公有云平臺及最佳實踐”，Azure是一個結(jié)合了IaaS、PaaS和SaaS的公用云平臺，IaaS作為其他服務(wù)的基礎(chǔ)，提供了高可用、高擴展的保障。在可靠性上，提供99.9%-99.95%的SLA保證、為數(shù)據(jù)存儲提供本地3份拷貝和異地3份拷貝、為計算節(jié)點提供負載均衡和故障恢復(fù)、提供廣域網(wǎng)負載均衡和故障恢復(fù)、為應(yīng)用提供在線升級和版本切換。

北京航空航天大學(xué)計算機學(xué)院中德聯(lián)合軟件研究所副所長兼總工劉軼

北京航空航天大學(xué)計算機學(xué)院中德聯(lián)合軟件研究所副所長兼總工劉軼帶來的主題是“高性能計算與云計算――支撐與融合”，劉軼首先分享了高性能計算機的“十年千倍”速度增長這個態(tài)勢――性能增長高于處理器性能增長速度，其中系統(tǒng)規(guī)模持續(xù)增大；體系結(jié)構(gòu)的改進也并未停止，如近年來的異構(gòu)/混合體系結(jié)構(gòu)。隨后劉鐵還做了這樣的預(yù)測：超級計算機正在向Exa-scale邁進，預(yù)計E級系統(tǒng)在5～8年內(nèi)出現(xiàn)。

隨后他圍繞E級計算功耗、性能、可靠性、可編程性這4大挑戰(zhàn)展開了討論。在功耗上，目前最好：45GFlops/W，然而規(guī)模有限，TOP500第311位；目前TOP500排名前十機器<3.5GFlops/W，與目標相差1～2個數(shù)量級。性能，處理器向眾核方向發(fā)展，異構(gòu)/混合系統(tǒng)結(jié)構(gòu)在過去幾年中取得了較大成功，但是存在固有缺陷――可編程性較差。可靠性，預(yù)計E級系統(tǒng)規(guī)模節(jié)點個數(shù)會在1萬到10萬臺服務(wù)器，10PF規(guī)模系統(tǒng)的MTBF平均無故障工作時間≈5小時，現(xiàn)有的Checkpoint軟件故障恢復(fù)技術(shù)也面臨挑戰(zhàn)。可編程性：算法設(shè)計，能否達到如此高的并行度；并行編程：如何表示如此高的并行度？程序調(diào)試：出錯場景如何重現(xiàn)、編程錯誤如何定位？其中，異構(gòu)/混合體系結(jié)構(gòu)將使編程問題更為復(fù)雜。

下午場：13:30-16:30

中國移動研究院云計算系統(tǒng)部技術(shù)經(jīng)理、高級工程師張志宏

中國移動研究院云計算系統(tǒng)部技術(shù)經(jīng)理、高級工程師張志宏發(fā)表名為“電信運營商云計算技術(shù)用”的專題演講，他認為全球云計算已進入成熟期。國外，AWS、RackSpace、GAE、Azure等競爭激烈。國內(nèi)云計算商業(yè)部署全面啟動，阿里云、青云、中國聯(lián)通、中國電信、中國移動等百花齊放。隨后，張志宏還介紹了中國移動的部署實踐：

“云-管-端”模式下，中國移動構(gòu)建私有云和公有云承載海量信息的存儲和處理。其中，私有云實現(xiàn)業(yè)務(wù)系統(tǒng)、支撐系統(tǒng)和網(wǎng)元設(shè)備的云化，提升大數(shù)據(jù)處理能力，助力實現(xiàn)IT集中化管理；公眾云服務(wù)構(gòu)建云服務(wù)開放平臺，服務(wù)行業(yè)云應(yīng)用，打造云開放生態(tài)環(huán)境。

移動私有云。中國移動在天津和南方基地分別建設(shè)規(guī)模為2000臺服務(wù)器和2100臺服務(wù)器的資源池，構(gòu)成企業(yè)一級私有云；安徽、福建、江西等省公司開展省級資源池和大數(shù)據(jù)平臺的建設(shè)。

公眾服務(wù)云。中國移動在南方基地建設(shè)規(guī)模為1000臺服務(wù)器和3PB存儲的公眾服務(wù)云平臺；中國移動推出個人云服務(wù)“飛信+”；在湖北公司上線國家教育云平臺；支持福建、天津等政務(wù)云應(yīng)用。

華中科技大學(xué)計算機學(xué)院副院長、武漢光電國家實驗室信息存儲與光顯示功能實驗室主任馮丹

華中科技大學(xué)計算機學(xué)院副院長、武漢光電國家實驗室信息存儲與光顯示功能實驗室主任馮丹的專題演講為“云存儲平臺軟件及關(guān)鍵技術(shù)”，馮丹首先為我們分享了當下數(shù)據(jù)存儲所面臨的挑戰(zhàn)：07年的EB，10年的ZB，每18個月翻一番，呈指數(shù)增長；數(shù)據(jù)到達率日益變高；數(shù)據(jù)的種類日益變多；數(shù)據(jù)的價值高；數(shù)據(jù)負載波動大。

隨后，馮丹分享了當下Hadoop在大數(shù)據(jù)領(lǐng)域所遭受的挑戰(zhàn)：Hadoop并不能完全保證數(shù)據(jù)的本地化。Hadoop對于IO膨脹性應(yīng)用支持較差，對小文件支持較差。僅對MR類型的應(yīng)用有較好的支持，MR不能適用所有類型大數(shù)據(jù)應(yīng)用。HDFS不適合低延遲數(shù)據(jù)訪問、不支持多用戶寫入及任意修改文件。

最后，她還就云存儲之分布式文件系統(tǒng)相關(guān)研究、分布式對象存儲系統(tǒng)CapFS兩個方面進行了詳細分享。其中，CapFS的幾個指標為：可擴展至10PB、支持62.5GB/s聚合帶寬，支持5250個并發(fā)訪問、文件總數(shù)達到十億量級（109）、支持單個目錄下文件數(shù)量達到百萬（106）以上、支持每秒105個元數(shù)據(jù)處理操作。

搜狐PaaS云平臺架構(gòu)師張宇欣

搜狐PaaS云平臺架構(gòu)師張宇欣的專題演講為“搜狐云計算PaaS平臺核心架構(gòu)設(shè)計的迭代”，其中第一版和第二版之間的變化無疑是最大的，棄用進程級PaaS，跳出沙箱+jdk這個坑，轉(zhuǎn)而使用Container，并直接運行在物理服務(wù)器上，跳出虛擬化30%損失這個坑，支持腳本集成。

在第三版中，更多的需求被提了出來――越來越多的系統(tǒng)集成需求，越來越復(fù)雜的流程變化的需求，越來越特別的調(diào)度需求，替代現(xiàn)有組件的需求、大量擴展開發(fā)需求，網(wǎng)絡(luò)的安全性。為此搜狐團隊使用消息中間件代替REST，shell和cli的基礎(chǔ)上添加了API等。

最后，張宇欣引用了Adam Smith的觀點“分工可以極大提高勞動生產(chǎn)率，每個人都專門從事他最有優(yōu)勢的產(chǎn)品的生產(chǎn)，然后彼此進行交換，則對每個人都有益”，他強調(diào)，對于用戶來說，我們一直在保證用戶的資料安全，而對于我們來說迭代更是通過自動化解放生產(chǎn)力的一個過程。

IBM大中華地區(qū)云計算架構(gòu)師技術(shù)負責人王攀

IBM大中華地區(qū)云計算架構(gòu)師技術(shù)負責人王攀帶了名為“IBM如何構(gòu)建動態(tài)混合云”的專題演講。王攀首先分享了公有云、私有云和動態(tài)混合云的好處：公有云，低成本門檻、按使用收費、高彈性；私有云，全部客戶化、健壯的管理、安全性設(shè)計；動態(tài)混合云，最大化現(xiàn)有IT的投資回報、讓業(yè)務(wù)負載有最適合的基礎(chǔ)架構(gòu)進行支撐、在速度與風險間完美平衡、在不增加資產(chǎn)投資的情況下滿足周期性容量需求及快速擴展計算能力。他表示應(yīng)用核心部分的擔心和負載的突發(fā)性增長，決定了混合云才是發(fā)展的趨勢。

當然，還可能存在這樣的情況，云平臺全部自建，部分平臺或閑置資源可租給外部用戶使。王攀表示，全球前10萬企業(yè)使用最多的云就是Softlayer。當下，Softlayer全球已經(jīng)有13+1個數(shù)據(jù)中心，將近20萬服務(wù)器，遍布在美國歐洲亞洲19網(wǎng)絡(luò)節(jié)點。同時，他還表示，區(qū)別于其他供應(yīng)商，Softlayer存儲API的Get和Put請求是不收費的。

亞馬遜AWS首席云技術(shù)顧問方國偉

亞馬遜AWS首席云技術(shù)顧問方國偉的演講專題為“如何在AWS云平臺上構(gòu)建千萬級用戶應(yīng)用”，他表示彈性的確是云計算的一個重要特性，AWS云平臺也提供Auto Scaling功能來幫助用戶實現(xiàn)彈性伸縮；但是，應(yīng)用服務(wù)的彈性伸縮需要良好的設(shè)計，包括應(yīng)用的架構(gòu)、使用的服務(wù)類型。

隨后，方國偉以典型的Web應(yīng)用為例，分享了基于云的應(yīng)用架構(gòu)經(jīng)驗。期間方國偉分享了多個基于云的應(yīng)用擴展性設(shè)計經(jīng)驗，比如采用多種不同的緩存技術(shù)和服務(wù)、綜合使用SQL和NoSQL數(shù)據(jù)庫、盡量自動化管理你的基礎(chǔ)設(shè)施等。

在綜合使用SQL和NoSQL數(shù)據(jù)庫章節(jié)，他建議大部分應(yīng)用從SQL開始，因為SQL相對成熟，優(yōu)缺點都比較明確；現(xiàn)存大量工具、已有代碼，圖書資料，技能等；一開始SQL能夠滿足需求，尤其是百萬級用戶量內(nèi)的；有一些常用的擴展SQL的方法。而在什么時候要考慮使用NoSQL，他分享了下列場景：短期內(nèi)增長大量數(shù)據(jù)，比如一年5TB以上；應(yīng)用要求非常低的延時；非關(guān)系型數(shù)據(jù)，非結(jié)構(gòu)化數(shù)據(jù)和半結(jié)構(gòu)化數(shù)據(jù)；快速的數(shù)據(jù)寫入，比如每秒幾千個記錄。