【杭州網站設計】用微服務器處理海量數據——你敢嘗試嗎?
分享 2011.06.21 瀏覽次數:7289次
近日,提供在線網上聊天服務的eHarmony公司采購了一批內置Intel Atom處理器的SeaMicro服務器,用它們來運行基于Hadoop結構分布式計算服務。
如果是在幾年前,eHarmony在服務器上采用Atom處理器的行為無異于自殺,畢竟Atom的性能實在有限,況且業(yè)界也并沒有一個完整的微處理器解決方案。但是現在SeaMicro和Calxeda(主要采用ARM處理器的微服務器)廠商所開發(fā)的服務器,已經能夠大大降低建造成本,并能節(jié)省能源。
不過業(yè)界普遍認為,如何滿足應用程序和大客戶的需要是這些微服務器普及之前首先需要解決的問題。而對于大數據處理來說,類似Atom這樣的處理器則需要將以上兩個問題都解決——
Calxeda:采用ARM原因在于沒有歷史負擔
雖然Calxeda公司所生產的ARM架構微型服務器在處理器結構上與SeaMicro公司的X86架構微型服務器存在很大不同,但Evans所總結的前兩個優(yōu)勢同樣適用于SeaMicro的X86架構產品。
Calxeda公司CEO Barry Evans表示,“對于海量數據來說,有三個關鍵因素說明ARM架構服務器將是非常適合的。首先,海量數據的處理本身就具有向外擴展的特性,需要眾多高效處理器來進行處理。其次,海量數據處理作為一個新興的市場,其所要面對的歷史遺留問題很少。最后,目前針對這一領域的軟件對ARM架構的支持程度很好。”
Hadoop on microservers
Hadoop作為一種分布式計算結構,對于很多公司和組織來講都是一個全新的領域,而他們大多沒有專門應對這一應用的硬件。分布式計算需要眾多的scale out擴展結構來提升整個系統(tǒng)的并行處理能力。而對于分布式計算的每個節(jié)點,Hadoop并不要求其性能能夠與高功耗、高性能的專用處理器相媲美,相反,其對性能的要求是非常低的。而微型服務器則能夠憑借眾多的物力核心和相對較小的體積來很好的滿足Hadoop計算的需求。
Atom節(jié)點最低功耗僅5瓦
SeaMicro的微型服務器可以在10U機架的體積內提供512個Intel Atom核心并產生1.28TB/s的計算能力,而相對于傳統(tǒng)服務器來說,其能耗卻降低了75%。而Calxeda公司的微型服務器產品則可以在2U的體積內提供120個4核心ARM Cortex A9架構處理器,而每個處理器節(jié)點的功耗只有5瓦。知名記者Stacey Higginbotham在談論Calxeda計劃時表示,“Intel和AMD基于x86架構的四核心處理器功耗在80至130瓦之間,節(jié)能版本的x86芯片也有30瓦的功耗。對于堅持使用傳統(tǒng)服務器芯片的用戶可考慮Dell公司銷售的cloudscale微服務器,它采用Intel Xeon處理器,功耗為30瓦。
Evans的理論和eHarmony公司的實例都證明,微型服務器對于Hadoop這種大數據計算來說卻是非常合適。而在使用微型服務器之前,eHarmony公司也曾使用云服務來滿足其需要,不過他們發(fā)現,當他們進行大量并行計算并與云服務其交換大量數據時,這一方法就會變得非常昂貴。而作為一家之前沒有任何服務器硬件投資的公司來說,eHarmony公司可以很輕易的轉投至微型服務器架構中。Data Center Knowledge的Rich Miller也表示“微型服務器可以為CTO每月減少數萬美元的運營費用,使成本降低74%。”
由于在eHarmony案例上的成功,我們可能很快就會看到像SeaMicro和Calxeda這樣的公司與Cloudera(目前最大的分布式計算軟件提供商)達成OEM協議。當然,隨著微型服務器在這一領域的迎頭趕上,我們也很有可能看到軟硬件一體化解決方案的提供商。
微服務器的未來
可以看到,微服務器的倡導者之所以如此樂觀,主要是受到了近年來互聯網和云計算市場蓬勃發(fā)展的影響。像Facebook的技術主管就表示,該公司并不準備融入 服務器虛擬化的潮流,而是希望將微服務器作為一種廉價增長和快速故障轉移方式。目前,Facebook已經測試了微服務器,并且有意將其用于大規(guī)模的數據 中心。
有數據顯示,Facebook在2010年6月時,其服務器數量超過了6萬臺,而2008年4月為1萬臺,即使到了2009年底也才是3萬多臺。而等今年俄勒岡數據中心開放后,Facebook的服務器數量將接近10萬臺。
Facebook或許是一個特殊的例子,但它確實代表了高速發(fā)展的新興互聯網企業(yè)的一種趨勢。未來,當新興互聯網業(yè)務和云計算需求徹底被喚醒的時候,或許才是微服務器真正的春天。
最新的消息是,在未來的幾天內,包括美國麻省理工學院著名教授Anant Agarwal, 同時也是Tilera公司的創(chuàng)始人和CTO。以及惠普實驗室的Partha Ranganathan將開始深入討論新一代的分布式體系結構,而此次會議的目的也主要在于探討將將大量低功耗處理器壓縮為小規(guī)模處理器的概念,以獲得在外部具有海量數據的應用程序(主要是網絡應用)。
杭州網站建設公司 杭州網站設計公司 杭州網站建設 杭州網站設計 杭州精典網站建設 杭州精典網站設計
-
杭州網站設計公司:品牌網站開發(fā)助力企業(yè)成長
日期:2024-12-20瀏覽次數:356次
-
杭州網站建設公司:商城網站建設的六大關鍵步驟
日期:2024-12-18瀏覽次數:451次
-
杭州網站制作:醫(yī)院網站設計與域名備案的復雜性探討
日期:2024-12-18瀏覽次數:462次
-
杭州網站制作公司:打造安全可靠的醫(yī)院網站
日期:2024-12-11瀏覽次數:704次
-
杭州網站設計公司:數據庫在高端網站制作中的關鍵作用
日期:2024-12-11瀏覽次數:674次
相關新聞
整合同類新聞,相關新聞一手掌握
-
蕪湖網站建設公司哪家比較好?
日期:2023-02-08瀏覽次數:1689次
-
如何應對直播類蕪湖app開發(fā)問題?
日期:2021-02-05瀏覽次數:2015次
-
蕪湖app開發(fā)之物流app是否有必要?
日期:2021-02-05瀏覽次數:2028次
-
蕪湖網頁設計:作為優(yōu)秀的網站設計者要做好什么事情
日期:2020-09-11瀏覽次數:2124次
-
蕪湖網站制作:如何定位新聞類網站設計風格
日期:2020-09-11瀏覽次數:1973次
最新新聞
與互聯網同行,實時掌握網建行業(yè)最新動態(tài)
-
對于企業(yè)發(fā)展來說,網站建設有什么優(yōu)勢?
日期:2020-02-19瀏覽次數:4398次
-
杭州直播app開發(fā),讓分享生活更簡單
日期:2020-12-24瀏覽次數:4350次
-
杭州網站營銷推廣三大費用
日期:2021-02-06瀏覽次數:4050次
-
如何進行軟文的杭州營銷推廣?
日期:2021-08-06瀏覽次數:3973次
-
入門杭州網站建設時應該知道的20件事
日期:2021-11-04瀏覽次數:3536次
隨機新聞
新聞新動態(tài),您需要的新聞管家
洞悉市場趨勢演變讓傳播回歸社會
免費獲取網站建設與網絡推廣方案報價
-
關于我們
杭州帷拓科技有限公司,是一家新型的全案網絡開發(fā)公司,作為以互聯網高端網站建設、APP開發(fā)、小程序開發(fā)為核心的專業(yè)網絡技術服務供應商,帷拓科技致力于全面分析市場環(huán)境、衡量與預測市場需求、整合區(qū)別于行業(yè)競爭對手的絕對優(yōu)勢,結合品牌理念深度挖掘項目優(yōu)勢和產品價值,提升客戶品牌認知、認可度。
-
我們的客戶
帷拓科技歷經十年沉淀,與國內外上千家客戶達成合作關系,其中穩(wěn)定合作的公司有:浙江華為、浙江移動、浙江5G產業(yè)聯盟、浙江省社科院、綠城足球俱樂部、娃哈哈雙語學校、健康中國杭州峰會、科雷機電等,帷拓科技始終堅持“帷有專業(yè),才能拓展無限”的服務理念,堅持“認真堅持細節(jié)”的優(yōu)質服務理念,不斷完善自身,成就企業(yè),最終實現共贏。
-
我們的業(yè)務
帷拓科技主營業(yè)務范圍包含互聯網高端網站建設、APP開發(fā)、小程序開發(fā)、商城網站建設、公眾號運營以及數字營銷等,涵蓋了服務、房產、數碼、服裝、物流貿易等行業(yè),根據品牌現狀,為每個客戶量身定制項目整體服務方案,以敏銳的市場洞察力、創(chuàng)新的市場策劃能力,全面把握市場變化,為客戶實現從企業(yè)到消費者的價值轉換。