免费亚洲欧美精品电影_国内精品偷拍福利视频_美女黄网站色视免费国产_国产不卡福利片在线观看

24小時咨詢電話:0571-88023217云浮網(wǎng)站建設公司 10年專業(yè)網(wǎng)絡服務供應商

資訊中心

- 直擊網(wǎng)站建設第一現(xiàn)場,掌握全球化的消息 -

當前位置 : 首頁 > 資訊中心 > 【杭州網(wǎng)站設計】高性能集群計算(HPCC)能取代Hadoop嗎?

【杭州網(wǎng)站設計】高性能集群計算(HPCC)能取代Hadoop嗎?

分享 2011.07.02 瀏覽次數(shù):8205次

 

LexisNexis公司將發(fā)布一款開源的數(shù)據(jù)處理方案,LexisNexis公司宣稱其處理工作負載的能力要優(yōu)于Hadoop。該技術(shù)被稱為HPCC系統(tǒng),該系統(tǒng)在10年前幫助LexusNexis公司的Risk Solutions分析大量的客戶數(shù)據(jù)。并在金融業(yè)和其他重要的行業(yè)中應用??磥鞨PCC(High-Performance Cluster Computing 高性能集群計算)似乎有能力成為替代Hadoop的解決方案。

據(jù)LexisNexis Risk Solutions部門CTO Armando Escalante表示,LexisNexis公司決定發(fā)布HPCC系統(tǒng),目前的狀況是Hadoop技術(shù)已經(jīng)成為處理海量數(shù)據(jù)的首選。Armando Escalante表示Hadoop雖然在海量數(shù)據(jù)處理方面走在前邊,但他認為HPCC系統(tǒng)更為優(yōu)越。

但重要的是,Hadoop的開源模式吸引了大量相關(guān)人員對其進行開發(fā)和創(chuàng)新。Armando Escalante解釋說,如果公司想要繼續(xù)保持HPCC的影響力就需要通過一個新社區(qū)提供應用和好的創(chuàng)意。

Hadoop是許多年前由當時的Yahoo員工Doug Cutting在Apache軟件基金會創(chuàng)建的項目。Hadoop現(xiàn)已成為網(wǎng)絡公司的重要工具。包括Yahoo、Facebook,并幫助他們處理不斷增長的非結(jié)構(gòu)化數(shù)據(jù)。Hadoop催生了一批用于商業(yè)的基于分布式技術(shù)的產(chǎn)品,包括Cloudera,EMC和IBM等公司。

HPCC如何工作

Hadoop依靠兩個核心組件來存儲和處理海量數(shù)據(jù)——Hadoop分布式文件系統(tǒng)和Hadoop Mapreduce。Cloudant公司CEO Mike Miller認為MapReduce在編寫并行處理工作流時依然相對復雜,HPCC旨在通過ECL(Enterprise Control Language)改善這一局面。

Escalante表示ECL是一種聲明式并以數(shù)據(jù)為中心的語言,它剝離了大量MapReduce必要的工作。對于某些千行代碼的MapReduce任務ECL只需要99行。此外,他還表示ECL對集群中節(jié)點的數(shù)量沒有要求,系統(tǒng)會自動將數(shù)據(jù)分布式的存放在當前節(jié)點之中。從技術(shù)上講,HPCC還可以運行在單一的虛擬機上。HPCC基于C++,如同Google最早的Mapreduce,這使得HPCC天生在效率上就優(yōu)于基于Java開發(fā)的Hadoop。

HPCC提供兩種數(shù)據(jù)處理和服務的方式——Thor Data Refinery Cluster和Roxy Rapid Data Delivery Cluster。Escalante表示如此命名是因為其能像Thor(北歐神話中司雷、戰(zhàn)爭及農(nóng)業(yè)的神)一樣解決困難的問題,Thor主要用來分析和索引大量的Hadoop數(shù)據(jù)。而Roxy則更像一個傳統(tǒng)的關(guān)系型數(shù)據(jù)庫或數(shù)據(jù)倉庫,甚至還可以處理Web前端的服務。

雖然沒有深入探討HPCC存儲組件的細節(jié),但Escalante表示HPCC基于分布式文件系統(tǒng),并可支持各種off-node存儲架構(gòu)和本地的SSD。

Escalante認為為了確保LexisNexis產(chǎn)品質(zhì)量,應采用“eating its own dogfood”(指軟件公司強調(diào)自己的軟件產(chǎn)品首先應內(nèi)部使用,如果希望顧客購買公司的產(chǎn)品,公司內(nèi)部也應該愿意使用它們)做法。HPCC開發(fā)團隊還聘請了Hadoop專家?guī)椭鷻z驗其產(chǎn)品是否有問題疏漏。HPCC還構(gòu)建了一個轉(zhuǎn)換器,用于遷移Hadoop Pig編寫的應用并轉(zhuǎn)換為ECL。

HPCC具有競爭力嗎?

一個關(guān)鍵的問題是HPCC是否能吸引到業(yè)界的構(gòu)建者和用戶,這將有助于提升其在海量數(shù)據(jù)領域的話語權(quán)。Escalante認為HPCC能夠成功,因為HPCC已經(jīng)證明了自己,它已處理LexisNexis Risk Solutions的35000個數(shù)據(jù)源。同時HPCC還可以每秒處理5000次的和支付客戶打交道的交易事物。

Hadoop已經(jīng)證明了自己,其潛在的巨大核心業(yè)務每天都在增長,現(xiàn)在企業(yè)和組織在海量數(shù)據(jù)上依托于Hadoop。但Hadoop并不滿足這些成就。這使得微軟也在海量數(shù)據(jù)的競爭中推出了自己的分布式計算技術(shù)Dryad。(李智/譯)

原文鏈接:GIGAOM

杭州網(wǎng)站設計公司 杭州網(wǎng)站建設公司 杭州網(wǎng)站制作公司 杭州網(wǎng)站設計 杭州網(wǎng)站建設 杭州網(wǎng)站制作  杭州精品網(wǎng)站制作 杭州精典網(wǎng)站制作

最新網(wǎng)站案例

洞悉市場趨勢演變讓傳播回歸社會

    免費獲取網(wǎng)站建設與網(wǎng)絡推廣方案報價

    • 關(guān)于我們

      杭州帷拓科技有限公司,是一家新型的全案網(wǎng)絡開發(fā)公司,作為以互聯(lián)網(wǎng)高端網(wǎng)站建設、APP開發(fā)、小程序開發(fā)為核心的專業(yè)網(wǎng)絡技術(shù)服務供應商,帷拓科技致力于全面分析市場環(huán)境、衡量與預測市場需求、整合區(qū)別于行業(yè)競爭對手的絕對優(yōu)勢,結(jié)合品牌理念深度挖掘項目優(yōu)勢和產(chǎn)品價值,提升客戶品牌認知、認可度。

    • 我們的客戶

      帷拓科技歷經(jīng)十年沉淀,與國內(nèi)外上千家客戶達成合作關(guān)系,其中穩(wěn)定合作的公司有:浙江華為、浙江移動、浙江5G產(chǎn)業(yè)聯(lián)盟、浙江省社科院、綠城足球俱樂部、娃哈哈雙語學校、健康中國杭州峰會、科雷機電等,帷拓科技始終堅持“帷有專業(yè),才能拓展無限”的服務理念,堅持“認真堅持細節(jié)”的優(yōu)質(zhì)服務理念,不斷完善自身,成就企業(yè),最終實現(xiàn)共贏。

    • 我們的業(yè)務

      帷拓科技主營業(yè)務范圍包含互聯(lián)網(wǎng)高端網(wǎng)站建設、APP開發(fā)、小程序開發(fā)、商城網(wǎng)站建設、公眾號運營以及數(shù)字營銷等,涵蓋了服務、房產(chǎn)、數(shù)碼、服裝、物流貿(mào)易等行業(yè),根據(jù)品牌現(xiàn)狀,為每個客戶量身定制項目整體服務方案,以敏銳的市場洞察力、創(chuàng)新的市場策劃能力,全面把握市場變化,為客戶實現(xiàn)從企業(yè)到消費者的價值轉(zhuǎn)換。

    Designerpart Designagentur
    Designerpart Designagentur
    Designerpart Designagentur
    Designerpart Designagentur
    Designerpart Designagentur
    Designerpart Designagentur