北(bei)京2015年8月25日電 /美通社/ -- 企(qi)業級基(ji)礎云(yun)服務(wu)商青云(yun)QingCloud日前宣布,Spark服務(wu)作為QingCloud大數(shu)據基(ji)礎平臺的(de)重(zhong)要組(zu)件現已正式上(shang)線。通過QingCloud Spark服務(wu),用戶(hu)能夠(gou)在(zai)2-3分鐘內創建一個Spark集群(qun),并支持橫向和縱向的(de)在(zai)線伸縮,提供(gong)豐富的(de)監控(kong)告警(jing)服務(wu),極(ji)大地簡化了大數(shu)據集群(qun)的(de)運維和管理,讓用戶(hu)從繁(fan)重(zhong)的(de)運維工作中解脫(tuo)出(chu)來,投入(ru)到(dao)業務(wu)創新中。
數據(ju)是(shi)新(xin)一代的(de)(de)自然(ran)資源(yuan),是(shi)判別企(qi)(qi)業競爭力的(de)(de)試(shi)金石。然(ran)而(er),隨著數據(ju)量的(de)(de)爆炸(zha)式(shi)增長、數據(ju)來源(yuan)和(he)(he)結(jie)構的(de)(de)多樣(yang)化,傳統IT基(ji)礎架(jia)構已無法滿足企(qi)(qi)業對(dui)數據(ju)處理的(de)(de)需求(qiu),Hadoop、Spark等支持(chi)PB級別數據(ju)的(de)(de)分布式(shi)存儲(chu)和(he)(he)分布式(shi)計算框架(jia)應(ying)運(yun)而(er)生。
青(qing)云QingCloud系統工程師&大數據(ju)基礎平臺負責人周小四(si)(Ray Zhou)表示,基礎架(jia)(jia)構(gou)(gou)是大數據(ju)應用的(de)(de)基石(shi),如果沒有底層數據(ju)架(jia)(jia)構(gou)(gou)的(de)(de)支持,大數據(ju)就(jiu)是紙上(shang)(shang)談兵。此(ci)次推出的(de)(de)Spark服務就(jiu)是基于QingCloud穩定高效、資源秒級響應、彈性可伸縮的(de)(de)IaaS之上(shang)(shang),能夠較(jiao)大限(xian)度(du)地(di)發(fa)揮Spark輕(qing)巧、靈活和快速的(de)(de)優勢。
Spark 是(shi)繼Hadoop之后新(xin)一(yi)代的(de)大數據分布(bu)式(shi)處理平(ping)臺。它(ta)是(shi)一(yi)個(ge)基(ji)于內存的(de)、容錯(cuo)型的(de)分布(bu)式(shi)計(ji)算(suan)(suan)引擎。與(yu)Hadoop MapReduce相比,Spark的(de)計(ji)算(suan)(suan)速度要快100倍(bei)。即便同樣(yang)采(cai)用(yong)硬(ying)盤計(ji)算(suan)(suan),Spark也比MapReduce快10倍(bei)。Spark卓(zhuo)越的(de)用(yong)戶(hu)體驗以(yi)及統一(yi)的(de)技術堆棧基(ji)本上解決了大數據領域所有核心問(wen)題,使得(de)Spark迅速成(cheng)為當前(qian)最為熱門的(de)大數據基(ji)礎(chu)平(ping)臺。
Spark 提(ti)供(gong)了(le)(le)多語言支持,如Scala、Python、Java、R等,支持交互式操作。它(ta)在(zai)RDD(Resilient Distributed Datasets,一個容錯(cuo)的、并(bing)行(xing)的數據結構(gou)) 基礎之上(shang)提(ti)供(gong)了(le)(le)Spark Streaming流式計(ji)算,結構(gou)化數據處理(li)組件Spark SQL,機器(qi)學習庫(ku) MLlib 以及圖計(ji)算GraphX等功能。
具體而言,青云QingCloud提供的Spark服(fu)務有如下特征(zheng):
青云(yun)QingCloud CEO 黃(huang)允松(Richard Huang)表示,Spark服務(wu)的發布(bu)標志著QingCloud完整(zheng)(zheng)的大(da)(da)數(shu)據(ju)(ju)(ju)基(ji)礎平臺已初步建立,接下來(lai)QingCloud還會(hui)陸(lu)續(xu)發布(bu)一(yi)系列大(da)(da)數(shu)據(ju)(ju)(ju)相關服務(wu),如Hadoop、Cassandra、Hive、HBase和(he)Storm等。未來(lai),大(da)(da)數(shu)據(ju)(ju)(ju)、數(shu)據(ju)(ju)(ju)庫、緩存和(he)對(dui)象存儲(chu)將同IaaS組件一(yi)起構成QingCloud完整(zheng)(zheng)的數(shu)據(ju)(ju)(ju)產品生(sheng)態圈,提(ti)供(gong)一(yi)站式的計算、存儲(chu)和(he)數(shu)據(ju)(ju)(ju)處理服務(wu),更好地幫(bang)助用戶實現數(shu)據(ju)(ju)(ju)的價(jia)值。
圖片 -
圖標 -