Hadoop開(kāi)源社區(qū)宣布支持騰訊云對(duì)象存儲(chǔ)COS

來(lái)源:百家號(hào)
作者:環(huán)球網(wǎng)
時(shí)間:2020-08-06
2476
知名大數(shù)據(jù)開(kāi)源社區(qū)Hadoop近日宣布對(duì)騰訊云對(duì)象存儲(chǔ)COS的正式支持。后續(xù),開(kāi)發(fā)者在基于Hadoop架構(gòu)進(jìn)行大數(shù)據(jù)分析時(shí),能夠在不修改代碼的情況下,無(wú)縫高效地使用騰訊云COS來(lái)處理海量數(shù)據(jù)的讀寫(xiě)任務(wù)。

ZjUwNmY0Yi5qcGVn.jpg

8月5日消息,知名大數(shù)據(jù)開(kāi)源社區(qū)Hadoop近日宣布對(duì)騰訊云對(duì)象存儲(chǔ)COS的正式支持。后續(xù),開(kāi)發(fā)者在基于Hadoop架構(gòu)進(jìn)行大數(shù)據(jù)分析時(shí),能夠在不修改代碼的情況下,無(wú)縫高效地使用騰訊云COS來(lái)處理海量數(shù)據(jù)的讀寫(xiě)任務(wù)。

大數(shù)據(jù)分析需要花費(fèi)大量的計(jì)算和存儲(chǔ)資源。在傳統(tǒng)模式下,計(jì)算與存儲(chǔ)資源耦合度較高,一旦資源不夠,就需要對(duì)二者同時(shí)進(jìn)行擴(kuò)容。近年來(lái),在云計(jì)算的推動(dòng)下,開(kāi)發(fā)者逐漸開(kāi)始采用云上對(duì)象存儲(chǔ),來(lái)實(shí)現(xiàn)計(jì)算與存儲(chǔ)的分離,進(jìn)而提升資源的靈活性,并降低成本。

Hadoop是目前應(yīng)用最為廣泛的分布式大數(shù)據(jù)處理框架,也是大數(shù)據(jù)處理領(lǐng)域事實(shí)上的標(biāo)準(zhǔn)。在數(shù)據(jù)價(jià)值越來(lái)越被重視的時(shí)代,Hadoop也在互聯(lián)網(wǎng)、政務(wù)、金融等行業(yè)中被廣泛使用。

騰訊云對(duì)象存儲(chǔ)COS是一種具備安全穩(wěn)定、海量、便捷、低延遲、低成本等特點(diǎn)的云端分布式存儲(chǔ)服務(wù),其底層采用騰訊自研存儲(chǔ)引擎YottaStore,能夠?qū)崿F(xiàn)單集群理論管理百萬(wàn)級(jí)節(jié)點(diǎn),并且做到真正的按需擴(kuò)容,磁盤(pán)利用率達(dá)到90%以上。

Hadoop社區(qū)支持騰訊云對(duì)象存儲(chǔ)以后,開(kāi)發(fā)者在基于Hadoop架構(gòu)進(jìn)行大數(shù)據(jù)分析時(shí),能夠無(wú)縫使用到騰訊云對(duì)象存儲(chǔ)COS提供的高速云存儲(chǔ)服務(wù)。

“開(kāi)發(fā)者在騰訊云上可以使用彈性MapReduce(EMR)計(jì)算,并直接使用騰訊云對(duì)象存儲(chǔ)COS作為后端存儲(chǔ),整個(gè)過(guò)程都不需要額外添加代碼,更加方便和快捷?!彬v訊云對(duì)象存儲(chǔ)負(fù)責(zé)人介紹。

目前,小紅書(shū)、獵豹移動(dòng)、珍愛(ài)網(wǎng)等就使用了騰訊云“EMR on COS”的計(jì)算與存儲(chǔ)分離模式,快速構(gòu)建和部署大數(shù)據(jù)分析程序,有效地滿(mǎn)足了大數(shù)據(jù)業(yè)務(wù)需求。

立即登錄,閱讀全文
原文鏈接:點(diǎn)擊前往 >
版權(quán)說(shuō)明:本文內(nèi)容來(lái)自于百家號(hào),本站不擁有所有權(quán),不承擔(dān)相關(guān)法律責(zé)任。文章內(nèi)容系作者個(gè)人觀點(diǎn),不代表快出海對(duì)觀點(diǎn)贊同或支持。如有侵權(quán),請(qǐng)聯(lián)系管理員(zzx@kchuhai.com)刪除!
相關(guān)文章
騰訊云數(shù)據(jù)庫(kù)PostgreSQL全面支持PG 17
騰訊云數(shù)據(jù)庫(kù)PostgreSQL全面支持PG 17
即日起,騰訊云PostgreSQL全面支持PostgreSQL 17.0。所有用戶(hù)可使用大版本升級(jí)能力升級(jí)至最新的PostgreSQL 17.0進(jìn)行體驗(yàn),也可以在產(chǎn)品購(gòu)買(mǎi)頁(yè)直接購(gòu)買(mǎi)。
騰訊云
云服務(wù)
2024-12-15
高可用這個(gè)問(wèn)題,加機(jī)器就能解決?
高可用這個(gè)問(wèn)題,加機(jī)器就能解決?
互聯(lián)網(wǎng)服務(wù)的可用性問(wèn)題是困擾企業(yè)IT人員的達(dá)摩克利斯之劍:防于未然,體現(xiàn)不出價(jià)值。已然發(fā)生,又面臨P0危機(jī)。就更別提穩(wěn)定性建設(shè)背后顯性的IT預(yù)算問(wèn)題與隱性的人員成本問(wèn)題。
騰訊云
云服務(wù)
2024-11-25
TDSQL TDStore引擎版替換HBase:在歷史庫(kù)場(chǎng)景中的成本與性能優(yōu)勢(shì)
TDSQL TDStore引擎版替換HBase:在歷史庫(kù)場(chǎng)景中的成本與性能優(yōu)勢(shì)
HBase憑借其高可用性、高擴(kuò)展性和強(qiáng)一致性,以及在廉價(jià)PC服務(wù)器上的低部署成本,廣泛應(yīng)用于大規(guī)模數(shù)據(jù)分析。
騰訊云
云服務(wù)
2024-11-04
復(fù)雜查詢(xún)性能弱,只讀分析引擎來(lái)幫忙
復(fù)雜查詢(xún)性能弱,只讀分析引擎來(lái)幫忙
隨著當(dāng)今業(yè)務(wù)的高速發(fā)展,復(fù)雜多表關(guān)聯(lián)的場(chǎng)景越來(lái)越普遍。但基于行式存儲(chǔ)的數(shù)據(jù)庫(kù)在進(jìn)行復(fù)雜查詢(xún)時(shí)性能相對(duì)較弱。
騰訊云
云服務(wù)
2024-11-02
優(yōu)質(zhì)服務(wù)商推薦
更多
掃碼登錄
打開(kāi)掃一掃, 關(guān)注公眾號(hào)后即可登錄/注冊(cè)
加載中
二維碼已失效 請(qǐng)重試
刷新
賬號(hào)登錄/注冊(cè)
個(gè)人VIP
小程序
快出海小程序
公眾號(hào)
快出海公眾號(hào)
商務(wù)合作
商務(wù)合作
投稿采訪
投稿采訪
出海管家
出海管家