首頁 > 資訊 > > 正文

              Hadoop大數(shù)據(jù)“存算分離”,柏科數(shù)據(jù) ISCloud分布式存儲(chǔ)"提質(zhì)增效"

              2021-08-24 17:22:59    來源:財(cái)訊網(wǎng)

              數(shù)據(jù)湖的發(fā)展契機(jī),來源于年來的AI熱潮和云計(jì)算、5G的發(fā)展,在日益發(fā)展的海量數(shù)據(jù)時(shí)代,數(shù)據(jù)已成為企業(yè)發(fā)展的核心資產(chǎn),通過構(gòu)建適用于大數(shù)據(jù)的底層架構(gòu),圍繞Hadoop提供語義一致、數(shù)據(jù)治理和安全

              Hadoop作為數(shù)據(jù)湖最常用的解決方案之一,其的部署和需求仍然很大并且正在增長(zhǎng)。在最的一項(xiàng)涉及235名受訪者的調(diào)查中,34%的受訪者目前正在使用Hadoop進(jìn)行數(shù)據(jù)和分析工作,另有55%的受訪者計(jì)劃在未來24個(gè)月內(nèi)采取同樣方案,總計(jì)需求量達(dá)到89%(Gartner,2016)。

              在Hadoop大數(shù)據(jù)臺(tái)方案中,當(dāng)存儲(chǔ)空間或計(jì)算資源不足時(shí),只能同時(shí)對(duì)兩者進(jìn)行擴(kuò)容,將導(dǎo)致額外成本的增加。假設(shè)用戶對(duì)存儲(chǔ)資源的需求遠(yuǎn)大于對(duì)計(jì)算資源的需求,那么同時(shí)擴(kuò)容計(jì)算和存儲(chǔ)后,新擴(kuò)容的計(jì)算資源就被浪費(fèi)了,反之,存儲(chǔ)資源被浪費(fèi)。獨(dú)立擴(kuò)展計(jì)算或存儲(chǔ)的架構(gòu)設(shè)計(jì),被認(rèn)為是更加靈活的擴(kuò)容方式。

              因此,業(yè)內(nèi)新擴(kuò)容方式“存算分離”架構(gòu)的優(yōu)勢(shì)逐漸明顯,“存算分離”成了大數(shù)據(jù)架構(gòu)發(fā)展的必然趨勢(shì),成了解決行業(yè)用戶在使用Hadoop時(shí),面臨計(jì)算資源浪費(fèi)、存儲(chǔ)能低、管理成本過高等痛點(diǎn)的利器。最初在Hadoop1.0時(shí)代,計(jì)算和存儲(chǔ)是高度融合的,僅能處理單一的MapReduce分析業(yè)務(wù);如今已經(jīng)到了Hadoop3.0時(shí)代,計(jì)算存儲(chǔ)走向分離,通過Hadoop架構(gòu)策略,優(yōu)化了冷熱數(shù)據(jù)的存儲(chǔ)。打造了更適合企業(yè)級(jí)市場(chǎng),資源云化和靈活擴(kuò)展,能夠讓用戶享受更專業(yè)的存儲(chǔ),更佳的可靠和利用率。

              ISCloud分布式存儲(chǔ)系統(tǒng)面向海量數(shù)據(jù)場(chǎng)景,針對(duì)大數(shù)據(jù)Apache Hadoop等應(yīng)用場(chǎng)景,提供原生接口,將原生Hadoop集群從當(dāng)前計(jì)算、存儲(chǔ)一體化狀態(tài),拆分成計(jì)算和存儲(chǔ)兩個(gè)獨(dú)立集群,實(shí)現(xiàn)“存算分離”形式,充分吸納計(jì)算、存儲(chǔ)兩個(gè)產(chǎn)業(yè)的最終成果,加速釋放數(shù)據(jù)價(jià)值。

              • 提供標(biāo)準(zhǔn)接口,實(shí)現(xiàn)智能化負(fù)載均衡

              非結(jié)構(gòu)化的原始數(shù)據(jù)可以通過Sqoop、DistCp等工具直接存儲(chǔ)在ISCloud分布式存儲(chǔ)上,業(yè)務(wù)數(shù)據(jù)庫結(jié)構(gòu)化數(shù)據(jù)和應(yīng)用數(shù)據(jù)可以通過Spark、Kafka等HBase分布式數(shù)據(jù)倉及Hadoop大數(shù)據(jù)Hive倉庫內(nèi)。HBase表數(shù)據(jù)和Hive內(nèi)部表數(shù)據(jù)仍然通過HDFS來存儲(chǔ)。ISCloud分布式存儲(chǔ)在存儲(chǔ)海量非結(jié)構(gòu)化數(shù)據(jù),甚至是海量小文件的同時(shí),減輕HBase及Hive的壓力,為后續(xù)擴(kuò)容單一屬集群提供基礎(chǔ)。

              ?  協(xié)議互通特,提高數(shù)據(jù)分析效率

              ISCloud分布式存儲(chǔ)采用多種協(xié)議互通技術(shù),部署語義抽象層,面對(duì)多樣化結(jié)構(gòu)數(shù)據(jù)提供適合文件、對(duì)象、塊及大數(shù)據(jù)的原生語義,為Apache Hadoop計(jì)算層提供了標(biāo)準(zhǔn)的Hadoop文件系統(tǒng)API,支持文件、大數(shù)據(jù)接口訪問,免數(shù)據(jù)遷移,縮短分析路徑。實(shí)現(xiàn)多集群數(shù)據(jù)融合互通,提升數(shù)據(jù)共享和分析效率。

              • 降本增效,大幅降低TCO

              隨著大數(shù)據(jù)應(yīng)用的全面普及,存算分離已成為企業(yè)大數(shù)據(jù)臺(tái)建設(shè)的首選。采用全對(duì)稱分布式NameNode,集群能和支持文件數(shù)隨節(jié)點(diǎn)數(shù)目增加,單一命名空間支持文件數(shù)達(dá)百億級(jí)。計(jì)算存儲(chǔ)分離,按需擴(kuò)展,實(shí)現(xiàn)精準(zhǔn)投資

              免責(zé)聲明:市場(chǎng)有風(fēng)險(xiǎn),選擇需謹(jǐn)慎!此文僅供參考,不作買賣依據(jù)。

              相關(guān)熱詞搜索:

              上一篇:響應(yīng)國家要求、聚焦品質(zhì),他山石人工智能嘉賓邀約服務(wù)獲行業(yè)認(rèn)可
              下一篇:最后一頁

              熱點(diǎn)話題

              熱點(diǎn)推薦

              頭條

              ? 亚洲成AV人片高潮喷水| 亚洲AV无码一区二区三区电影| 日本亚洲欧美色视频在线播放 | 久久久久亚洲AV成人网| 最新亚洲人成网站在线观看| 亚洲中文字幕久久久一区| 亚洲性线免费观看视频成熟| 亚洲一级高清在线中文字幕| 亚洲国产中文在线二区三区免| 亚洲综合久久成人69| 亚洲国产精品综合久久网各| 99人中文字幕亚洲区| 97se亚洲综合在线| 337p日本欧洲亚洲大胆色噜噜| 亚洲男人第一av网站| 亚洲精彩视频在线观看| 亚洲精品在线免费观看视频| 久久亚洲日韩精品一区二区三区| 亚洲综合视频在线| 亚洲无人区视频大全| 精品日韩99亚洲的在线发布| 亚洲久悠悠色悠在线播放| 亚洲天然素人无码专区| 亚洲AV无码专区国产乱码不卡| 亚洲AV无码资源在线观看| 久久精品国产亚洲av瑜伽| 伊在人亚洲香蕉精品区麻豆| 亚洲无线一二三四区手机| 中文字幕亚洲日韩无线码| 久久久久久久尹人综合网亚洲| 久久亚洲国产精品五月天| 亚洲美女一区二区三区| 亚洲av一本岛在线播放| 亚洲精品动漫免费二区| vvvv99日韩精品亚洲| 国产亚洲精久久久久久无码77777 国产亚洲精品成人AA片新蒲金 | 亚洲人成色在线观看| 亚洲 无码 在线 专区| 91麻豆国产自产在线观看亚洲| 日韩亚洲欧洲在线com91tv| 91亚洲精品第一综合不卡播放|