久久久久人,丁香花综合网,一级无遮挡毛片,亚洲产国偷v产偷,亚洲成人精选,偷拍欧美亚洲,日韩有码片

存儲(chǔ)是大數(shù)據(jù)的基礎(chǔ)

2013-10-23 09:46:29 賽迪網(wǎng)  點(diǎn)擊量: 評(píng)論 (0)
隨著物聯(lián)網(wǎng)、社交化、BYOD等技術(shù)的廣泛應(yīng)用,數(shù)據(jù)呈現(xiàn)爆炸性增長(zhǎng)。不僅對(duì)存儲(chǔ)的性能及容量提出苛刻考驗(yàn),還要具備快速的數(shù)據(jù)檢索與分析能力以即時(shí)獲取關(guān)鍵價(jià)值信息;同時(shí),活躍數(shù)據(jù)歸檔需要更加簡(jiǎn)便、成
        隨著物聯(lián)網(wǎng)、社交化、BYOD等技術(shù)的廣泛應(yīng)用,數(shù)據(jù)呈現(xiàn)爆炸性增長(zhǎng)。不僅對(duì)存儲(chǔ)的性能及容量提出苛刻考驗(yàn),還要具備快速的數(shù)據(jù)檢索與分析能力以即時(shí)獲取關(guān)鍵價(jià)值信息;同時(shí),活躍數(shù)據(jù)歸檔需要更加簡(jiǎn)便、成本效益的存儲(chǔ)方案。美國(guó)市場(chǎng)研究公司IDC認(rèn)為“在可預(yù)見(jiàn)的未來(lái),存儲(chǔ)是大數(shù)據(jù)和分析領(lǐng)域最大的基礎(chǔ)設(shè)施開(kāi)支之一。

Hadoop的數(shù)據(jù)是非常重要的一點(diǎn)。一般來(lái)說(shuō)有三種方法來(lái)應(yīng)對(duì)處理和存儲(chǔ),一種方法是實(shí)時(shí)的分析工具,同時(shí)還有一些數(shù)據(jù)的操作性的工作。也就是說(shuō)得到了什么到底怎么做?同時(shí)還需要進(jìn)行對(duì)數(shù)據(jù)的操作,這需要處理多種不同的數(shù)據(jù)得到一個(gè)結(jié)果,這就是Hadoop在早期的時(shí)候超越其他工具的地方。而且我們必須要處理數(shù)據(jù),用這個(gè)數(shù)據(jù)來(lái)在培訓(xùn)過(guò)程中引用到,或者引用來(lái)進(jìn)行一些可視化,幫助來(lái)使用一些。

存儲(chǔ)和網(wǎng)絡(luò)也是Hadoop集群性能的重要保證。在Hadoop集群中,萬(wàn)兆位以太網(wǎng)(10GbE)帶來(lái)的帶寬增長(zhǎng)是導(dǎo)入和復(fù)制(在多臺(tái)服務(wù)器之間)大型數(shù)據(jù)集的關(guān)鍵,英特爾Ethernet10Gigabit融合網(wǎng)絡(luò)適配器提供了高吞吐量連接,同時(shí)英特爾SATA固態(tài)硬盤(pán)為原始存儲(chǔ)提供了高性能、高吞吐量存儲(chǔ)選擇。為提高效率,存儲(chǔ)往往需要支持其它高級(jí)能力,如壓縮、加密、自動(dòng)數(shù)據(jù)分層、重復(fù)數(shù)據(jù)刪除、糾刪碼和自動(dòng)精簡(jiǎn)配置,現(xiàn)有的英特爾至強(qiáng)處理器都已經(jīng)支持這些功能。

隨著大量IT廠(chǎng)商的加入,Hadoop的商用版本正呈增長(zhǎng)趨勢(shì),眾多廠(chǎng)商都推出了自己的Hadoop版本,并集合了其他Hadoop項(xiàng)目的基本堆棧,可與數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)庫(kù)和其他數(shù)據(jù)管理產(chǎn)品集成。

讓Hadoop成為下一代數(shù)據(jù)分析平臺(tái)的“基石”。英特爾Hadoop發(fā)行版免費(fèi)版v2.2,為最終用戶(hù)和應(yīng)用提供商提供了一個(gè)功能強(qiáng)大、方便易用的大數(shù)據(jù)入門(mén)平臺(tái)。而且免費(fèi)版和企業(yè)版共用相同的核心代碼,免費(fèi)版也包含所有核心增強(qiáng)功能,不過(guò)免費(fèi)版在節(jié)點(diǎn)數(shù)和系統(tǒng)存儲(chǔ)容量上有所限制。

英特爾大數(shù)據(jù)Hadoop的版本特點(diǎn)有4個(gè)方面,一方面是穩(wěn)定性和易用性上做了優(yōu)化。第二方面對(duì)英特爾的平臺(tái)做了特殊的優(yōu)化,這個(gè)軟件包在英特爾平臺(tái)上從性能上和效率上是有優(yōu)勢(shì)的。第三方面在算法和結(jié)構(gòu)上做了調(diào)整,也就是對(duì)即時(shí)性的優(yōu)化,使得它能夠做到即時(shí)的數(shù)據(jù)處理。第四方面是和中國(guó)的用戶(hù)合作,對(duì)行業(yè)應(yīng)用做了特殊的調(diào)整和優(yōu)化。

最重要的還是是安全的優(yōu)化,要運(yùn)行各種不同的運(yùn)行,在某一個(gè)APP的環(huán)境Hadoop是一個(gè)獨(dú)立的集群,也許它管理起來(lái)并不是那么容易,雖然效率并不是很高,但它是獨(dú)立運(yùn)行的,把它放在一起可以看到是單一數(shù)據(jù)的分享。我們看到了很多的數(shù)據(jù),把它放到了云的計(jì)算中,比如說(shuō)基礎(chǔ)設(shè)施可能是同一個(gè)基礎(chǔ)架構(gòu)對(duì)資源進(jìn)行分享。但在分享存儲(chǔ)這方面可以看到有一些大數(shù)據(jù)都可以有一些優(yōu)勢(shì),但問(wèn)題并不是完全需要這樣的。資源的分享、存儲(chǔ)的分享確實(shí)是可以的,你可以用SAN or NAS進(jìn)行分享,你可以對(duì)集群進(jìn)行評(píng)論的工作,還可以幫助你不斷地改善虛擬的架構(gòu)。

大云網(wǎng)官方微信售電那點(diǎn)事兒

責(zé)任編輯:廖生玨

免責(zé)聲明:本文僅代表作者個(gè)人觀點(diǎn),與本站無(wú)關(guān)。其原創(chuàng)性以及文中陳述文字和內(nèi)容未經(jīng)本站證實(shí),對(duì)本文以及其中全部或者部分內(nèi)容、文字的真實(shí)性、完整性、及時(shí)性本站不作任何保證或承諾,請(qǐng)讀者僅作參考,并請(qǐng)自行核實(shí)相關(guān)內(nèi)容。
我要收藏
個(gè)贊
?