1,除了網(wǎng)盤之外還有什么可以存儲大數(shù)據(jù)2,世界上最好的最大的數(shù)據(jù)儲存方式是什么3,怎樣存儲大數(shù)據(jù)1,除了網(wǎng)盤之外還有什么可以存儲大數(shù)據(jù)
所謂的網(wǎng)盤,只不過是別人提供給你的硬盤地址而已。。。實際上還是存在硬盤里面,只不過不是你的硬盤。。。。固態(tài)硬盤了解下興宇中科在云秘盤產(chǎn)品設(shè)計之初,采用多種專業(yè)加密算法和硬件認證機制,安全系數(shù)這塊還是很有保障滴
2,世界上最好的最大的數(shù)據(jù)儲存方式是什么
cd可以最多存儲5年,磁帶可以存儲三十到五十年。質(zhì)量好的硬盤可以存儲的時間非常長。容量當然是硬盤最大?,F(xiàn)在好多東西都是用硬盤的。有什么好比較的。最可靠,最廉價,最標準的就是磁帶,缺點是順序存儲,隨機讀取性能不行。cd原來可以取代磁帶,也確實有大型cd庫。但目前來看,在可靠性上,cd還不如磁帶。優(yōu)點是容量大,可以隨機讀取。硬盤的麻煩在于接口還在進化,10年前的硬盤即使保存下來,也會因為接口的改變而無法使用。固態(tài)硬盤和存儲卡就是一回事,缺點在于同價格下容量低,也不夠可靠打孔紙卡這種已經(jīng)淘汰的東西就不用說了
3,怎樣存儲大數(shù)據(jù)
pb或多pb級基礎(chǔ)設(shè)施與傳統(tǒng)大規(guī)模數(shù)據(jù)集之間的差別簡直就像白天和黑夜的差別,就像在筆記本電腦上處理數(shù)據(jù)和在raid陣列上處理數(shù)據(jù)之間的差別。當day在2009年加入shutterfly時,存儲已經(jīng)成為該公司最大的開支,并且以飛快的速度增長。每n個pb的額外存儲意味著我們需要另一個存儲管理員來支持物理和邏輯基礎(chǔ)設(shè)施,day表示,面對大規(guī)模數(shù)據(jù)存儲,系統(tǒng)會更頻繁地出問題,任何管理超大存儲的人經(jīng)常都要處理硬件故障。大家都在試圖解決的根本問題是:當你知道存儲的一部分將在一段時間內(nèi)出現(xiàn)問題,你應(yīng)該如何確保數(shù)據(jù)可用性,同時確保不會降低性能?raid問題解決故障的標準答案是復(fù)制,通常以raid陣列的形式。但day表示,面對龐大規(guī)模的數(shù)據(jù)時,raid解決問題的同時可能會制造更多問題。在傳統(tǒng)raid數(shù)據(jù)存儲方案中,每個數(shù)據(jù)的副本都被鏡像和存儲在陣列的不同磁盤中,以確保完整性和可用性。但這意味著每個被鏡像和存儲的數(shù)據(jù)將需要其本身五倍以上的存儲空間。隨著raid陣列中使用的磁盤越來越大(從密度和功耗的角度來看,3tb磁盤非常具有吸引力),更換故障驅(qū)動器的時間也將變得越來越長。實際上,我們使用raid并不存在任何操作問題,day表示,我們看到的是,隨著磁盤變得越...pb或多pb級基礎(chǔ)設(shè)施與傳統(tǒng)大規(guī)模數(shù)據(jù)集之間的差別簡直就像白天和黑夜的差別,就像在筆記本電腦上處理數(shù)據(jù)和在raid陣列上處理數(shù)據(jù)之間的差別。當day在2009年加入shutterfly時,存儲已經(jīng)成為該公司最大的開支,并且以飛快的速度增長。每n個pb的額外存儲意味著我們需要另一個存儲管理員來支持物理和邏輯基礎(chǔ)設(shè)施,day表示,面對大規(guī)模數(shù)據(jù)存儲,系統(tǒng)會更頻繁地出問題,任何管理超大存儲的人經(jīng)常都要處理硬件故障。大家都在試圖解決的根本問題是:當你知道存儲的一部分將在一段時間內(nèi)出現(xiàn)問題,你應(yīng)該如何確保數(shù)據(jù)可用性,同時確保不會降低性能?raid問題解決故障的標準答案是復(fù)制,通常以raid陣列的形式。但day表示,面對龐大規(guī)模的數(shù)據(jù)時,raid解決問題的同時可能會制造更多問題。在傳統(tǒng)raid數(shù)據(jù)存儲方案中,每個數(shù)據(jù)的副本都被鏡像和存儲在陣列的不同磁盤中,以確保完整性和可用性。但這意味著每個被鏡像和存儲的數(shù)據(jù)將需要其本身五倍以上的存儲空間。隨著raid陣列中使用的磁盤越來越大(從密度和功耗的角度來看,3tb磁盤非常具有吸引力),更換故障驅(qū)動器的時間也將變得越來越長。實際上,我們使用raid并不存在任何操作問題,day表示,我們看到的是,隨著磁盤變得越來越大,當任何組件發(fā)生故障時,我們回到一個完全冗余的系統(tǒng)的時間增加。生成校驗是與數(shù)據(jù)集的大小成正比的。當我們開始使用1tb和2tb的磁盤時,回到完全冗余系統(tǒng)的時間變得很長??梢哉f,這種趨勢并沒有朝著正確的方向發(fā)展。對于shutterfly而言,可靠性和可用性是非常關(guān)鍵的因素,這也是企業(yè)級存儲的要求。day表示,其快速膨脹的存儲成本使商品系統(tǒng)變得更具吸引力。當day及其團隊在研究潛在技術(shù)解決方案以幫助控制存儲成本時,他們對于一項叫做糾刪碼(erasure code)的技術(shù)非常感興趣。采用擦除代碼技術(shù)的下一代存儲里德-所羅門糾刪碼最初作為前向糾錯碼(forward error correction, fec)用于不可靠通道的數(shù)據(jù)傳輸,例如外層空間探測的數(shù)據(jù)傳輸。這項技術(shù)還被用于cd和dvd來處理光盤上的故障,例如灰塵和劃痕。一些存儲供應(yīng)商已經(jīng)開始將糾刪碼納入他們的解決方案中。使用糾刪碼,數(shù)據(jù)可以被分解成幾塊,單塊分解數(shù)據(jù)是無用的,然后它們被分散到不同磁盤驅(qū)動器或者服務(wù)器。在任何使用,這些數(shù)據(jù)都可以完全重組,即使有些數(shù)據(jù)塊因為磁盤故障已經(jīng)丟失。換句話說,你不需要創(chuàng)建多個數(shù)據(jù)副本,單個數(shù)據(jù)就可以確保數(shù)據(jù)的完整性和可用性?;诩m刪碼的解決方案的早期供應(yīng)商之一是cleversafe公司,他們添加了位置信息來創(chuàng)建其所謂的分散編碼,讓用戶可以在不同位置(例如多個數(shù)據(jù)中心)存儲數(shù)據(jù)塊或者說數(shù)據(jù)片。每個數(shù)據(jù)塊就其自身而言是無用的,這樣能夠確保隱私性和安全性。因為信息分散技術(shù)使用單一數(shù)據(jù)來確保數(shù)據(jù)完整性和可用性,而不是像raid一樣使用多個副本,公司可以節(jié)省多達90%的存儲成本。當你將試圖重組數(shù)據(jù)時,你并不一定需要提供所有數(shù)據(jù)塊,cleversafe公司產(chǎn)品策略、市場營銷和客戶解決方案副總裁russ kennedy表示,你生成的數(shù)據(jù)塊的數(shù)量,我們稱之為寬度,我們將重組數(shù)據(jù)需要的最低數(shù)量稱之為門檻。你生成的數(shù)據(jù)塊的數(shù)量和重組需要的數(shù)量之間的差異決定了其可靠性。同時,即使你丟失節(jié)點和驅(qū)動器,你仍然能夠得到原來形式的數(shù)據(jù)。