1,除了網(wǎng)盤之外還有什么可以存儲(chǔ)大數(shù)據(jù)2,世界上最好的最大的數(shù)據(jù)儲(chǔ)存方式是什么3,怎樣存儲(chǔ)大數(shù)據(jù)1,除了網(wǎng)盤之外還有什么可以存儲(chǔ)大數(shù)據(jù)
所謂的網(wǎng)盤,只不過是別人提供給你的硬盤地址而已。。。實(shí)際上還是存在硬盤里面,只不過不是你的硬盤。。。。固態(tài)硬盤了解下興宇中科在云秘盤產(chǎn)品設(shè)計(jì)之初,采用多種專業(yè)加密算法和硬件認(rèn)證機(jī)制,安全系數(shù)這塊還是很有保障滴
2,世界上最好的最大的數(shù)據(jù)儲(chǔ)存方式是什么
cd可以最多存儲(chǔ)5年,磁帶可以存儲(chǔ)三十到五十年。質(zhì)量好的硬盤可以存儲(chǔ)的時(shí)間非常長。容量當(dāng)然是硬盤最大?,F(xiàn)在好多東西都是用硬盤的。有什么好比較的。最可靠,最廉價(jià),最標(biāo)準(zhǔn)的就是磁帶,缺點(diǎn)是順序存儲(chǔ),隨機(jī)讀取性能不行。cd原來可以取代磁帶,也確實(shí)有大型cd庫。但目前來看,在可靠性上,cd還不如磁帶。優(yōu)點(diǎn)是容量大,可以隨機(jī)讀取。硬盤的麻煩在于接口還在進(jìn)化,10年前的硬盤即使保存下來,也會(huì)因?yàn)榻涌诘母淖兌鵁o法使用。固態(tài)硬盤和存儲(chǔ)卡就是一回事,缺點(diǎn)在于同價(jià)格下容量低,也不夠可靠打孔紙卡這種已經(jīng)淘汰的東西就不用說了
3,怎樣存儲(chǔ)大數(shù)據(jù)
pb或多pb級(jí)基礎(chǔ)設(shè)施與傳統(tǒng)大規(guī)模數(shù)據(jù)集之間的差別簡直就像白天和黑夜的差別,就像在筆記本電腦上處理數(shù)據(jù)和在raid陣列上處理數(shù)據(jù)之間的差別。當(dāng)day在2009年加入shutterfly時(shí),存儲(chǔ)已經(jīng)成為該公司最大的開支,并且以飛快的速度增長。每n個(gè)pb的額外存儲(chǔ)意味著我們需要另一個(gè)存儲(chǔ)管理員來支持物理和邏輯基礎(chǔ)設(shè)施,day表示,面對(duì)大規(guī)模數(shù)據(jù)存儲(chǔ),系統(tǒng)會(huì)更頻繁地出問題,任何管理超大存儲(chǔ)的人經(jīng)常都要處理硬件故障。大家都在試圖解決的根本問題是:當(dāng)你知道存儲(chǔ)的一部分將在一段時(shí)間內(nèi)出現(xiàn)問題,你應(yīng)該如何確保數(shù)據(jù)可用性,同時(shí)確保不會(huì)降低性能?raid問題解決故障的標(biāo)準(zhǔn)答案是復(fù)制,通常以raid陣列的形式。但day表示,面對(duì)龐大規(guī)模的數(shù)據(jù)時(shí),raid解決問題的同時(shí)可能會(huì)制造更多問題。在傳統(tǒng)raid數(shù)據(jù)存儲(chǔ)方案中,每個(gè)數(shù)據(jù)的副本都被鏡像和存儲(chǔ)在陣列的不同磁盤中,以確保完整性和可用性。但這意味著每個(gè)被鏡像和存儲(chǔ)的數(shù)據(jù)將需要其本身五倍以上的存儲(chǔ)空間。隨著raid陣列中使用的磁盤越來越大(從密度和功耗的角度來看,3tb磁盤非常具有吸引力),更換故障驅(qū)動(dòng)器的時(shí)間也將變得越來越長。實(shí)際上,我們使用raid并不存在任何操作問題,day表示,我們看到的是,隨著磁盤變得越...pb或多pb級(jí)基礎(chǔ)設(shè)施與傳統(tǒng)大規(guī)模數(shù)據(jù)集之間的差別簡直就像白天和黑夜的差別,就像在筆記本電腦上處理數(shù)據(jù)和在raid陣列上處理數(shù)據(jù)之間的差別。當(dāng)day在2009年加入shutterfly時(shí),存儲(chǔ)已經(jīng)成為該公司最大的開支,并且以飛快的速度增長。每n個(gè)pb的額外存儲(chǔ)意味著我們需要另一個(gè)存儲(chǔ)管理員來支持物理和邏輯基礎(chǔ)設(shè)施,day表示,面對(duì)大規(guī)模數(shù)據(jù)存儲(chǔ),系統(tǒng)會(huì)更頻繁地出問題,任何管理超大存儲(chǔ)的人經(jīng)常都要處理硬件故障。大家都在試圖解決的根本問題是:當(dāng)你知道存儲(chǔ)的一部分將在一段時(shí)間內(nèi)出現(xiàn)問題,你應(yīng)該如何確保數(shù)據(jù)可用性,同時(shí)確保不會(huì)降低性能?raid問題解決故障的標(biāo)準(zhǔn)答案是復(fù)制,通常以raid陣列的形式。但day表示,面對(duì)龐大規(guī)模的數(shù)據(jù)時(shí),raid解決問題的同時(shí)可能會(huì)制造更多問題。在傳統(tǒng)raid數(shù)據(jù)存儲(chǔ)方案中,每個(gè)數(shù)據(jù)的副本都被鏡像和存儲(chǔ)在陣列的不同磁盤中,以確保完整性和可用性。但這意味著每個(gè)被鏡像和存儲(chǔ)的數(shù)據(jù)將需要其本身五倍以上的存儲(chǔ)空間。隨著raid陣列中使用的磁盤越來越大(從密度和功耗的角度來看,3tb磁盤非常具有吸引力),更換故障驅(qū)動(dòng)器的時(shí)間也將變得越來越長。實(shí)際上,我們使用raid并不存在任何操作問題,day表示,我們看到的是,隨著磁盤變得越來越大,當(dāng)任何組件發(fā)生故障時(shí),我們回到一個(gè)完全冗余的系統(tǒng)的時(shí)間增加。生成校驗(yàn)是與數(shù)據(jù)集的大小成正比的。當(dāng)我們開始使用1tb和2tb的磁盤時(shí),回到完全冗余系統(tǒng)的時(shí)間變得很長??梢哉f,這種趨勢(shì)并沒有朝著正確的方向發(fā)展。對(duì)于shutterfly而言,可靠性和可用性是非常關(guān)鍵的因素,這也是企業(yè)級(jí)存儲(chǔ)的要求。day表示,其快速膨脹的存儲(chǔ)成本使商品系統(tǒng)變得更具吸引力。當(dāng)day及其團(tuán)隊(duì)在研究潛在技術(shù)解決方案以幫助控制存儲(chǔ)成本時(shí),他們對(duì)于一項(xiàng)叫做糾刪碼(erasure code)的技術(shù)非常感興趣。采用擦除代碼技術(shù)的下一代存儲(chǔ)里德-所羅門糾刪碼最初作為前向糾錯(cuò)碼(forward error correction, fec)用于不可靠通道的數(shù)據(jù)傳輸,例如外層空間探測(cè)的數(shù)據(jù)傳輸。這項(xiàng)技術(shù)還被用于cd和dvd來處理光盤上的故障,例如灰塵和劃痕。一些存儲(chǔ)供應(yīng)商已經(jīng)開始將糾刪碼納入他們的解決方案中。使用糾刪碼,數(shù)據(jù)可以被分解成幾塊,單塊分解數(shù)據(jù)是無用的,然后它們被分散到不同磁盤驅(qū)動(dòng)器或者服務(wù)器。在任何使用,這些數(shù)據(jù)都可以完全重組,即使有些數(shù)據(jù)塊因?yàn)榇疟P故障已經(jīng)丟失。換句話說,你不需要?jiǎng)?chuàng)建多個(gè)數(shù)據(jù)副本,單個(gè)數(shù)據(jù)就可以確保數(shù)據(jù)的完整性和可用性?;诩m刪碼的解決方案的早期供應(yīng)商之一是cleversafe公司,他們添加了位置信息來創(chuàng)建其所謂的分散編碼,讓用戶可以在不同位置(例如多個(gè)數(shù)據(jù)中心)存儲(chǔ)數(shù)據(jù)塊或者說數(shù)據(jù)片。每個(gè)數(shù)據(jù)塊就其自身而言是無用的,這樣能夠確保隱私性和安全性。因?yàn)樾畔⒎稚⒓夹g(shù)使用單一數(shù)據(jù)來確保數(shù)據(jù)完整性和可用性,而不是像raid一樣使用多個(gè)副本,公司可以節(jié)省多達(dá)90%的存儲(chǔ)成本。當(dāng)你將試圖重組數(shù)據(jù)時(shí),你并不一定需要提供所有數(shù)據(jù)塊,cleversafe公司產(chǎn)品策略、市場營銷和客戶解決方案副總裁russ kennedy表示,你生成的數(shù)據(jù)塊的數(shù)量,我們稱之為寬度,我們將重組數(shù)據(jù)需要的最低數(shù)量稱之為門檻。你生成的數(shù)據(jù)塊的數(shù)量和重組需要的數(shù)量之間的差異決定了其可靠性。同時(shí),即使你丟失節(jié)點(diǎn)和驅(qū)動(dòng)器,你仍然能夠得到原來形式的數(shù)據(jù)。