資訊專(zhuān)欄INFORMATION COLUMN
摘要：大數(shù)據(jù)處理和所有權(quán)導(dǎo)致存儲(chǔ)行業(yè)現(xiàn)狀發(fā)生轉(zhuǎn)變。鑒于這些發(fā)展動(dòng)向，云計(jì)算在大數(shù)據(jù)領(lǐng)域可以扮演什么角色呢答案是冷存儲(chǔ)，這個(gè)領(lǐng)域仍沒(méi)有得到企業(yè)界的充分利用。云計(jì)算和虛擬存儲(chǔ)在數(shù)據(jù)集市也存在發(fā)展前景。
大數(shù)據(jù)處理和所有權(quán)導(dǎo)致存儲(chǔ)行業(yè)現(xiàn)狀發(fā)生轉(zhuǎn)變。本文介紹了存儲(chǔ)實(shí)踐方面最重大的變化。
企業(yè)存儲(chǔ)環(huán)境主要是圍繞記錄系統(tǒng)構(gòu)建起來(lái)的，側(cè)重于這些問(wèn)題：為數(shù)據(jù)記錄長(zhǎng)度固定的文件購(gòu)買(mǎi)哪些類(lèi)型的存儲(chǔ)介質(zhì)和管理系統(tǒng)，所存儲(chǔ)數(shù)據(jù)的性質(zhì)是實(shí)時(shí)數(shù)據(jù)、準(zhǔn)實(shí)時(shí)數(shù)據(jù)，還是只是偶爾需要訪(fǎng)問(wèn)或完全可以用數(shù)據(jù)歸檔保存起來(lái)的批量填充的數(shù)據(jù)等。
自從大數(shù)據(jù)進(jìn)入企業(yè)數(shù)據(jù)中心和業(yè)務(wù)部門(mén)，一切改變了――單個(gè)的大數(shù)據(jù)文件可以用數(shù)TB、甚至數(shù)PB來(lái)衡量。Hadoop等分析平臺(tái)上的大數(shù)據(jù)并行處理與事務(wù)數(shù)據(jù)的按順序處理有著明顯區(qū)別。不出所料，存儲(chǔ)方面要考慮的因素隨之變化。
這種變化在數(shù)據(jù)分析和高性能計(jì)算領(lǐng)域體現(xiàn)得最為明顯。這個(gè)領(lǐng)域以Hadoop應(yīng)用程序?yàn)橹?，它們借助算法分析方法并行處理?shù)PB級(jí)數(shù)據(jù)，用于數(shù)據(jù)科學(xué)及其他復(fù)雜查詢(xún)。就高性能應(yīng)用程序而言，很難考慮像虛擬化存儲(chǔ)或基于云的存儲(chǔ)這些概念，因?yàn)槟阒挥型ㄟ^(guò)數(shù)據(jù)中心的物理處理器和存儲(chǔ)平臺(tái)，才能直接處理并存儲(chǔ)數(shù)據(jù)和查詢(xún)結(jié)果。
因此，這種工作具有的計(jì)算密集性和存儲(chǔ)密集性使數(shù)據(jù)中心管理人員(包括存儲(chǔ)專(zhuān)業(yè)人員)不再像過(guò)去十年那樣，迫切尋求的虛擬化或云計(jì)算。作為大數(shù)據(jù)對(duì)象存儲(chǔ)特點(diǎn)的單一數(shù)據(jù)集的龐大性也是如此，它們使用元數(shù)據(jù)標(biāo)簽來(lái)描述非傳統(tǒng)數(shù)據(jù)圖像，比如照片、視頻、音頻記錄和文檔圖像等。
此外，大數(shù)據(jù)項(xiàng)目的所有權(quán)也改變了存儲(chǔ)計(jì)算。如果公司里面的業(yè)務(wù)部門(mén)在運(yùn)行大數(shù)據(jù)項(xiàng)目，其目標(biāo)就會(huì)轉(zhuǎn)向零散的分布式物理存儲(chǔ)架構(gòu)，這些分布式物理存儲(chǔ)是網(wǎng)絡(luò)附加存儲(chǔ)(NAS)，可以在工作負(fù)載需要時(shí)，向外擴(kuò)展到多個(gè)存儲(chǔ)設(shè)備。分布式向外擴(kuò)展型NAS是基于云的存儲(chǔ)或虛擬存儲(chǔ)之外的一種選擇，它與這些流行的IT趨勢(shì)形成了鮮明對(duì)照。
鑒于這些發(fā)展動(dòng)向，云計(jì)算在大數(shù)據(jù)領(lǐng)域可以扮演什么角色呢?
答案是冷存儲(chǔ)(cold storage)，這個(gè)領(lǐng)域仍沒(méi)有得到企業(yè)界的充分利用。冷存儲(chǔ)是極其便宜、速度很慢、駐留在磁盤(pán)的數(shù)據(jù)，存儲(chǔ)起來(lái)放到歸檔上，妥善保存起來(lái)。在日常的IT中，這些數(shù)據(jù)很少有機(jī)會(huì)需要用到，所以如果你把它轉(zhuǎn)移到異地?cái)?shù)據(jù)存儲(chǔ)庫(kù)很方便，不必讓它在你的數(shù)據(jù)中心或運(yùn)營(yíng)系統(tǒng)中占用空間。如果該數(shù)據(jù)存儲(chǔ)庫(kù)在云端，你就能夠從數(shù)據(jù)中心遠(yuǎn)程訪(fǎng)問(wèn)它，沒(méi)必要大老遠(yuǎn)跑到異地拿起磁盤(pán)或磁帶。
云計(jì)算和虛擬存儲(chǔ)在數(shù)據(jù)集市也存在發(fā)展前景?，F(xiàn)在許多公司使用數(shù)據(jù)集市為不同的部門(mén)運(yùn)行批量查詢(xún)。數(shù)據(jù)集市中所用的數(shù)據(jù)大多是批量創(chuàng)建，基本是過(guò)去用來(lái)查詢(xún)的傳統(tǒng)數(shù)據(jù)。不同之處在于，用戶(hù)現(xiàn)在擁有比過(guò)去更多的分析報(bào)告創(chuàng)建工具和選項(xiàng)用于查詢(xún)，而且數(shù)據(jù)管理員更能夠生成從不同來(lái)源聚合的數(shù)據(jù)。在這種批量環(huán)境下，磁盤(pán)存儲(chǔ)解決方案用起來(lái)就跟過(guò)去一樣有效。
存儲(chǔ)管理員需要應(yīng)對(duì)大數(shù)據(jù)帶來(lái)的變化，尤其是如何應(yīng)對(duì)眾多極其龐大的大數(shù)據(jù)文件。這就需要專(zhuān)門(mén)的磁盤(pán)和處理，在大多數(shù)情況下，還需要與云計(jì)算和虛擬化項(xiàng)目背道而馳的本地存儲(chǔ)。在另一方面，商用冷存儲(chǔ)解決方案可能會(huì)最終消除這個(gè)困境：很少使用的數(shù)據(jù)駐留在機(jī)房的過(guò)時(shí)磁盤(pán)和磁帶驅(qū)動(dòng)器上，無(wú)人照管。
文章版權(quán)歸作者所有，未經(jīng)允許請(qǐng)勿轉(zhuǎn)載,若此文章存在違規(guī)行為，您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請(qǐng)注明本文地址：http://specialneedsforspecialkids.com/yun/4918.html
摘要：本期算力科創(chuàng)家市北高新篇專(zhuān)題專(zhuān)訪(fǎng)了數(shù)據(jù)港副總裁王海峰，介紹數(shù)據(jù)中心在大數(shù)據(jù)中的重要作用。據(jù)說(shuō)都是數(shù)據(jù)港的客戶(hù)，在這些巨頭的業(yè)務(wù)板塊中數(shù)據(jù)港扮演了什么角色一種是做我們叫，純粹的這種商業(yè)租用服務(wù)。算力說(shuō)隨著大數(shù)據(jù)行業(yè)的發(fā)展，對(duì)于數(shù)據(jù)的其承載方數(shù)據(jù)中心的需求也越高越高，其中成立于2009年的數(shù)據(jù)港逐漸成長(zhǎng)為行業(yè)龍頭，BAT這樣的科技巨頭、中國(guó)的三大通訊商等企業(yè)都是其客戶(hù)，數(shù)據(jù)港可謂見(jiàn)證了大數(shù)據(jù)行業(yè)...
摘要：最近接受了彭博的專(zhuān)訪(fǎng)，主要談了公司的發(fā)展云計(jì)算和經(jīng)營(yíng)戰(zhàn)略等問(wèn)題，以下是根據(jù)視頻整理的文字版供大家參閱。底層面向?qū)＜壹?jí)別的機(jī)器學(xué)習(xí)從業(yè)人員。我認(rèn)為對(duì)大多數(shù)公司來(lái)說(shuō)真正的寶石是可以用自己的數(shù)據(jù)來(lái)搞的機(jī)器學(xué)習(xí)和。 AWS CEO Andy Jassy 最近接受了彭博（Bloomberg）的專(zhuān)訪(fǎng)，主要談了公司的發(fā)展、...
摘要：最早是由谷歌設(shè)計(jì)，現(xiàn)在作為一個(gè)開(kāi)源平臺(tái)免費(fèi)提供給用戶(hù)。根據(jù)聯(lián)合主席兼谷歌云平臺(tái)倡導(dǎo)者的說(shuō)法，擁有一個(gè)真正成功的生態(tài)系統(tǒng)，利用技術(shù)的云原生初創(chuàng)公司肯定能夠蓬勃發(fā)展。技術(shù)領(lǐng)域又一個(gè)動(dòng)蕩之年即將結(jié)束，如果沒(méi)有關(guān)注企業(yè)領(lǐng)域最重要的主題：云計(jì)算，你就很難做出關(guān)于未來(lái)一年的任何預(yù)測(cè)。企業(yè)模式是公有的、私有的、還是多云的？容器扮演什么角色？像Cloud Native Computing Foundatio...
摘要：最近接受了彭博的專(zhuān)訪(fǎng)，主要談了公司的發(fā)展云計(jì)算和經(jīng)營(yíng)戰(zhàn)略等問(wèn)題，以下是根據(jù)視頻整理的文字版供大家參閱。底層面向?qū)＜壹?jí)別的機(jī)器學(xué)習(xí)從業(yè)人員。我認(rèn)為對(duì)大多數(shù)公司來(lái)說(shuō)真正的寶石是可以用自己的數(shù)據(jù)來(lái)搞的機(jī)器學(xué)習(xí)和。 AWS CEO Andy Jassy 最近接受了彭博（Bloomberg）的專(zhuān)訪(fǎng)，主要談了公司的發(fā)展、云計(jì)算、Alexa和經(jīng)營(yíng)戰(zhàn)略等問(wèn)題，以下是根據(jù)視頻整理的文字版供大家參閱。主持人：非...
摘要：全球領(lǐng)先的科技企業(yè)騰訊亞馬遜將在今年月日聚首第五屆互聯(lián)網(wǎng)安全領(lǐng)袖峰會(huì)，簡(jiǎn)稱(chēng)，探討全球云安全新趨勢(shì)。最新議程披露，亞馬遜副總裁和首席技術(shù)官將出席今年并進(jìn)行主題演講。據(jù)了解，此次圓桌不僅將聚焦騰訊和亞馬遜關(guān)于云安全的趨勢(shì)分享和應(yīng)用前瞻。 以云服務(wù)為代表的產(chǎn)業(yè)互聯(lián)網(wǎng)引領(lǐng)了數(shù)字化升級(jí)的浪潮。全球領(lǐng)先的科技企業(yè)騰訊、亞馬遜將在今年7月30-31日聚首第五屆互聯(lián)網(wǎng)安全領(lǐng)袖峰會(huì)(Cyber Secu...
閱讀 1056·2021-11-18 10:02
閱讀 1313·2021-09-23 11:22
閱讀 2612·2021-08-21 14:08
閱讀 1642·2019-08-30 15:55
閱讀 1726·2019-08-30 13:45
閱讀 3161·2019-08-29 16:52
閱讀 3099·2019-08-29 12:18
閱讀 1642·2019-08-26 13:36
