摘要:云和大數(shù)據(jù)也不例外。最終觀點基于以上考慮建立一套固有的基礎架構(gòu),你將會看到大數(shù)據(jù)和云之間是一種天作之合的組合。
在2013年三月音樂電影藝術節(jié)上,Motley Fool的Tim Byers說過:在很多方面,云和大數(shù)據(jù)越來越密不可分且功能相似-云資源用來支撐大數(shù)據(jù)的存儲及項目,而且大數(shù)據(jù)相對于云來說是一個龐大的業(yè)務案例。大數(shù)據(jù)和云技術的最終聯(lián)姻,必定是天作之合。
??? 聽起來雖然浪漫,但我們知道一種深度組合不可能在一夜之間就發(fā)生,它需要付出很多努力。云和大數(shù)據(jù)也不例外。
?
?? 大數(shù)據(jù)能帶來什么?
在這個過份炒作的組合里,大數(shù)據(jù)除了那些好聽的名詞,大數(shù)據(jù)本身責任重大,大數(shù)據(jù)所有所要做的就是為你的組織機構(gòu)帶來有用的信息。但在把大數(shù)據(jù)技術應用前,請先回答以下這些問題:
?? ●?你擁有的數(shù)據(jù)到底有多龐大,你目前的架構(gòu)能保證擴展這些量嗎?
?? ●?你的數(shù)據(jù)在結(jié)構(gòu)、半結(jié)構(gòu)、非結(jié)構(gòu)方面有什么特征?目前來說,你的系統(tǒng)架構(gòu)和技術是否能支撐這些不同類型的數(shù)據(jù)?
?? ●?你的數(shù)據(jù)來自哪里?內(nèi)部?外部? 開源數(shù)據(jù)?大數(shù)據(jù)隨之帶來是豐富的數(shù)據(jù)源,包括快速增長的新舊數(shù)據(jù)。??
最重要的是:在大數(shù)據(jù)真正應用初期,需要界定業(yè)務問題及大數(shù)據(jù)所能帶來的價值。
?
?? 云能帶來什么?
?? 如果大數(shù)據(jù)真的是主角,那么云則帶來可靠、穩(wěn)定的基礎,例如,基礎架構(gòu),提供一些多樣化的架構(gòu)選擇:
?? ●?內(nèi)部私有云:虛擬化、基于內(nèi)部防火墻專注體系架構(gòu)
?? ●?外部私有云:共享的、基于外部防火墻可定制的主機體系架構(gòu)
?? ●?共有云:基于第三方的共享主機體系結(jié)構(gòu)
?? ●?混合云:基于自有部署、私有云(內(nèi)部、外部)和公有云的環(huán)境
云也同時加速了變革、敏捷化、高速擴容及低成本的組合。
逐步變得得心應手
如果你回答了所有我提出的關于大數(shù)據(jù)的問題,同時理解云能帶來什么,那你就可以去冒險了。但是像其它組合一樣,這個過程中有一些事你需要搞清楚,下面七點你需要考慮一下:
開源代碼:
??? 開源軟件是大數(shù)據(jù)的核心,特別是Hadoop和它很眾多相關的項目。好消息是開源軟件是免費的,但是不管是自我部署還是安裝在云中,都需要對整個開源體系有個固有的理解。
數(shù)據(jù)存儲及處理:
??? 大數(shù)據(jù)有很多要處理的階段,包括篩選、預處理、處理、長期或短期的數(shù)據(jù)存儲。每個階段都可能用到云體系的不同方面。例如,你可以在私有內(nèi)部云中篩選和預處理數(shù)據(jù)令其以結(jié)構(gòu)化、自我部署;在私有云中處理結(jié)構(gòu)化的數(shù)據(jù);在公有云中長期存儲數(shù)據(jù)。
技術:
??? 大數(shù)據(jù)所用的到技術在企業(yè)內(nèi)部無法獲取,像開源軟件(如:Hadoop),云集成,安全及分析工具,這些技術非常少但非常重要,是業(yè)務分析師和數(shù)據(jù)科學家在整個云里都會用到。
支持:
??? 對于大數(shù)據(jù)需要的軟硬件及技術,一個組織需要決定誰能對整個可擴展體系統(tǒng)進行支持,如果你只是對內(nèi)部私有云感興趣,那么IT部門就能管理它。但是你關心的防火墻外的,你需要第三方的支持,例如軟件供應商或是云服務提供商,通過他們來維護及管理它的架構(gòu)體系。
性能:
??? 隨著數(shù)據(jù)越來越多,性能的問題也會隨之而來,如果數(shù)據(jù)跨國家跨洲存儲,你需要考慮在上傳數(shù)據(jù)及訪問數(shù)據(jù)帶來的網(wǎng)路情況,其結(jié)果會是糟透的.數(shù)據(jù)訪問量會為系統(tǒng)架構(gòu)帶來瓶勁同時用戶滿意度降低。
集成:
??? 在大數(shù)據(jù)的早期階段,不管是自我部署或是云,你只是在多帶帶的環(huán)境處理數(shù)據(jù)。接下來,你想把數(shù)據(jù)和現(xiàn)有的應用、系統(tǒng)、過程進行集成。這種云與內(nèi)外部系統(tǒng)的集成迫使公司重新檢測現(xiàn)有的技術。
隱私:
通過大數(shù)據(jù),企業(yè)機構(gòu)很容易從現(xiàn)有或加工后的數(shù)據(jù)獲取信息,例如社交,
開源及機器學習數(shù)據(jù),并且與現(xiàn)有的業(yè)務和分析數(shù)據(jù)進行組合,這是之前從未發(fā)生過的。這對于客戶將產(chǎn)生神奇而且變革性分析層面。但是與之而來也存在挑戰(zhàn),這
些分析層面很有可能會侵犯客戶的隱私,需要非常留心。
最終觀點:基于以上考慮建立一套固有的基礎架構(gòu),你將會看到大數(shù)據(jù)和云之間是一種天作之合的組合。
簡介: Tamara Dull,SAS Emerging Technologies的董事,超過25年技術服務經(jīng)驗,在數(shù)據(jù)分析,設計,開發(fā)方面很強的實力。
文章版權(quán)歸作者所有,未經(jīng)允許請勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請注明本文地址:http://m.hztianpu.com/yun/4073.html
摘要:云計算是一種計算資源,集合了海量的數(shù)據(jù)處理,與大數(shù)據(jù)人工智能都有著緊密聯(lián)系,而粒計算正是處理海量數(shù)據(jù),尤其是不確定性數(shù)據(jù)的好手。 云計算,不必細說誰都知道是什么,人們多多少少都有所耳聞。云計算是繼20世紀80年代大型計算機到C/S轉(zhuǎn)變之后,IT界的又一次巨變,它通過互聯(lián)網(wǎng)將某計算任務分布到大量的計算機上,并可...
摘要:云計算是一種計算資源,集合了海量的數(shù)據(jù)處理,與大數(shù)據(jù)人工智能都有著緊密聯(lián)系,而粒計算正是處理海量數(shù)據(jù),尤其是不確定性數(shù)據(jù)的好手。 云計算,不必細說誰都知道是什么,人們多多少少都有所耳聞。云計算是繼20世紀80年代大型計算機到C/S轉(zhuǎn)變之后,IT界的又一次巨變,它通過互聯(lián)網(wǎng)將某計算任務分布到大量的計算機上,并可配置共享計算的資源池,且共享軟件資源和信息可以按需提供給用戶的一種技術。云計算真正作...
摘要:模塊化工業(yè)云計算架構(gòu)成功了實現(xiàn)資源按需分配,其計算存儲和能夠按照不同的應用需要,隨意組合出滿足不同計算需求的資源池,基于的產(chǎn)品在設計之初就將計算存儲和分解成不同的模塊,然后再根據(jù)具體應用的需要,將這些獨立的模塊按需配比組合成一個個物理實體。 全球智能云計算服務平臺、網(wǎng)關、嵌入式計算機及行業(yè)應用平臺MICA作為全新的ICT計算基礎架構(gòu),如何滿足資源按需分配的需求?英特爾如何在通信和網(wǎng)絡安全市...
摘要:云計算是什么大數(shù)據(jù)是什么云計算和大數(shù)據(jù)有什么區(qū)別云計算和大數(shù)據(jù)關聯(lián)又是什么估計很多人都不是很清楚這兩者到底代表什么。云計算和大數(shù)據(jù)的關系云計算是基礎,沒有云計算,無法實現(xiàn)大數(shù)據(jù)存儲與計算。云計算是什么?大數(shù)據(jù)是什么?云計算和大數(shù)據(jù)有什么區(qū)別?云計算和大數(shù)據(jù)關聯(lián)又是什么?估計很多人都不是很清楚這兩者到底代表什么。如果要了解云計算和大數(shù)據(jù)的意思和關系,那我們就要先對這兩個詞進行了解,分別了解兩者...
摘要:黑龍江也將發(fā)展云計算和大數(shù)據(jù)產(chǎn)業(yè)作為培育壯大新字號的重中之重。為此,來自黑龍江代表團的全國人大代表哈爾濱工業(yè)大學校長周玉建議,在黑龍江建立我國云計算和大數(shù)據(jù)產(chǎn)業(yè)基地。同時,黑龍江還進行了云計算和大數(shù)據(jù)產(chǎn)業(yè)基地建設的大量準備工作。全國人大代表、哈爾濱工業(yè)大學校長周玉。楊海全 攝我國將大數(shù)據(jù)產(chǎn)業(yè)作為重點發(fā)展的戰(zhàn)略性新興產(chǎn)業(yè),并將大數(shù)據(jù)產(chǎn)業(yè)生態(tài)體系建設列為發(fā)展重點之一。黑龍江也將發(fā)展云計算和大數(shù)據(jù)...
閱讀 1592·2021-11-24 10:17
閱讀 1105·2021-09-29 09:43
閱讀 2236·2021-09-23 11:21
閱讀 2352·2019-08-30 14:13
閱讀 1359·2019-08-29 13:58
閱讀 3302·2019-08-28 17:51
閱讀 1943·2019-08-26 13:29
閱讀 3046·2019-08-26 10:13