大數(shù)據被認為是下一個創(chuàng)新、競爭和生產力的前沿，誰率先抓住大數(shù)據的先機即意味著能夠在未來市場競爭之中取得桿位。當前大數(shù)據市場除了傳統(tǒng)廠商之外，還同時涌現(xiàn)出一大批創(chuàng)新技術廠商。
大數(shù)據被認為是下一個創(chuàng)新、競爭和生產力的前沿，誰率先抓住大數(shù)據的先機即意味著能夠在未來市場競爭之中取得桿位。當前大數(shù)據市場除了傳統(tǒng)廠商之外，還同時涌現(xiàn)出一大批創(chuàng)新技術廠商，并且像零售、金融、互聯(lián)網、政府機構、科研教育等行業(yè)用戶對于大數(shù)據的認知與認可大大超過了以往任何一項IT技術。歸根結底，這是因為大數(shù)據能夠對業(yè)務產生最直接的影響。因此，國內外用戶紛紛開始對采用、部署大數(shù)據解決方案或技術躍躍欲試，就像著名調研機構Garnter的技術發(fā)展規(guī)律周期（Hype Cycle）所述，大數(shù)據當前處于上升期和快速發(fā)展時期，人們當前對于大數(shù)據的期望值也是越來越高。從而使得很多用戶并不能夠冷靜思考和對待大數(shù)據，甚至一開始狂熱追求各種大數(shù)據分析技術與算法，這種本末倒置的做法最終很大可能會讓期望走向功虧一簣。俗話說，工欲善其事必先利其器，在大數(shù)據實踐之中，基礎架構就猶如基石一般，是構建一切的基礎，基礎架構基石不穩(wěn)，大數(shù)據“大廈將傾”，具有優(yōu)秀的基礎架構才能夠讓用戶在未來的大數(shù)據之路中越走越寬。
圖1 Garnter著名的技術發(fā)展規(guī)律周期圖
圖一：Garnter著名的技術發(fā)展規(guī)律周期（Hype Cycle）圖，每項技術的發(fā)展過程均可分為五個階段：上升期、快速發(fā)展期、下降期、爬坡期和穩(wěn)定應用期，當前大數(shù)據異�；鸨�，正在快速發(fā)展期。
大數(shù)據時代下的基礎架構挑戰(zhàn)
毫無疑問，大數(shù)據時代下，要想實現(xiàn)更大的業(yè)務價值，首先需要解決的就是基礎架構問題，基礎架構之中存儲又是重中之重。當前趨勢下，社交媒體、移動互聯(lián)網、物聯(lián)網、多媒體應用等趨勢興起使得非結構化、半結構化數(shù)據大幅增長，加上傳統(tǒng)的結構化數(shù)據增長，用戶的整體數(shù)據量呈現(xiàn)出海量、高增長的狀態(tài)。如何面對數(shù)據源繁多、數(shù)據增長速度快速、數(shù)據種類豐富化、數(shù)據存取形式復雜化以及應用需求多樣化就成為當前大部分用戶首要面對的挑戰(zhàn)和難題。
圖2 全球數(shù)據增長及類型分布情況的調研
圖二：全球知名調研機構IDC公司 對全球數(shù)據增長以及數(shù)據類型分布情況的調研與預測，未來幾年，數(shù)據增長會越來越快，其中非結構化、半結構化數(shù)據所占比重將會越來越大。
著名咨詢機構麥肯錫認為，大數(shù)據是指其大小超出了典型數(shù)據庫軟件的采集、存儲、管理和分析等能力的數(shù)據集。大數(shù)據公認的4V特征包括：容量、類型、速度以及價值（volume、variety、velocity和value）。著名調研機構IDC對于大數(shù)據技術定位為：通過高速捕捉、發(fā)現(xiàn)和/或分析，從大容量數(shù)據中獲取價值的一種新的技術架構。另外一方面，我們也可以發(fā)現(xiàn)當前對于大數(shù)據的一個誤區(qū)廣泛存在于用戶之中：當前仍然有很大一部分用戶認為新興起的Hadoop技術、商業(yè)智能分析（BI）這些就意味著大數(shù)據，他們認為掌控好Hadoop或者BI即可掌控大數(shù)據。事實上，大數(shù)據不僅僅是Hadoop或者商業(yè)智能分析，這些熱門技術是大數(shù)據分析和處理過程中當前熱門的領域，而要想真正實現(xiàn)大數(shù)據的價值、為業(yè)務發(fā)展服務，則需要從全面的角度考慮，比如：大數(shù)據不僅僅是海量小文件數(shù)據，那些容量巨大的文件數(shù)據同樣屬于大數(shù)據的范疇，你的基礎架構是否同時能夠快速、有效地應對不同類型、大小的文件數(shù)據的存儲、分析與處理呢？因此，對于用戶的基礎架構而言，在容量足夠大的數(shù)據存儲需求前提下，首先需要更高的速度和存儲效率來滿足海量數(shù)據存儲，從而可以滿足多樣性的數(shù)據要求，最終實現(xiàn)大數(shù)據存儲的價值。
圖3 大數(shù)據公認的4V特征
圖三：大數(shù)據公認的4V特征：容量、類型、速度以及價值，大數(shù)據這四個特征使得傳統(tǒng)基礎架構已經無法應對，要想實現(xiàn)價值這個環(huán)節(jié)，首先需要在基礎架構上做好充足的準備。
圖4 2012針對大數(shù)據應用需求的調查
圖四：計世資訊2012針對大數(shù)據應用需求的調查，在目前企業(yè)數(shù)據系統(tǒng)架構中主要存在著擴展性差、資源利用率低、應用部署復雜、運營成本高等問題。
因此，傳統(tǒng)存儲產品由于自身的設計缺陷，在擴展性方面、與上層應用集成度、高性能、自動化能力、成本等方面已經很難滿足大數(shù)據諸多的存儲特征，根本很難肩負起企業(yè)大數(shù)據存儲、分析以及應用的諸多需求。尤其當前數(shù)據的類型豐富程度、容量愈發(fā)變大的情況下，并且在業(yè)務部門跟IT日益緊密的趨勢下，對于數(shù)據的存儲與分析的速度和性能要求越來越高，對海量數(shù)據的快速、高效存儲絕對應該是大數(shù)據時代存儲系統(tǒng)的第一必備要求，否則大數(shù)據后續(xù)相關的數(shù)據分析、處理都將成為空談。對于用戶而言，尋求符合大數(shù)據時代下全新需求的存儲產品就成為大勢所趨。據悉，華為將于9月2號在上海世博中心舉辦云計算大會，其中海量存儲分論壇將于9月2號下午召開，該分論壇將重點討論大數(shù)據存儲發(fā)展趨勢和行業(yè)洞察。參會者將能了解到華為大數(shù)據存儲戰(zhàn)略以及大數(shù)據技術在石油、衛(wèi)星測繪等行業(yè)領域的應用，對于國內想了解大數(shù)據存儲相關內容的用戶將會是一次難得的良機。
看清大數(shù)據趨勢 不再霧里看花
在大數(shù)據時代下，大數(shù)據存儲產品顯然要比傳統(tǒng)存儲產品考慮更多因素，目前市場中已經有很多專門為大數(shù)據應用設計和開發(fā)的存儲系統(tǒng)，這其中包括國內和國外諸多廠商的產品。雖然有很多產品可供大家參考和選擇。但是對于用戶而言，能夠看清大數(shù)據基礎架構的發(fā)展趨勢，則可在基礎架構建設方面不再霧里看花。
趨勢一：容量大、易擴展。眾人皆知，大數(shù)據的容量往往是PB級別，甚至有些用戶的數(shù)據量開始達到EB級別，這要求未來的存儲系統(tǒng)能夠具備容量大、易擴展的特點。
趨勢二：高性能。大數(shù)據的一大特征即為速度，要求存儲系統(tǒng)能夠快速存儲數(shù)據，因此這要求存儲系統(tǒng)的響應速度能夠符合大數(shù)據的要求。
趨勢三：多集成。大數(shù)據時代下，數(shù)據來源廣泛與復雜，不同類型的數(shù)據訪問、處理和分析的方式不同，這就要求大數(shù)據時代下存儲系統(tǒng)的接口集成化，使得大數(shù)據存儲系統(tǒng)能夠應對不同的數(shù)據需求。
趨勢四：自動化。由于大數(shù)據使得數(shù)據量大幅增加以及數(shù)據處理流程、方式更加復雜，給存儲系統(tǒng)的管理、維護變得更加復雜。因此，管理自動化也是衡量大數(shù)據存儲系統(tǒng)的重要趨勢。
趨勢五：安全可靠。大數(shù)據最為核心的價值所在即為數(shù)據，因此確保數(shù)據的安全可靠也是大數(shù)據存儲需要重點考慮的因素。保證數(shù)據的可用性、完整性和持久化都是未來存儲系統(tǒng)所必備的趨勢。
趨勢六：彈性成本。大數(shù)據并不意味著用戶必須要在基礎架構上一次性投入大額成本，具有彈性、可擴展的存儲系統(tǒng)能夠幫助用戶實現(xiàn)彈性成本，讓不同層面的用戶都能在大數(shù)據浪潮中淘金。
綜述
追本溯源，在大數(shù)據時代下，我們往往不能只將眼光盯在數(shù)據分析與處理層面，用戶在嘗試大數(shù)據解決方案之前，更應從全面角度去審視自身的基礎架構是否適合大數(shù)據未來的需求與發(fā)展——大數(shù)據實踐，基礎架構先行。只有如此，方能在大數(shù)據浪潮之中淘得金！
核心關注：拓步ERP系統(tǒng)平臺是覆蓋了眾多的業(yè)務領域、行業(yè)應用，蘊涵了豐富的ERP管理思想，集成了ERP軟件業(yè)務管理理念，功能涉及供應鏈、成本、制造、CRM、HR等眾多業(yè)務領域的管理，全面涵蓋了企業(yè)關注ERP管理系統(tǒng)的核心領域，是眾多中小企業(yè)信息化建設首選的ERP管理軟件信賴品牌。
轉載請注明出處：拓步ERP資訊網http://m.lukmueng.com/
本文標題：大數(shù)據實踐 基礎架構先行
本文網址：http://m.lukmueng.com/html/consultation/10839311929.html
相關文章
