大數(shù)據(jù)基礎(chǔ)架構(gòu)構(gòu)建為堆棧式技術(shù)架構(gòu)，包括：1、基礎(chǔ)層。2、管理層；本層既包括數(shù)據(jù)的存儲(chǔ)和管理，也涉及數(shù)據(jù)的計(jì)算。3、分析層；提供基于統(tǒng)計(jì)學(xué)的數(shù)據(jù)挖掘和機(jī)器學(xué)習(xí)算法，用于分析和解釋數(shù)據(jù)集，幫助企業(yè)獲得對(duì)數(shù)據(jù)價(jià)值深入的領(lǐng)悟。4、應(yīng)用層。

本教程操作環(huán)境：windows7系統(tǒng)、Dell G3電腦。

大數(shù)據(jù)基礎(chǔ)架構(gòu)構(gòu)建為堆棧式技術(shù)架構(gòu)，包括：基礎(chǔ)層、管理層、分析層、應(yīng)用層。

大數(shù)據(jù)的四層堆棧式技術(shù)架構(gòu)：

1、基礎(chǔ)層

第一層作為整個(gè)大數(shù)據(jù)技術(shù)架構(gòu)基礎(chǔ)的最底層，也是基礎(chǔ)層。要實(shí)現(xiàn)大數(shù)據(jù)規(guī)模的應(yīng)用，企業(yè)需要一個(gè)高度自動(dòng)化的、可橫向擴(kuò)展的存儲(chǔ)和計(jì)算平臺(tái)。這個(gè)基礎(chǔ)設(shè)施需要從以前的存儲(chǔ)孤島發(fā)展為具有共享能力的高容量存儲(chǔ)池。容量、性能和吞吐量必須可以線(xiàn)性擴(kuò)展。

云模型鼓勵(lì)訪(fǎng)問(wèn)數(shù)據(jù)并提供彈性資源池來(lái)應(yīng)對(duì)大規(guī)模問(wèn)題，解決了如何存儲(chǔ)大量數(shù)據(jù)，以及如何積聚所需的計(jì)算資源來(lái)操作數(shù)據(jù)的問(wèn)題。在云中，數(shù)據(jù)跨多個(gè)節(jié)點(diǎn)調(diào)配和分布，使得數(shù)據(jù)更接近需要它的用戶(hù)，從而可以縮短響應(yīng)時(shí)間和提高生產(chǎn)率。

2、管理層

要支持在多源數(shù)據(jù)上做深層次的分析，大數(shù)據(jù)技術(shù)架構(gòu)中需要一個(gè)管理平臺(tái)，使結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)管理為一體，具備實(shí)時(shí)傳送和查詢(xún)、計(jì)算功能。本層既包括數(shù)據(jù)的存儲(chǔ)和管理，也涉及數(shù)據(jù)的計(jì)算。并行化和分布式是大數(shù)據(jù)管理平臺(tái)所必須考慮的要素。

3、分析層

大數(shù)據(jù)應(yīng)用需要大數(shù)據(jù)分析。分析層提供基于統(tǒng)計(jì)學(xué)的數(shù)據(jù)挖掘和機(jī)器學(xué)習(xí)算法，用于分析和解釋數(shù)據(jù)集，幫助企業(yè)獲得對(duì)數(shù)據(jù)價(jià)值深入的領(lǐng)悟?？蓴U(kuò)展性強(qiáng)、使用靈活的大數(shù)據(jù)分析平臺(tái)更可成為數(shù)據(jù)科學(xué)家的利器，起到事半功倍的效果。

4、應(yīng)用層

大數(shù)據(jù)的價(jià)值體現(xiàn)在幫助企業(yè)進(jìn)行決策和為終端用戶(hù)提供服務(wù)的應(yīng)用。不同的新型商業(yè)需求驅(qū)動(dòng)了大數(shù)據(jù)的應(yīng)用。反之，大數(shù)據(jù)應(yīng)用為企業(yè)提供的競(jìng)爭(zhēng)優(yōu)勢(shì)使得企業(yè)更加重視大數(shù)據(jù)的價(jià)值。新型大數(shù)據(jù)應(yīng)用對(duì)大數(shù)據(jù)技術(shù)不斷提出新的要求，大數(shù)據(jù)技術(shù)也因此在不斷的發(fā)展變化中日趨成熟。

想要查閱