卅思大數據

數據時代，誰掌握了足夠的數據，誰就有可能掌握未來。數據的背后隱藏著信息，而信 息之中蘊含著知識和智慧。幾乎任何規模企業，每時每刻也都在產生大量的數據，但這些數 據如何歸集、提煉始終是一個困擾。大數據作為具有潛在價值的原始數據資產，只有通過深 入分析才能挖掘出其中蘊含的信息、知識和智慧。大數據時代處理數據的三大轉變：要全體 不要抽樣，要效率不要絕對精確，要相關不要因果。未來人們的決策將日益依賴于大數據分 析的結果，而非單純的經驗和直覺，因此，大數據分析是大數據研究領域的核心內容之一。 技術框架: 數據采集 大數據的采集是指利用數據采集工具如 Flume、Kettle 等對多個數據源的 數據進行收集，并進行預處理以存儲到大數據平臺上。數據收集過程就是數據這一將來的流 動資產積累。 數據存儲 大數據的存儲是指利用分布式的存儲工具如面向非結構化的 HDFS、文檔結 構化的 MongoDB 以及面向消息流的 Kafka 進行海量數據的存儲。