論商業(yè)數(shù)據(jù)對(duì)統(tǒng)計(jì)的挑戰(zhàn)與機(jī)遇

 

根據(jù)國(guó)際數(shù)據(jù)公司的相關(guān)研究，2011年全球數(shù)據(jù)產(chǎn)量達(dá)到1.8ZB，全球信息量每?jī)赡攴环琜1]。大數(shù)據(jù)時(shí)代，統(tǒng)計(jì)的發(fā)展既面臨挑戰(zhàn)，也面臨機(jī)遇。挑戰(zhàn)是指?jìng)鹘y(tǒng)統(tǒng)計(jì)方法現(xiàn)階段難以應(yīng)用大數(shù)據(jù)，機(jī)遇是指基于統(tǒng)計(jì)對(duì)大數(shù)據(jù)進(jìn)行處理和分析，使大數(shù)據(jù)具有可視化特征。因此，研究大數(shù)據(jù)對(duì)統(tǒng)計(jì)學(xué)的挑戰(zhàn)和機(jī)遇具有重要的現(xiàn)實(shí)意義。1. 大數(shù)據(jù)及其目的目前，對(duì)大數(shù)據(jù)的定義還不是很明確。隨著信息的不斷膨脹，傳統(tǒng)計(jì)算機(jī)原有的存儲(chǔ)空間無(wú)法承載新處理的數(shù)據(jù)，產(chǎn)生了新興的數(shù)據(jù)處理技術(shù)，如yahoo的Hadoop平臺(tái)、谷歌的MapReduce等。這種技術(shù)可以消除僵化的層次結(jié)構(gòu)和一致性，促進(jìn)數(shù)據(jù)在沒(méi)有常規(guī)數(shù)據(jù)庫(kù)表的情況下進(jìn)行排列，大大增加了人們可以處理[1]的數(shù)據(jù)量。