大數(shù)據(jù)分析和數(shù)據(jù)分析的區(qū)別和聯(lián)系有哪些？

        關(guān)于什么是大數(shù)據(jù)，IBM有一套著名的5V理論，即Volume(大量)、Velocity(高速)、Variety(多樣化)、Value(價(jià)值)和Veracity(真實(shí))。簡單地說，就是數(shù)據(jù)規(guī)模大、流動(dòng)快、種類多、來源廣、價(jià)值密度低，反映事物真實(shí)性的數(shù)據(jù)就是大數(shù)據(jù)。所以，或許Facebook每天要處理10TB的數(shù)據(jù)，這是一個(gè)龐大的數(shù)據(jù)量；這些數(shù)據(jù)每天都在快速變化，而且變化非常快；數(shù)據(jù)可以是文本、視頻、圖片，類型多樣；數(shù)據(jù)多而價(jià)值低；通過分析可以了解使用Facebook的人群是什么樣，這就是數(shù)據(jù)的真實(shí)性。今天，我們就來討論一下什么是大數(shù)據(jù)以及大數(shù)據(jù)分析和數(shù)據(jù)分析之間的差異和聯(lián)系。

明略數(shù)據(jù)

0

2條點(diǎn)評(píng)

咨詢產(chǎn)品

免費(fèi)試用

解決用戶選型困難的好軟件，有各維度的信息

客戶案例

20

合作品牌

暫無

大數(shù)據(jù)

什么是數(shù)據(jù)分析？

       數(shù)據(jù)分析是指用適當(dāng)?shù)慕y(tǒng)計(jì)分析方法對收集來的大量數(shù)據(jù)進(jìn)行分析，未提取有用信息和形成結(jié)論而對數(shù)據(jù)加以詳細(xì)研究和概括總結(jié)的過程。數(shù)據(jù)分析包含“數(shù)據(jù)”和“分析”兩個(gè)方面，一方面包括收集、加工和整理數(shù)據(jù)，另一方面也包括分析數(shù)據(jù)，從中提取有價(jià)值的信息并形成對業(yè)務(wù)有幫助的結(jié)論。數(shù)據(jù)分析的成果通常以分析報(bào)告的形式呈現(xiàn)。對于數(shù)據(jù)分析報(bào)告，分析就是論點(diǎn)，數(shù)據(jù)就是論據(jù)，兩者缺一不可。

傳統(tǒng)數(shù)據(jù)分析與大數(shù)據(jù)分析的三方面異同：

一、在分析方法上，兩者并沒有本質(zhì)不同

       數(shù)據(jù)分析的核心工作是人對數(shù)據(jù)指標(biāo)的分析、思考和解讀，人腦所能承載的數(shù)據(jù)量是極其有限的。所以，無論是“傳統(tǒng)數(shù)據(jù)分析”，還是“大數(shù)據(jù)分析”，均需要將原始數(shù)據(jù)按照分析思路進(jìn)行統(tǒng)計(jì)處理，得到概要性的統(tǒng)計(jì)結(jié)果供人分析。兩者在這個(gè)過程中是類似的，區(qū)別只是原始數(shù)據(jù)量大小所導(dǎo)致處理方式的不同。

二、在對統(tǒng)計(jì)學(xué)知識(shí)的使用重心上，兩者存在較大的不同

    “傳統(tǒng)數(shù)據(jù)分析”使用的知識(shí)主要圍繞“能否通過少量的抽樣數(shù)據(jù)來推測真實(shí)世界”的主題展開。“大數(shù)據(jù)分析”主要是利用各種類型的全量數(shù)據(jù)（不是抽樣數(shù)據(jù)），設(shè)計(jì)統(tǒng)計(jì)方案，得到兼具細(xì)致和置信的統(tǒng)計(jì)結(jié)論。

三、與機(jī)器學(xué)習(xí)模型的關(guān)系上，兩者有著本質(zhì)差別

   “傳統(tǒng)數(shù)據(jù)分析”在大部分時(shí)候，知識(shí)將機(jī)器學(xué)習(xí)模型當(dāng)黑盒工具來輔助分析數(shù)據(jù)。而“大數(shù)據(jù)分析”，更多時(shí)候是兩者的緊密結(jié)合，大數(shù)據(jù)分析產(chǎn)出的不僅是一份分析效果測評(píng)，后續(xù)基于此來升級(jí)產(chǎn)品。在大數(shù)據(jù)分析的場景中，數(shù)據(jù)分析往往是數(shù)據(jù)加墨的前奏，數(shù)據(jù)建模是數(shù)據(jù)分析的成果。

       以上是關(guān)于大數(shù)據(jù)分析和傳統(tǒng)數(shù)據(jù)分析之間的區(qū)別和聯(lián)系的一些內(nèi)容，相較于傳統(tǒng)的數(shù)據(jù)分析師，大數(shù)據(jù)分析工程師是針對日漸龐大的大數(shù)據(jù)而出現(xiàn)的一個(gè)適應(yīng)時(shí)代發(fā)展的新興職業(yè)，相較于傳統(tǒng)的數(shù)據(jù)分析師，大數(shù)據(jù)分析師需要掌握的技能更多，更復(fù)雜。但同樣的，因大數(shù)據(jù)的良好趨勢，大數(shù)據(jù)分析師的職業(yè)前景非常廣闊。